def load_data():
url = 「
#get的請求
#http的請求
response = urllib.request.urlopen(url)
print(response)
data = response.read()
print(data)
str_data = data.decode(「utf-8」)
print(str_data)
#將資料寫入檔案
#python爬取的型別：str bytes
#如果爬取回來的是bytes型別l但是你要寫入的時候要字串decode（「utf-8」）
#如果爬取回來的是str型別l但是你要寫入的時候要字串encode（「utf-8」）
load_data()
因為之前學過一些python，所以做起來比較容易。想學python基礎的可以用這個**：
是廖雪峰的教程，很適合入門
爬蟲課程一（爬蟲的概念與HTTP的複習）
目前在學習爬蟲的課程 以下小坐總結 第一天主要看了以寫爬蟲的原理以及爬蟲資料的抓取 一 1.1 為什麼學習爬蟲 最主要的是在目前看來，爬蟲工程師屬於緊缺型人才，並且薪資待遇普遍較高 1，學習爬蟲，可以私人定製乙個搜尋引擎。2，大資料時代，要進行資料分析，首先要有資料來源 3，對於很多seo從業者來說...
01 爬蟲課程概述
課程介紹 1.python的基本語法知識 2.如何抓取html頁面 http請求的樹立,urllib,urllib2,requests 處理後的請求可以模擬瀏覽器傳送請求,獲取伺服器響應的檔案 3.解析響應頁面的內容 re xpath beautifulsoup4 bs4 jsonpath pyqu...
Python學爬蟲的課程備忘
至於版權，那還是算嵩老師的。crawunivrankingb.py import requests from bs4 import beautifulsoup import bs4 def gethtmltext url try r requests.get url,timeout 30 r.rai...