這裡用到工具有requests庫,beautifulsoup庫
可以用瀏覽器的開發者模式找到其中的**,也可以用infolite外掛程式。
**:
import requests
from bs4 import beautifulsoup
res = requests.get("")
soup = beautifulsoup(res.text)
for item in soup.select('.s-item-container'):
print(item.select('.a-text-bold')[0].text)
print(item.select('.a-size-base')[0].text.strip())
print()
得到的結果是:第乙個是**,第二個是杯子的名字:
¥176.00【官方授權】幹唐軒活瓷 300ml 快樂曲線隨身杯 陶瓷杯泡茶杯水杯子隨手杯 精美禮盒裝+手提袋 (粉紅釉)
¥128.00
利和陶瓷 太極杯(茶青釉)陶瓷茶杯 辦公杯 茶具 帶蓋的杯子 手工製作 個性定製 專屬私享 送禮佳品
¥39.00
hero 骨瓷咖啡杯 陶瓷馬克杯 家用大容量單杯簡約咖啡杯 400ml
¥39.80
創意潮流陶瓷杯子帶蓋勺情侶馬克杯大容量喝水杯辦公室可愛咖啡杯幾何杯 (藍色)
¥42.00
沐和創意咖啡馬克杯 陶瓷情侶對杯 帶蓋辦公牛奶茶水杯 (初春(送吸管&鋼勺&杯墊))
¥55.00
棲鳳居過濾泡茶杯 馬克杯手繪陶瓷茶杯帶蓋辦公杯水杯 功夫茶具大號茶杯 (佛手荷花)
¥119.00
babywhale鯨魚寶貝 母嬰電燉杯 媽媽調理養生杯【天然陶瓷內膽/確保健康 耐腐蝕、耐高溫、壽命長、高效節能】電熱杯 水杯分體 迷你加熱【文火慢燉 濃縮營養 三擋旋鈕控溫】保溫杯 辦公室熱奶器 陶瓷燉電熱養生杯【便捷易用 清洗方便】 (顏色)
¥603.72
hermes h deco陶瓷馬克杯 300ml 037031p
¥159.30
pusheen 3d 杯帶蓋,陶瓷,灰色 / 公尺色,13.5 x 10 x 12 cm
¥32.00
利和陶瓷骨瓷咖啡杯皇室杯陶瓷杯子 茶杯花茶杯歐式下午茶杯子英式咖啡杯 水杯牛奶杯送精美骨瓷小勺子 (眷戀皇室杯)
¥79.00
梓揚 茶具套裝 防燙6人杯 功夫茶具陶瓷茶壺公道茶杯整套 青瓷龍把壺套裝
¥38.00
麥格士 日計畫杯 寫字創意陶瓷水杯子 可擦可寫 大容量馬克杯 新玉瓷牛奶杯 辦公室效率助手記事杯450ml 計畫 監督 效率
¥139.90
g&w 鑲施華洛世奇水晶創意情侶馬克杯 陶瓷水杯 星月傳奇系列 (星月對杯)
¥29.00
京韻堂陶瓷水杯 仿搪瓷懷舊杯子茶缸 景德鎮個性陶瓷杯 辦公室茶杯復古茶缸子馬克杯子 廣闊天地 大有作為
¥268.00
茶知公尺 黑白流韻 功夫茶具套裝 陶瓷旅行茶具 日式提梁壺 茶具禮盒套裝 (1壺4杯1茶盤)
¥78.14
茶こし 付花色彩的乙個人咖啡馬克杯陶瓷日式餐具食器茶杯
¥68.00
利和陶瓷景德鎮瓷器龍井蓋杯會議杯子骨瓷餐具 辦公室杯陶瓷茶杯 可進微波爐加熱健康環保帶蓋陶瓷杯子
¥89.00
英國tomic特美刻杯子陶瓷水杯可愛創意馬克杯帶蓋咖啡杯牛奶杯1bpm1316 400ml
¥89.06
pusheen 陶瓷旅行杯 – 圖案,多種顏色
¥115.10
茶こし 付的 : 乙個人的咖啡館陶瓷日式餐具馬克杯帶蓋馬克杯禮品
¥63.40
みのる 土耳其陶器十草馬克杯
¥88.53
有田燒水杯子貓(上) id - 57 – 01
¥45.00
fresh & lock創意復仇者英雄聯盟陶瓷杯早餐牛奶咖啡辦公馬克杯子 (美國隊長)
¥78.00
nici commanders 太空人陶瓷馬克杯9.5 x 10 cm
簡單的爬蟲
參考xlzd的知乎專欄 encoding utf 8 from bs4 import beautifulsoup import requests import codecs download url requests模擬http協議中的get請求,用於獲取目標 的原始碼 def download p...
簡單的爬蟲
這幾天來一直在做爬蟲的工作,除了因為開始因為不熟悉爬蟲所以學的時候比較花時間之外,其他大多數時候都還是比較順利,中間除了遇到xpath的問題,其他就還好。就我目前的理解而言爬蟲總共是分為三個步驟。1.通過url獲取網頁 2.獲取網頁之後對網頁進行解析 3.將解析之後需要的內容存貯起來 獲取網頁 這一...
簡單的爬蟲
好久沒有上傳新的部落格了,上上週寫出了爬蟲,但是因為偷懶和末考,一直到今天才回來寫有關這個爬蟲的部落格。原來不了解爬蟲的時候感覺爬蟲好高大上啊,做了之後才發現.哦,好簡單.還有,在這裡要感謝一下虎撲大大,感謝他沒有封我的ip.其實爬蟲很簡單,用到了httpclient還有htmlparser.對ht...