準備工作：
配置網路，確認手機和pc處於同一區域網下，並配置好**服務
安裝證書，確保可以抓取https的請求資訊。
安裝並開啟mongodb資料庫。
抓取分析：
抓取資訊格式為json格式。具體如下圖所示
#連線mongodb資料庫jddb，選擇集合shop
#client = pymongo.mongoclient('localhost')
#db = client['jddb']
#collection = db['shop']
def response(flow):
#global collection
url = ''
if flow.request.url.startswith(url):
text = flow.response.text
data = json.loads(text)
shops = data.get('wareinfo')
for shop in shops:
item =
ctx.log.info(str(item))
#寫入mongodb資料庫
#collection.insert(data)
爬取京東商品資訊
爬取京東商品資訊 from selenium import webdriver from selenium.webdriver import chromeoptions from selenium.webdriver import actionchains from selenium.webdriv...
python 爬取京東商品資訊
coding utf 8 import os import re import time from urllib.parse import urlencode import requests from lxml import etree import pymysql from time import...
爬取京東商城商品資訊
from selenium import webdriver from selenium.webdriver import actionchains 獲取屬性 from selenium.webdriver.common.keys import keys from selenium.webdrive...