cheerio模組抓取的是網頁源**（大部分的抓取資料都是這樣的），因此 這裡就抓取不到js動態生成的dom元素，查了很久，方法很少，大致是:
2.還有一種是使用selenium 這個我也沒接觸過 具體就自己查吧（ps:畢竟本人也是萌新，而且我的重點不是這裡，就暫時不深究啦）
3.模擬瀏覽器發請求獲取資料 ，自己構造請求頭和引數，這裡的請求頭是重點 裡面還包括cookie之內的東西
4.使用puppeteer模組 由谷歌團隊維護的 我後面的幾個文章裡面會用
爬取JS動態生成的table 表單
user bin env python coding utf 8 author holley file getlegaldata.py datetime 20 11 2018 22 16 import re import csv from bs4 import beautifulsoup from ...
網路爬蟲 爬取動態網頁
import requests from bs4 import beautifulsoup res requests.get res.encoding utf 8 soup beautifulsoup res.text,html.parser commentcount soup.select one...
20171012 動態爬蟲爬取預約掛號有號資訊
目標 針對醫院有些醫生有預約號不確定時間點有號，晚了就掛不到了，能有個監測爬去，有號就提醒的機制。可能會用到 scrapy phantomjs selenium 環境 windows10 vs 2015 python 2.7 安裝 scrapy 建立專案 命令提示符 介面 使用語句 scrapy s...