selenium是乙個web測試應用框架也可以拿來做爬蟲。
1.安裝selenium模組
pip install -u selenium
2.安裝selenium模組後需要有相應的瀏覽器驅動
a.使用phantomjs
phantomjs是無介面的測試瀏覽器
我用的是phantomjs-2.1.0-linux-x86_64只要直接使用phantomjs-2.1.0-linux-x86_64資料夾裡面的額phantonjs就可以了
1from selenium import
webdriver
23 driver = webdriver.phantomjs('
/home/xx/xx/phantomjs-2.1.0-linux-x86_64/bin/phantomjs
')##裡面是phantomjs的位址
4 driver.get("
")
這樣就可以直接使用driver操作無介面的瀏覽器了
b.有見面的chrome瀏覽器安裝配置
首先需要安裝chrome瀏覽器 和配置相關環境
wget
sudo dpkg -i google-chrome*.deb
sudo apt-get install -f
sudo apt-get install xvfb
sudo apt-get install unzip
wget -n
unzip chromedriver_linux64.zip
chmod +x chromedriver
sudo mv -f chromedriver /usr/local/share/chromedriver
sudo ln -s /usr/local/share/chromedriver /usr/local/bin/chromedriver
sudo ln -s /usr/local/share/chromedriver /usr/bin/chromedriver
安裝相關selenimu
測試**sudo apt-get install python-pip
pip install pyvirtualdisplay selenium
1from pyvirtualdisplay import
display
2from selenium import
webdriver
3 driver =webdriver.chrome()
4 driver.get('')
5print driver.title
版本對應資訊:
Python Selenium環境搭建
安裝python 設定 python 的環境變數 安裝目錄 安裝目錄 scripts 使用 pip安裝 selenium pip install selenium 安裝完python pip工具,在安裝目錄的 scripts 目錄下。在 dos下直接執行 pip install selenium 即...
Python Selenium 學習筆記
1 判斷元素是否存在 try driver.find element.xx a true except a false if a true print 元素存在 elif a false print 元素不存在 2 判斷元素是否顯示 driver.find element by id outputb...
Python Selenium錯誤小結
因為要使用web應用,所以開始用起了,selenium包,安裝倒是挺容易的,但就是出了很多bug。filenotfounderror winerror 2 系統找不到指定的檔案。通過錯誤反饋發現是要把該軟體加到路徑裡面,但是,設定了系統環境變數後發現還是不行,最後,使用了乙個非常原始的方法 brow...