資料抓取,資料分析

2021-10-08 02:30:44 字數 4023 閱讀 8210

//seo優化分析

#region seo優化分析

string evaluate_1 = "//*[@id='evaluate_1']";

htmlnode html_evaluate_1 = document.documentnode.selectsinglenode(evaluate_1);

yhfx_evaluate_1 = html_evaluate_1.innertext;

string evaluate_2 = "//*[@id='evaluate_2']";

htmlnode html_evaluate_2 = document.documentnode.selectsinglenode(evaluate_2);

yhfx_evaluate_2 = html_evaluate_2.innertext;

string evaluate_3 = "//*[@id='evaluate_3']";

htmlnode html_evaluate_3 = document.documentnode.selectsinglenode(evaluate_3);

yhfx_evaluate_3 = html_evaluate_3.innertext;

string evaluate_4 = "//*[@id='evaluate_4']";

htmlnode html_evaluate_4 = document.documentnode.selectsinglenode(evaluate_4);

yhfx_evaluate_4 = html_evaluate_4.innertext;

string evaluate_5 = "//*[@id='evaluate_5']";

htmlnode html_evaluate_5 = document.documentnode.selectsinglenode(evaluate_5);

yhfx_evaluate_5 = html_evaluate_5.innertext;

string evaluate_6 = "//*[@id='evaluate_6']";

htmlnode html_evaluate_6 = document.documentnode.selectsinglenode(evaluate_6);

yhfx_evaluate_6 = html_evaluate_6.innertext;

string evaluate_7 = "//*[@id='evaluate_7']";

htmlnode html_evaluate_7 = document.documentnode.selectsinglenode(evaluate_7);

yhfx_evaluate_7 = html_evaluate_7.innertext;

#endregion

//左邊三個層

#region 左邊三個層

string module_columns_left = "//*[@class='module-columns z-fl']";

htmlnodecollection module_columns_left_list = document.documentnode.selectnodes(module_columns_left);

if (module_columns_left_list != null)

//全網指數

string qwzxpath = "//div/span";

htmlnode qwzxpath_node = documentlihtml.documentnode.selectsinglenode(qwzxpath);

if (qwzxpath_node != null)

else

//長尾詞數

string cwcspath = "//div/span/a";

htmlnode cwcspath_node = documentlihtml.documentnode.selectsinglenode(cwcspath);

if (cwcspath_node != null)

else}}

}}}#endregion

//右邊三個層

#region 右邊三個層

string module_columns_right = "//*[@class='module-columns z-fr']";

htmlnodecollection module_columns_right_list = document.documentnode.selectnodes(module_columns_right);

if (module_columns_right_list != null)

//div  ul  li  class='row listx clearfix'

string module_columns_left_li = "//*[@class='row listx clearfix']";

if (changweiguanjianci == "搜尋引擎競價")

else

htmlnodecollection module_columns_left_li_list = documentchild.documentnode.selectnodes(module_columns_left_li);

if (module_columns_left_li_list != null)

//公司名稱

string seo_bidding_company_path = "//*[@class='col-11']/p[1]";

htmlnode seo_bidding_company_path_node = documentlihtml.documentnode.selectsinglenode(seo_bidding_company_path);

if (seo_bidding_company_path_node != null)

//公司**

string seo_bidding_domain_path = "//*[@class='col-11']/p[2]";

htmlnode seo_bidding_domain_path_node = documentlihtml.documentnode.selectsinglenode(seo_bidding_domain_path);

if (seo_bidding_domain_path_node != null)

//全網指數

string qwzxpath = "//div/span";

htmlnode qwzxpath_node = documentlihtml.documentnode.selectsinglenode(qwzxpath);

if (qwzxpath_node != null)

else

//長尾詞數

string cwcspath = "//div/span/a";

htmlnode cwcspath_node = documentlihtml.documentnode.selectsinglenode(cwcspath);

if (cwcspath_node != null)

else}}

}}}#endregion

抓取Web網頁資料分析

這文章好,我轉了,然後,我寫好,放源 到我站上,給大家共享 先只轉文章 謝謝 秋雨大哥的文章 這類文章,網上不易找啦。特別是vs2005的。原文如下 抓取web網頁資料分析 通過程式自動的讀取其它 網頁顯示的資訊,類似於爬蟲程式。比方說我們有乙個系統,要提取baidu 上歌曲搜尋排名。分析系統在根據...

抓取Web網頁資料分析

通過程式自動的讀取其它 網頁顯示的資訊,類似於爬蟲程式。比方說我們有乙個系統,要提取baidu 上歌曲搜尋排名。分析系統在根據得到的資料進行資料分析。為業務提供參考資料。為了完成以上的需求,我們就需要模擬瀏覽器瀏覽網頁,得到頁面的資料在進行分析,最後把分析的結構,即整理好的資料寫入資料庫。那麼我們的...

抓取Web網頁資料分析

通過程式自動的讀取其它 網頁顯示的資訊,類似於爬蟲程式。比方說我們有乙個系統,要提取baidu 上歌曲搜尋排名。分析系統在根據得到的資料進行資料分析。為業務提供參考資料。1 傳送httprequest請求。2 接收httpresponse返回的結果。得到特定頁面的html原始檔。3 取出包含資料的那...