segmentfault 上的很多線下技術交流活動都很好,我自己也參加過一些,就比較好奇這些活動都有哪些特點,比如說:
主要分兩個部分:爬蟲抓取部分、資料展示部分
確定要抓取的資料有哪些。
包括:活動名稱、舉辦時間(日期、星期)、城市、活動目前狀態等等。
於是,寫了個簡單的爬蟲把這些資料都拿到手,分析了一下。
這裡主要是結合beautifulsoup
來確定資料;
確定要抓取的資料後儲存在mysql
中,語句如下:
create table `blog`.`` (
`id` int(11) not null auto_increment,
`name` varchar(100) not null,
`c_date` varchar(20) not null,
`week` varchar(8) not null,
`week_number` int(11) not null,
`city` varchar(20) not null,
`icon` varchar(100) not null,
`status` varchar(10) not null,
`detail` varchar(100) not null,
`join_link` varchar(100) not null,
`link` varchar(100) not null,
primary key (`id`)
) engine=`innodb` auto_increment=1708 default character set utf8
collate utf8_general_ci row_format=compact checksum=0 delay_key_write=0;
使用scrapy
框架,**在這:爬蟲部分**。
以上!
Segment fault 常見原因
1.引用空指標 2.野指標 3.訪問越界 造成的原因有多種 主觀原因 1.新申請指標忘記賦null,也忘記分配空間,直接使用造成非法訪問。2.為指標賦值時,位址經過計算而來。計算過程有問題,導致賦值的位址不正確,比如位址經過計算涉及到型別轉換之類操作,很容易因為型別轉換造成截斷。客觀原因 3.儲存指...
開啟我的segmentfault之旅
也不知道想說些啥,工作一年多的時間吧。總體來說,收貨不是很大,還是需要自己私下多多開闊一些視野,那怕是去死鑽那些最基礎的知識也好,第一篇,就說說自己的缺點吧。下面是自己寫的乙個工具類中的方法,測試一下sf是不是像廣大愛好者說的那麼的好用。方法名稱 arrayinsertarray 描述 陣列插入到另...
段錯誤(Segment Fault )莫名的問題
段錯誤或段違規 segmentation violation 應該已經很清楚,之前有過一篇文章介紹過 段模型 在一般硬體中,段錯誤是由於 記憶體管理單元 負責支援虛擬記憶體的硬體 的異常所致,而該異常則通常是由於解除引用乙個未初始化或非法值的指標引起的。如果指標引用乙個並不位於你的位址空間中的位址,...