社區(qū)網(wǎng)絡(luò)爬蟲的設(shè)計(jì)與實(shí)現(xiàn)
2012-04-29 00:44:03郭濤黃銘鈞
智能計(jì)算機(jī)與應(yīng)用 2012年4期
郭濤 黃銘鈞
摘要： 社區(qū)互聯(lián)網(wǎng)是以用戶創(chuàng)造內(nèi)容為主的新型互聯(lián)網(wǎng)，具有很高的統(tǒng)計(jì)價值， 由于權(quán)限和數(shù)據(jù)更新頻繁等限制，傳統(tǒng)的網(wǎng)絡(luò)爬蟲很難獲取這一部分?jǐn)?shù)據(jù)，設(shè)計(jì)并實(shí)現(xiàn)了一種可以自動登錄并可以根據(jù)更新頻率快慢智能抓取數(shù)據(jù)的爬蟲，不同于以往爬蟲以頁面為粒度，該爬蟲以人為最小粒度，并以人與人之間的關(guān)系為抓取依據(jù)，在獲取這類數(shù)據(jù)上有很好的性能。
關(guān)鍵詞：
中圖分類號：TP31文獻(xiàn)標(biāo)識碼：A文章編號：2095-2163（2012）04-0065-03
猜你喜歡
房地產(chǎn)導(dǎo)刊(2022年10期)2022-10-18 08:03:52
現(xiàn)代信息科技(2021年21期)2021-05-07 02:54:12
電子測試(2018年1期)2018-04-18 11:53:04
電子制作(2017年9期)2017-04-17 03:00:46
課程教育研究·學(xué)法教法研究(2016年8期)2016-06-14 15:21:38
課程教育研究·學(xué)法教法研究(2015年7期)2015-05-30 10:48:04
城市建設(shè)理論研究(2014年37期)2014-12-25 01:25:26
潤滑油(2014年3期)2014-11-07 14:30:02
科教導(dǎo)刊(2014年14期)2014-06-20 04:03:27
中國科技博覽(2014年14期)2014-04-30 10:07:19
