社区网络爬虫的设计与实现
2012-04-29 00:44郭涛黄铭钧
智能计算机与应用 2012年4期
郭涛 黄铭钧
摘要： 社区互联网是以用户创造内容为主的新型互联网，具有很高的统计价值， 由于权限和数据更新频繁等限制，传统的网络爬虫很难获取这一部分数据，设计并实现了一种可以自动登录并可以根据更新频率快慢智能抓取数据的爬虫，不同于以往爬虫以页面为粒度，该爬虫以人为最小粒度，并以人与人之间的关系为抓取依据，在获取这类数据上有很好的性能。
关键词：
中图分类号：TP31文献标识码：A文章编号：2095-2163（2012）04-0065-03
猜你喜欢
房地产导刊(2022年10期)2022-10-18
现代信息科技(2021年21期)2021-05-07
电子测试(2018年1期)2018-04-18
电子制作(2017年9期)2017-04-17
课程教育研究·学法教法研究(2016年8期)2016-06-14
课程教育研究·学法教法研究(2015年7期)2015-05-30
城市建设理论研究(2014年37期)2014-12-25
润滑油(2014年3期)2014-11-07
科教导刊(2014年14期)2014-06-20
科教导刊(2014年6期)2014-03-17
