多站点RSS新闻正文抓取,导入discuz论坛,自动发帖的实现(一)
RSS抓取新闻正文。
公司研发部不能上外网,但是公司又希望研发的同事能关注下新闻,了解科技热点,跟上时代潮流。所以搭建了一个discuz论坛, 但内容匮乏。幸运的是搭这台论坛的服务器可以上网的(在两个网络里面)。所以想着要我做一个爬虫工具,通过rss把新闻内容,抓取过来放到公司论坛。
现在已经实现了,同时抓取多个网站上面的数据(IT之家,虎嗅网等等)。
原创
2013-11-06 16:04:26 ·
7739 阅读 ·
5 评论