要写个程序抓取网站关键字,为此使用Scrapy。
不用不知道,一用吓一跳,我勒个去,一大堆的插件要装啊。下面简述一下吧:
1:Twisted
2:zope.interface
3:w3lib.http
4:lxml.html
5:cssselect
当然,中间还装了一些其他的,我也记不清了。反正遇山翻山,遇水渡水吧。唉。只是时间耗了不少啊。
要写个程序抓取网站关键字,为此使用Scrapy。
不用不知道,一用吓一跳,我勒个去,一大堆的插件要装啊。下面简述一下吧:
1:Twisted
2:zope.interface
3:w3lib.http
4:lxml.html
5:cssselect
当然,中间还装了一些其他的,我也记不清了。反正遇山翻山,遇水渡水吧。唉。只是时间耗了不少啊。