phantomjs笔记

一、基本简介(1)一个基于webkit内核的无头浏览器,即没有UI界面,即它就是一个浏览器,只是其内的点击、翻页等人为相关操作需要程序设计实现。 (2)提供JavaScript API接口,即通过编写js程序可以直接与webkit内核交互,在此之上可以结合Java语言等,通过java调用js等相关...

2017-02-28 21:59:25

阅读数:167

评论数:0

Python模块Collection——OrderedDict

OrderedDict 有序字典OrderedDict

2017-02-27 16:26:58

阅读数:227

评论数:0

Scrapy中的Rules理解

Scrapy CrawlSpider Rules

2017-02-25 15:06:20

阅读数:10707

评论数:2

Scrapy爬取图片: raise ValueError('Missing scheme in request url: %s' % self._url)

Scrapy爬取图片 raise ValueError('Missing scheme in request url: %s' % self._url)

2017-02-13 13:42:27

阅读数:3900

评论数:1

笔记:scrapy爬取的数据存入MySQL,MongoDB

scrapy爬取的数据存入mysql,mongoDB

2017-02-11 11:06:20

阅读数:3515

评论数:1

Python scrapy插入mysql的一个错误TypeError

插入数据库本来是一个很简单的问题:         sql="insert into p1(url) values (%s)"         list=(item['url'])            try:             cur.execute(s...

2017-02-11 10:08:35

阅读数:553

评论数:0

使用pycharm,scarpy爬取数据

http://www.bubuko.com/infodetail-1533174.html

2017-02-07 11:39:49

阅读数:1889

评论数:0

Scrapy+Mongodb爬取数据

Scrapy爬虫数据存到mongodb中       其实主要是前两步 1、在settings.py中进行配置 ITEM_PIPELINES = {    'dmoz.pipelines.DmozPipeline': 300, } MONGODB_HOST = '127.0.0...

2017-02-07 11:33:35

阅读数:807

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭