2014年06月_Mr.wu的博客

12月 11月 10月 09月 08月 07月 06月 04月 03月 02月 01月

转载 IP头结构详解

版本号（Version）：长度4比特。标识目前采用的IP协议的版本号。一般的值为0100（IPv4），0110（IPv6） IP包头长度（Header Length）：长度4比特。这个字段的作用是为了描述IP包头的长度，因为在IP包头中有变长的可选部分。该部分占4个bit位，单位为32bit（4个字节），即本区域值= IP头部长度（单位为bit）/(8*4)，因此，一个IP包头的长度最长为“

2014-06-27 16:23:38 767

转载 Windows7 （64位）系统下安装Scrapy详细教程

环境 Windows7 64位Python2.7.6 64位 Python的安装：打开http://www.python.org/getit/releases/2.7.6/页面，下载Python-2.7.6.amd64.msi 进行安装，安装完成后，需要配置环境变量，环境变量的配置可以参考该文章测试python是否安装成功，如果python成功安装并且配置好

2014-06-22 14:08:09 2373 4

转载 Scrapy入门教程

关键字：scrapy 入门教程爬虫 Spider 作者：http://www.cnblogs.com/txw1958/ 出处：http://www.cnblogs.com/txw1958/archive/2012/07/16/scrapy-tutorial.html 在这篇入门教程中，我们假定你已经安装了Scrapy。如果你还没有安装，那么请参考安装指南。我们将使用开

2014-06-05 11:56:08 1070

转载 [Python]网络爬虫（12）：爬虫框架Scrapy的第一个爬虫示例入门教程

（建议大家多看看官网教程：教程地址）我们使用dmoz.org这个网站来作为小抓抓一展身手的对象。首先先要回答一个问题。问：把网站装进爬虫里，总共分几步？答案很简单，四步：新建项目 (Project)：新建一个新的爬虫项目明确目标（Items）：明确你想要抓取的目标制作爬虫（Spider）：制作爬虫开始爬取网页存储内容（Pipeli

2014-06-04 19:46:26 7209

转载 Scrapy安装介绍

Scrapy安装介绍一、 Scrapy简介 Scrapy is a fast high-level screen scraping and web crawling framework, used to crawl websites and extract structured data from their pages. It can be used for a wide

2014-06-04 19:10:27 765