爬虫基础
勿曰
这个作者很懒,什么都没留下…
展开
-
爬虫基础——scrapy基本使用
scrapy支持Python2.7和python3.4以上版本。 python包可以用全局安装(也称为系统范围),也可以安装咋用户空间中。 Windows 1.在https://www.lfd.uci.edu/~gohlke/pythonlibs/下载对应的Twisted的版本文件 2. 在命令行进入到Twisted的目录 执行pip install 加Twisted文件名 3.执行pip in...原创 2020-02-04 17:16:14 · 184 阅读 · 0 评论 -
爬虫基础——认识爬虫
互联网一般架构 c/s: 即 client server 客户端 服务端 b/s :即 browser server 浏览器 服务端 m/s :即 moblie server 移动端 服务端 http协议 目前互连网上90%的网络传输都是基于http协议。 HTTP是Hyper Text Transfer Protocol(超文本传输协议)的缩写,是用于从万维网(WWW:World Wide ...原创 2019-10-12 12:37:50 · 230 阅读 · 0 评论