- 博客(5)
- 收藏
- 关注
RSS订阅原创 numpy---科学计算库
numpy —科学计算库结构核心： ndarray对象： 内存是连续的 存储单一数据类型 多维数组 两种存储风格： C风格 ---C语言风格----按行优先存储 F风格 ---fortran语言风格 ----按列优先存储数组的创建import numpy as np# 创建数组# 使用列表转化数组arr = np.array([...
2020-01-13 21:53:11
94
原创 代理池实现
代理池逻辑图1.db组件import redisfrom day12.proxypool.settings import PORT,HOST,PASSWORD,PROXIESclass Redis_Client(object): #设置密码选择功能 def __init__(self,host = HOST,port=PORT): if PASSWORD:...
2020-01-11 21:30:21
165
原创 爬虫-day03
一、cookie和session1、什么是cookie？ cookie是指网站为了鉴别用户身份，进行会话跟踪而存储在客户端本地的数据。2、什么是session？ 本来的含义是指有始有终的一些列动作，而在web中，session对象用来在服务器存储特定用户会话所需要的属性及信息。3、cookie和session产生的原因： cookie和session他们不属于http协议范围，由于ht...
2019-12-19 23:05:50
83
原创 爬虫-day02
1、使用步骤：#1、导包import requests#2、确定基础urlbase_url = ‘https://www.baidu.com’#3、发送请求，获取响应response = requests.get(base_url)#4、处理响应内容2、requests.get()—get请求方法参数详解（1）requests.get( url=请求url， head...
2019-12-18 21:17:30
77
原创 爬虫-day01
一、爬虫的定义：程序或者脚本—》自动爬取万维网数据的程序或者脚本。二、爬虫可以解决的问题：（1）解决冷启动问题。（2）搜索引擎的根基。—通用爬虫。（3）帮助机器学习建立知识图谱。（4）制作各种比价软件。三、爬虫工程师的进阶之路：初级爬虫工程师1.web 前端的知识： HTML、CSS、JavaScript、DOM、DHTML 、Ajax、jQuery、json 等；2、正则表达式...
2019-12-17 20:42:17
118
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人