汣净-CSDN博客

原创 python学习笔记（五）

1.filea.打开文件方式（读写两种方式）b.文件对象的操作方法c.学习对excel及csv文件进行操作2.os模块3.datetime模块4.类和对象5.正则表达式6.re模块7.http请求...

2019-03-07 15:36:43 253

原创 python爬虫从入门到放弃（六）学习IP相关知识

1、学习什么是IP，为什么会出现IP被封，如何应对IP被封的问题。因为网站都有反爬虫措施，所以很容易被封IP。防止被封的办法有方法集伪造User-Agent在请求头中把User-Agent设置成浏览器中的User-Agent，来伪造浏览器访问。比如：headers = {‘User-Agent’:‘Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/5...

2019-03-06 21:41:29 331

原创 python爬虫从入门到放弃（五）安装selenium并学习

安装selenium并学习。使用selenium模拟登陆163邮箱。163邮箱直通点：163网易免费邮–中文邮箱第一品牌。

2019-03-06 11:48:43 720

1. 函数关键字python中一共含有32个关键字：‘false’, ‘none’, ‘true’, ‘and’, ‘as’, ‘assert’, ‘break’, ‘class’, ‘continue’, ‘def’, ‘del’, ‘elif’, ‘else’, ‘except’, ‘finally’, ‘for’, ‘from’, ‘global’, ‘if’, ‘import’, ‘in...

2019-03-05 21:26:50 213

原创 python学习笔记（三）

1dict字典定义dict() 函数用于创建一个字典。创建方法一: 常规方法复制代码代码如下:如果事先能拼出整个字典，则此方法比较方便D1 = {‘name’:‘Bob’,‘age’:40}方法二: 动态创建复制代码代码如下:如果需要动态地建立字典的一个字段，则此方法比较方便D2 = {}D2[‘name’] = ‘Bob’D2[‘age’] = 4...

2019-03-02 10:12:39 168

原创爬虫2-正则表达式

a、学习什么是正则表达式并尝试一些正则表达式并进行匹配。b、结合requests、re两者的内容爬取豆瓣电影 Top 250里的内容( 要求抓取名次、影片名称、国家、导演等字段。)1.找到网页并分析网页结构首先进入豆瓣电影Top250这个网页，按下f12打开开发者工具，如下图2.用面向对象的方法进行爬取数据先用requests对网页进行请求，获取网页的html结构，在这里，为了防止网页的...

2019-03-02 09:39:55 238

原创爬虫1-get与post请求

一、使用requests或urllib用get方法进行请求http://www.baidu.com这个就是使用requests使用get方法进行请求输出的结果这个就是请求后得到的网页html源码2.使用urllib.request.open获得的response2.如果是断开网络了，就是无效请求，则会返回4043.什么是请求头，如何添加请求头，我已经用代码演示过了urllib 和 url...

2019-03-01 17:17:48 264

原创 anaconda+python3.6 检测和安装 urllib、requests、lxml、beautifulsoup4

1、安装beautifulsoup4去官网，BeautifulSoup4源码下载，下载源码，编译运行。BeautifulSoup4源码保存在C:\Users\datan\Anaconda3\pkgs （目录可自己定）打开windows powershell（cmd运行窗口也可），跳转到保存BeautifulSoup4源码的目录，找到setup.py运行setup.py. 输入 pytho...

2019-03-01 11:21:51 3661

原创 python学习笔记（二）

序列是Python中最基本的数据结构。序列中的每个元素都分配一个数字 - 它的位置，或索引，第一个索引是0，第二个索引是1，依此类推。Python有6个序列的内置类型，但最常见的是列表和元组。1、列表创建一个列表，只要把逗号分隔的不同的数据项使用方括号括起来即可。如下所示：list1 = ['physics', 'chemistry', 1997, 2000]list2 = [1, 2,...

2019-02-28 10:09:05 134

原创 Python学习笔记（一）

python小白基础入门大全python小白基础入门大全你好！这是你第一次使用 Markdown编辑器所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。python小白基础入门大全我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写...

2019-02-27 09:13:53 549

9#博客