- 博客(8)
- 收藏
- 关注
RSS订阅原创 python 数据库操作
实际开发过程当中，数据的存储过程主要有三种：1.将数据存储到内存当中优点：使用方便，读写速度快 缺点：程序关闭的时候 内存释放 数据消失 2.将数据写到文件当中 优点：数据存储是永久性的，不易丢失 缺点：打开关闭文件 操作数据比较麻烦3.将数据存储到数据库当中优点：数据存储是永久性的，操作也比较方便 缺点：数据库学习难度比较大 数据库按照性质分为两大类： ...
2018-07-30 22:23:53
217
原创 python bs4 BeautifulSoup用法
上一篇文章讲了一些xpath的基本用法，现在来介绍一下bs4，bs4也是一个第三方库 需要引入，bs4是 第三方库 和xpath作用一样，都是用来解析html数据，相比之下，xpath的速度会快一点，xpath底层是用c来实现的引入语法：from bs4 import BeautifulSoup1.bs4的简单的语法,不多说，直接上代码：本地创建一个html文件index.ht...
2018-07-30 21:49:09
733
原创 python xpath用法
xpath在Python的爬虫学习中，起着举足轻重的地位，对比正则表达式 re两者可以完成同样的工作，实现的功能也差不多，但xpath明显比re具有优势，在网页分析上使re退居二线。xpath的简单用法：import requests# 引入xpath模块from lxml import etreeurl ='http://www.qiushibaike.com/hot/page...
2018-07-30 21:07:35
5203
1
原创 python txt文件，xls文件，csv文件的创建
这篇文章主要讲一下txt文件，xls文件，csv文件的创建与读写操作一、txt文件f = open('文件名','操作r 读，w写，a添加',encoding='utf-8')值1：写入的文件 如果有这个文件就直接写入，没有这个文件就创建值2：对文件操作的方式 w 表示write 写入值3： 文件的编码方式 utf-8防止乱码出现# 文件写操作f = open('text....
2018-07-30 19:55:05
3469
原创 Python selenium安装与应用
今天来给大家介绍一下selenium的安装与使用一、首先介绍一下selenium：python中常用selenium爬取动态渲染网页，selenium是一个自动化测试工具，在python中应用为：1. selenium可以完全模拟浏览器操作，对动态数据进行获取，动态数据是由代码生成，在页面初始化的过程当中是没有的，也没法获取，但是可以通过selenium来进行获取2.有些数据是需要进行...
2018-07-30 19:15:13
239
原创 Python爬取糗事百科
上一篇文章简单介绍了一下正则的基本语法，今天这篇文章就讲一个用正则来爬取糗事百科的例子一、引入模块因为urlopen功能比较简单，所以设置代理ip需引入ProxyHandler和build_opener模块，ip的获取可以上西祠代理查询import refrom urllib.request import Request,build_opener,ProxyHandlerbase...
2018-07-30 10:04:20
374
原创 Python正则表达式
最近花时间学习了些简单的正则知识，我将了解到的知识总结在本文中，希望对大家有所帮助什么是正则表达式：正则表达式可以判断字符串是否符合特定的要求，我们可以通过正则表达式来从字符串中获取我们想得到的特定的部分正则表达式 由一些普通字符和一些元字符（metacharacters）组成。普通字符包括大小写的字母和数字，而元字符则具有特殊的含义，下面我给出一些元字符的表达的含义：\d 表示...
2018-07-18 21:42:01
141
原创 写Python的时候遇到的一些常见的错误
1.SyntaxError: 'return' outside function解决:将return放在方法体中return不能在方法以外使用2. TypeError: must be str, not int类型错误 必须是一个字符串 不能是数字解决办法:使用+拼接的时候 必须使用字符串，或者将数字转化成字符串3.SyntaxError: invalid syntax语法错误...
2018-07-10 21:32:14
488
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人