- 博客(4)
- 收藏
- 关注
RSS订阅
原创 看不懂别做爬虫-----python爬虫实战---大众点评评论
爬取大众点评评论首先打开一个店铺找到评论查看到下面有些字体经过加密处理 刷新页面会发现 每一次加密的字体是不一样的查看网页源代码 查看所有css 发现这个css就是我们想要用的文件 那么现在我们就要用代码来获取到这个css文件的urlclass DownComment: def __init__(self): # 爬取数据cookie user—agent self.headers = { "User-Agent": "Mozi
2020-08-26 15:58:20
4408
15
原创 爬虫基础 第一篇
爬虫基础虽然说只基础教学 但是 爬虫还是需要一定的知识基础才可以接触 简单的web基础是有必要的 总之在下面看到不会的东西 去学 学完了再回来接着看1.学爬虫必须了解的问题从输入url到显示网页 都做了什么事？2.url的概念Uniform Resource Locator （统一资源定位符）例如 https://www.google.com/search?q=url在上述链接中https 协议部分www.google.com 域名部分search
2021-03-11 14:50:06
121
原创 看不懂别做爬虫-----python scrapy爬取淘宝
淘宝商品数据爬取1.网页分析做爬虫第一步当然是打开网页进行分析首先打开网站以后 发现在显示的位置 没有我们想要的数据 那我们就 使用查找就可以 ctrl + f复制一个商品的信息 看看网页源代码中有没有现在发现数据其实是在源代码中 中有一个字典 我们只需要取出这个字典 里面的东西就都可以取出了2.创建项目我们要使用scrapy框架 没有安装的自行百度安装创建项目# scrapy startproject 项目名称scrapy startproject taobao创建爬虫# s
2020-08-28 10:03:29
3606
5
原创 MySql 数据库及数据表的操作
MySQL数据库使用使用数据库的优点SQL语句1.数据库的基本操作2.数据表的基本操作使用数据库的优点持久化存储读写速度极高保证数据的有效性对程序支持性非常好，容易扩展SQL语句1.数据库的基本操作1.查看所有数据库show databases;2.使用数据库use 数据库名3.查看当前使用的数据库select databases();4.创建数据库creat...
2020-04-10 11:45:29
158
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人