小明ღ-CSDN博客

原创 MySQL知识点&面试题总结

MySQL知识点&面试题总结MySQL 基础关系型数据库介绍顾名思义，关系型数据库就是一种建立在关系模型的基础上的数据库。关系模型表明了数据库中所存储的数据之间的联系（一对一、一对多、多对多）。关系型数据库中，我们的数据都被存放在了各种表中（比如用户表），表中的每一行就存放着一条数据（比如一个用户的信息）。大部分关系型数据库都使用 SQL 来操作数据库中的数据。并且，大部分关系型数据库都支持事务的四大特性(ACID)。有哪些常见的关系型数据库呢？ MySQL、PostgreSQL、Or

2021-12-12 14:04:33 117

原创安居客无锡二手房数据获取

安居客无锡二手房用selenium模拟浏览器抓取使用requests抓取网页，用bs4解析网页使用lxml解析网页（xpath）网址：https://wuxi.anjuke.com/sale/用selenium模拟浏览器抓取# 用selenium模拟浏览器抓取# selenium版本3.141.0# firefox版本86.0# geckodriver0.29.0# geckodriver下载地址：https://github.com/mozilla/geckodriver/releases

2021-03-31 14:43:14 558

原创 Python爬虫：爬取华为应用市场app数据

Python爬取华某应用市场app数据爬取华某应用商店的所有APP名称和介绍，因为页面数据是ajax异步加载的，所以要找到对应的接口去解析数据。爬取华某应用市场app数据Python爬取华某应用市场app数据一、分析网页1. 分析主页2. 分析appid3. 分析uri二、撰写爬虫三、总结一、分析网页首先分析页面1. 分析主页打开华某应用市场主页：https://appgallery.华某网址.com/#/Apps 查看网页源代码。发现数据是动态Ajax异步加载渲染出来的，因为我们要爬取A

2021-03-30 17:30:19 4083 13

原创自学Python的网站，建议收藏！！！

1.中文版官方教程https://docs.python.org/zh-cn/3/tutorial/index.html2.菜鸟教程http://www.runoob.com/3.W3schoolhttp://www.w3school.com.cn/4.Python3简明教程https://www.jmjc.tech/tutorial/python/15.python Code Examplehttps://www.programcreek.com/python/6.LearnPytho

2021-03-18 15:55:32 326

原创 PyG2Plot可视化库

PyG2Plot可视化库Python绘制各种各样的可视化图，比如折线图、饼状图，柱形图等等。大部分人可能会使用matplotlib或者pyecharts进行绘制而我今天发现了一个非常简单且使用的Python库PyG2Plot，相比如matplotlib和pyecharts简洁很多很多。先来科普一下，G2是蚂蚁金服开源的一个基于图形的语法，G2Plot则是在G2的基础上去繁从简，剔除了复杂概念的前提下，保留了强大的图表库。而PyG2Plot是完全基于G2Plot进行封装的。通过Python语法提供AP

2021-03-17 11:44:59 543

原创 Scrapy中response介绍

Scrapy中response介绍：response属性：url ：HTTP响应的url地址,str类型status：HTTP响应的状态码, int类型headers ：HTTP响应的头部, 类字典类型, 可以调用get或者getlist方法对其进行访问body：HTTP响应正文, bytes类型text：文本形式的HTTP响应正文, str类型response.text = response.body.decode(response.encoding)encoding：HTTP响应正文的编

2021-03-17 11:17:57 1468

原创爬取微博实时热搜数据可视化分析

这里写自定义目录标题爬取微博实时热搜数据可视化分析一、爬取数据1.1 Spider主要函数1.2 根据微博一分钟更新一次的状态进行爬虫二、可视化爬取微博实时热搜数据可视化分析一、爬取数据1.1 Spider主要函数1.2 根据微博一分钟更新一次的状态进行爬虫二、可视化...

2021-03-04 19:30:56 7485 21

weixin_43210595的博客