- 博客(25)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 爬虫——租房——暴力法
对平台上发布的租房信息进行抓取分析网页（一）这个网站的画相对简单一点，每条信息基本都是存放在一个 li 标签下（二）选择用 BeautifulSoup 进行解析（三）再根据属性值进行定位（四）用 get_text() 获取标签文本这里我就直接数了一下获取到的每一个值，直接列表切割得到数据代码简单易操作，笨人有笨方法，直接上，注释都懒了# 心机小兔的python之路# @Time : 2022/5/20 11:46import requestsfrom bs4 import Beau
2022-05-20 13:19:00
253
原创 Scrapy入门
*** scrapy是一个成熟的爬虫框架，刚跟着B站大学开始学，写篇文章当作笔记***具体安装的话参照其他大佬的博客即可（我也是看大佬的博客安装的）scrapy的基本组件1.引擎2.调度器：接收从引擎发送过来的url 完成入列操作3.管道：数据处理（存储数据）4.爬虫程序：完成数据解析5.下载downloader：发送请求 获取响应6.下载中间件：位于引擎和下载器之间 用来处理引擎和下载 器之间的请求和响应7.爬虫中间件：位于引擎和爬虫程序之间scrapy工程的创建*
2022-04-24 20:40:01
176
原创 selenium爬取大学排名
爬取大学排名有些网页源码中找不到相应的要爬的数据，其实这不是什么被反扒了，只是网页有可能是动态加载出来，这时候我们可以找到相应的数据接口，找到真正的目标url一样能找到包含我们想要的数据的真正url，就像我今天要讲的这个案例。右键查看网页源码，我们会发现数据虽然存在于网页源码中，但是，我们点一下翻页功能，再观察第一页第二页我们会发现，无论我们怎么翻页，url 都是不变的，这个时候，我们应该考虑网页是不是动态加载出来的。在 “开发者工具”->“网络” 中找看看有没有相应的数据接口，一找果
2022-04-12 11:55:34
1219
原创 蓝桥杯——圆的面积——python实现
蓝桥杯——圆的面积一、问题描述资源限制内存限制：256.0MB C/C++时间限制：1.0s Java时间限制：3.0s Python时间限制：5.0s问题描述给定圆的半径r，求圆的面积。输出格式输出一行，包含一个实数，四舍五入保留小数点后7位，表示圆的面积。说明：在本题中，输入是一个整数，但是输出是一个实数。对于实数输出的问题，请一定看清楚实数输出的要求，比如本题中要求保留小数点后7位，则你的程序必须严格的输出7位小数，输出过多或者过少的小数位数都是不行的，都会被
2022-04-04 23:55:32
173
原创 selenium案例
用selenium爬取JD商品数据selenium还是很强大的，不用去管网页源码，只要页面中存在元素，基本都能爬到，通过驱动的方式实现自动打开浏览器，怎么安装驱动可参考上一篇文章：https://editor.csdn.net/md/?articleId=123694820（一）网页分析通过开发者工具不难发现，每个商品数据都是保存在一个div标签中紧接着就是去定位每一条数据的位置，比如价格数据，是保存在每一个div标签下的一个 i 标签中，其他的也是对应着相应的标签，就不一一列举了（二）需求
2022-04-01 17:35:03
1122
原创 selenium+chromedriver+PhantomJS安装配置
爬虫——selenium模块使用selenium是一个web的自动化测试工具，最初是为网站自动化测试而开发的，selenium可以直接运行在浏览器上，它支持所有主流的浏览器，可以接收指令，让浏览器自动加载页面，获取需要的数据，甚至页面截屏，在反反爬虫中也是一个重要的工具，比较强大，但是缺点就是——慢。一般如果要爬的网站是动态加载的，那么可以考虑用selenium，听说号称 “可见即可爬”Selenium+chromedriverselenium让程序连接到浏览器，让浏览器去完成各种操作，是一种自动化
2022-03-28 23:04:35
639
原创 递归法求阶乘
递归法求阶乘#include <iostream>using namespace std;int n_n(int n){ if(n != 1 && n != 0) return n * n_n(n - 1); else return 1;}int main(){ int n,sum; cin>>n; sum = n_n(n); cout<<sum<<endl; return 0;}...
2022-03-24 23:55:56
130
原创 求两数的最大公因数
求两个整数的最大公约数（一）短除法短除法的思想是，在除法中写除数的地方写两个数共有的质因数，然后落下两个数被公有质因数整除的商，之后再除，以此类推，直到结果互质为止。在计算机语言中，先用两个整数去除以i取余，其中i从2开始循环，每次循环之后+1，结束条件为i<=x、y，若余数为0，则定义一个为1的初始变量去把每一次的因子累乘，同时x、y除以i，继续循环，直到x和y互为素数则终止1.python实现x = int(input())y = int(input())p = 1 # 用于累乘
2022-03-22 22:42:22
2643
原创 第一个爬虫程序
需求分析：1.获取蔬菜品名、最低价、最高价等信息并将其保存为csv文件网页分析F12查看网页源码发现没有需要找的元素相关的信息，不要慌，找到相应数据接口就行了，在开发者工具中就能找到如果网页返回的东西比较多的话，没办法，一个一个去找吧，我也不会，会的大哥麻烦留言指点一下然后就是把这个页面的url复制下来开始敲代码实现比较简单，不需要定义函数或者类啥的，简单粗暴一点# 这个网页还是比较简单好爬的，不需要很大的解析量，不需要导入正则或者bs4之类的包.
2022-03-09 12:40:27
654
原创 python的数据类型
一、数据类型python的数据类型与其他语言有的类型基本一致，只是比其他语言多增了几种，或者进行了一些改动，有其他语言基础的兄弟学起来没有啥难度，以下是python常用的数据类型（一）数字（二）字符串类型（三）布尔类型（四）列表（五）元组（六）字典（七）集合二、数值类型数值类型的概念不同于数据类型，数值类型是不可变的，也就是说，数值一旦发生了改变，那就是一个新的对象，每个数值都是一个对象python的数值类型整型（int） 浮点型（float） 复
2021-11-19 20:09:15
909
1
原创 （三）python的基础语法及输入输出
python跟其它语言一样，都有属于自己的一种语法风格，但是在很大程度上，python跟其他语言又很相似不多说，直接开始记录今天所学1.标识符标识符，顾名思义，就是给对象起一个别名，定义一个用来装载数据的“容器”，对象的定义就不多赘述了python的标识符和C、C++以及Java都一样，是严格区分大小写的，比如a = 1A = 2print(a)这两个变量分别代表1和2，当用函数print输出时，以上结果将会输出1python对对象的命名要求与其他语言差不多，我们命名的时候
2021-11-17 21:59:41
1711
原创 （二）pip的基本使用
pip是python用来安装第三方库的一个工具，简单说就是一个python专用的下载工具，常用的命令有安装和卸载，比如#普通安装，一般默认安装目标库的最高版本pip install opencv#指定版本安装pip install opencv==4.1.5#卸载某个第三方库pip uninstall opencv#显示已安装的第三方库pip list#或者pip freeze#查看库的详细信息，可查看库的版本及作者等信息pip show numpy#显示库中的文件信
2021-11-15 21:10:01
1623
原创 （一）python3.7.8的安装配置
最近上课学到数据分析，用的是python，尝试不参照其他大佬的博客自己安装一波首先需要做的就是先下载（这是废话）进入python官网|：https://www.python.org/点击如下图的Download，进到python的各个版本信息页面然后就是各个版本的选择，我选择3.7.8的，听说3.9以上的版本兼容性还不是很好（如果说错了大佬批评就是），选择跟自己电脑位数相应的版本，选择安装版executeble installer，，embeddable是免安装版本，下载好后解压需要
2021-11-12 22:09:55
1972
原创 冒泡排序，数组，C++
越往下学就越发现，真的是基础不牢地动山摇，打算重新复习一下基础，花了半小时看了冒泡排序的理论，几分钟敲了代码#include <iostream>#define max 20using namespace std;void Bubble_sort(int A[],int n){ int temp; for(int i=0;i<n;i++) { for(int j=0;j<n-1-i;j++) { if(A[j]>A[j+1]) {
2021-10-27 22:34:01
121
原创 二叉树的基本操作，创建、输入前序遍历、中序遍历、后续遍历以及层次遍历
最近用到数据结构，之前也没学过，跑到图书馆看了几个版本的书，但是都记不住，总感觉少了点什么，直到自己动手的时候才发现....完了，真的是啥也不会于是到B站自己刷视频，边看边操作，同时也看了很多博主的文章，做了一点总结，熬了俩星期，终于学会了点皮毛（个人脑子不是很好使），自己把过程也记录下来，方便以后用到话不多说直接上代码#include <stdio.h>#include <stdlib.h>bool flag = true; //有些编译器不认bool，
2021-10-27 17:55:28
685
原创 2021-10-26
SQL Server2008的安装配置最近开始学数据库，有几个同学安装SQL Server2008(我们学校用的是这个版本的)的时候出现了问题，导致无法安装，我也是试着试一下的心态去安装了一下，把过程记录了下来。首先就是要下载好安装包(我直接从我们学校的FTP上下载了)，到官网下载就行，有资源的小伙伴也可以把链接留下[link]https://m.ddooo.com/softdown/60830.htm...
2021-10-26 10:51:31
305
3
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人