- 博客(34)
- 收藏
- 关注
原创 8:系统开发基础--8.5:系统设计、8.6:系统测试 、8.7:软件维护 、8.8:软件质量保证、8.9:软件文档
系统开发基础--8.5:系统设计、8.6:系统测试 、8.7:软件维护 、8.8:软件质量保证、8.9:软件文档
2024-04-14 23:55:22
572
原创 8:系统开发基础--8.1:软件工程概述、8.2:软件开发方法 、8.3:软件开发模型、8.4:系统分析
8:系统开发基础--8.1:软件工程概述、8.2:软件开发方法 、8.3:软件开发模型、8.4:系统分析
2024-04-14 23:05:02
911
1
原创 Day:007(4) | Python爬虫:高效数据抓取的编程技术(scrapy框架使用)
Python爬虫:高效数据抓取的编程技术(scrapy框架使用)--Scrapy 中 Downloader 设置UA、Scrapy 中 Downloader 设置代理、下载中间件实战-Scrapy与Selenium结合、Scrapy保存数据到多个数据库、Scrapy案例、爬虫的分布式思维与实现思路、爬虫分布式-搭建Main端Redis、爬虫分布式-搭建Slave端环境配置
2024-04-13 23:23:20
2276
原创 Day:007(3) | Python爬虫:高效数据抓取的编程技术(scrapy框架使用)
Python爬虫:高效数据抓取的编程技术(scrapy框架使用)--Scrapy 保存数据案例-小说保存、Scrapy 中 CrawlSpider 使用、Scrapy 中 Request 的使用、Scrapy中下载中间件
2024-04-13 22:48:07
1339
原创 Day:007(2) | Python爬虫:高效数据抓取的编程技术(scrapy框架使用)
Python爬虫:高效数据抓取的编程技术(scrapy框架使用)--Scrapy 数据的提取、Scrapy Shell的使用、Scrapy 保存数据到文件、Item Pipeline的使用、Scrapy 使用ImagePipeline 保存图片、Scrapy 自定义ImagePipeline、Scrapy 中settings配置 的使用
2024-04-12 23:25:48
995
原创 Day:007(1) | Python爬虫:高效数据抓取的编程技术(scrapy框架使用)
Python爬虫:高效数据抓取的编程技术(scrapy框架使用)--Scrapy的介绍、Scarpy开发第一个爬虫、Scrapy项目的启动介绍、Scrapy启动-命令启动、Scrapy启动-脚本启动、Scrapy输出日志-了解、
2024-04-12 22:30:58
941
原创 Day:006(3 ) | Python爬虫:高效数据抓取的编程技术(爬虫工具)
Python爬虫:高效数据抓取的编程技术(爬虫工具)--selenium调用js方法、selenium 等待元素、selenium 参数使用、Selenium实战案例
2024-04-11 22:44:33
679
原创 Day:006(2 ) | Python爬虫:高效数据抓取的编程技术(爬虫工具)
Python爬虫:高效数据抓取的编程技术(爬虫工具)--selenium 层级定位、selenium 处理下拉框、selenium处理弹窗、selenium拖拽元素
2024-04-11 22:18:45
477
原创 Day:006(1) | Python爬虫:高效数据抓取的编程技术(爬虫工具)
Python爬虫:高效数据抓取的编程技术(爬虫工具)--selenium介绍与安装,selenium 控制浏览器,selenium元素定位,selenium定位下拉菜单
2024-04-10 22:58:10
849
原创 Day:005 | Python爬虫:高效数据抓取的编程技术(爬虫效率)
Python爬虫:高效数据抓取的编程技术(爬虫效率)--爬虫之多进程-了解,爬虫之协程
2024-04-10 22:30:11
1475
原创 Day:004(4) | Python爬虫:高效数据抓取的编程技术(数据解析)
JsonPath 是一种信息抽取类库,是从JSON文档中抽取指定信息的工具,提供多种语言实现版本,包括:Python,Javascript, PHP和 Java。实现python类型转化为json字符串,返回一个str对象 把一个Python对象编码转换成Json字符串。json简单说就是javascript中的对象和数组,所以这两种结构就是对象和数组两种结构,通过这两种。Json结构清晰,可读性高,复杂度低,非常容易匹配,下表中对应了XPath的用法。Python 中自带了JSON模块,直接。
2024-04-09 23:57:10
1032
1
原创 Day:004(3) | Python爬虫:高效数据抓取的编程技术(数据解析)
BS4实战-人民网--数据解析-pyquery--数据解析-xpath的使用
2024-04-09 23:37:35
1154
原创 Day:004(2) | Python爬虫:高效数据抓取的编程技术(数据解析)
正则表达式实战-腾讯新闻----数据解析-Beautiful Soup的使用--数据解析-Beautiful Soup方法的使用
2024-04-06 23:11:22
885
原创 Day:004(1) | Python爬虫:高效数据抓取的编程技术(数据解析)
Day:004 | Python爬虫:高效数据抓取的编程技术(数据解析)
2024-04-06 22:39:24
1271
原创 7:数据结构及算法应用--7.1:回顾算法策略区分,7.2:回顾时间复杂度与空间复杂度,7.3:代码填空技巧
7:【软件设计】数据结构及算法应用--7.1:回顾算法策略区分,7.2:回顾时间复杂度与空间复杂度,7.3:代码填空技巧
2024-04-05 21:20:27
954
1
原创 计算机组成与体系结构--2.6:总线系统,2.7:寻址方式,2.8:CISC与RISC
计算机组成与体系结构--2.6:总线系统,2.7:寻址方式,2.8:CISC与RISC
2024-04-01 22:42:56
710
原创 计算机组成与体系结构--2.1数据的表示
而当该位位于小数点左边,k值是该位和小数点之间数码的个数,而当该位位于小数点右边,k值是负值,其绝对值是该位和小数之间数码的个数加1。例如二进制转换成十进制 111=1x22+ 1x21+ 1x20=4+2+1=7 10100.01=1x24+ 1x22+1x2-2 例如七进制604.01 =6x72+4x70+1x7-2 十进制转R进制使用短除法(循环除基直到商到0,从下往上取余数)。补码:正数的补码与原码相同,负数的补码是其反码末位补1(符号位不变)。2、阶码的位数决定数的表示范围,位数越多范围越大;
2024-03-28 23:55:17
283
原创 Day:002 | Python爬虫:高效数据抓取的编程技术(爬虫基础)
其实就是根据URL来获取它的网页信息,虽然我们在浏览器中看到的是一幅幅优美的画面,但是其实是由浏览器解释才呈现出来的,实质它是一段HTML代码,加 JS、CSS。如果把网页比作一个人,那么HTML便是他的骨架,JS便是他的肌肉,CSS便是它的衣服。第一个参数url即为URL,是必须要传送的。运行结果和直接传递URL完全一样的,只不过中间多了一个request对象,推荐大家这么写,因为在构建请求时还需要加入好多内容,通过构建一个request,服务器响应请求得到应答,这样显得逻辑上清晰明确。
2024-03-28 23:23:24
732
原创 Day:001 | Python爬虫:高效数据抓取的编程技术(爬虫基础)
本文介绍了Python爬虫的基本原理和应用,包括如何利用Python编写网络爬虫程序,获取网页数据,以及如何处理和分析这些数据。文章还讨论了爬虫在数据挖掘、信息收集和自动化处理等领域的应用。
2024-03-27 22:55:46
449
原创 Git命令
使用Git进行版本控制的常用命令包括:git init、git clone、git add、git commit、git push、git pull等。
2024-03-25 22:17:21
509
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人