- 博客(5)
- 收藏
- 关注
原创 Flume概述
1,是Apache基金会下的一个分布式、可靠、高可用的日志采集系统主要用于从不同的数据源(如Web服务器、数据库、应用程序等)中采集大量的数据,并将其传输到Hadoop或其他存储系统中,主要作用是实现大规模数据采集和传输,实现数据的实时处理和分析,从而为企业提供更好的业务决策支持Source。
2023-10-15 14:24:36
202
1
原创 用python对网页图片进行采集
在我们的右上角设置选择更多工具里面的开发者模式。(1)首先我们要找到自己想要爬取的图片并获取图片请求的地址。2,使用pip安装requests库(输完代码回车)#使用requests的GET请求加载图片。1,导入requests包并获取图片地址。打开开发者模式的方法:按电脑键盘f12。2,打开我们的开发者模式并查找请求头。二,在python新建项目和文件。3,新建python 文件。三,安装requests库。3,获取请求方式-get。1,打开我们右下角的终端。3,执行程序显示未报错。
2023-09-16 22:23:11
230
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人