- 博客(14)
- 收藏
- 关注
原创 山东大学暑期实训-饮食健康管理系统设计与实现(九)
山东大学暑期实训-饮食健康管理系统设计与实现(九)关于用户信息的爬虫爬虫分析爬取目标爬取流程网页分析代码结果 关于用户信息的爬虫 爬虫分析 爬取目标 爬取流程 网页分析 代码 结果
2021-07-15 10:51:49
118
原创 山东大学暑期实训-饮食健康管理系统设计与实现(八)
山东大学暑期实训-饮食健康管理系统设计与实现(八)关于上一个爬虫的结果以及分析爬虫结果分析 关于上一个爬虫的结果以及分析 爬虫结果 我们共需要爬取200个用户对应的1895个食谱的信息。 其中发现有一个id为691的用户在美食天下上没有办法查到,因此当作异常数据处理掉了。 最后我们成功爬取了1895个食谱的图片,这些图片统一存放在文件夹pic200中,命名格式为它们的id+‘.jpg’,最后我们得到了1895个图片。如下图: 此外还有一张食谱对应的食谱名字和食材信息表,如下图所示: 第一列为食谱id,第
2021-07-14 08:15:19
222
原创 山东大学暑期实训-饮食健康管理系统设计与实现(七)
山东大学暑期实训-饮食健康管理系统设计与实现(七)爬取食谱图片和食材信息爬虫流程构想爬虫代码爬虫结果分析 爬取食谱图片和食材信息 爬虫流程构想 爬虫代码 爬虫结果 分析
2021-07-12 10:37:45
169
原创 山东大学暑期实训-饮食健康管理系统设计与实现(六)
山东大学暑期实训-饮食健康管理系统设计与实现(六)使用scrapy和selenium爬取美食天下的数据爬虫思路 使用scrapy和selenium爬取美食天下的数据 对于爬虫来说,我们首先要明确,我们要爬取什么网站,爬取哪些数据,数据保存成什么形式。 爬虫思路 首先,根据挑选出来的一个发布食谱较多的用户,然后我们根据该用户发布的食谱, ...
2021-07-12 10:36:45
211
原创 山东大学暑期实训-饮食健康管理系统设计与实现(三)
山东大学暑期实训-饮食健康管理系统设计与实现(三)第一周个人工作总结自我提升团队贡献 第一周个人工作总结 自我提升 安装并学习了python及Anaconda的使用,了解了python的基础语法,和使用Anaconda管理python环境。 安装并初步学习了scrapy框架,了解了scrapy的基本架构,基本了解了应该如何在scrapy的基础上建立一个简单的爬虫 安装了selenium和chromedriver。 更新了三篇博客,第一篇叙述了配置anaconda+python的过程,第二篇叙述了配置scr
2021-07-02 08:40:09
167
原创 山东大学暑期实训-饮食健康管理系统设计与实现(二)
山东大学暑期实训-饮食健康管理系统设计与实现(二)系统必要环境安装Scrapy安装selenium+chromedriver安装Pycharm安装 系统必要环境安装 Scrapy安装 selenium+chromedriver安装 Pycharm安装 Pycharm是一款非常好用的Python IDE,本次实训,采用Pycharm来进行开发。下面是Pycharm的安装过程。 进入Pycharm官网,下载。由于我们这次需要用到web方面的内容,果断专业版。 下载后直接安装,同样是傻瓜式教程。 安装后果断寻找这
2021-06-30 14:54:25
179
原创 山东大学暑期实训-饮食健康管理系统设计与实现(一)
山东大学暑期实训-饮食健康管理系统设计与实现(一)环境配置篇(一)python环境配置 环境配置篇(一) python环境配置 使用Anaconda配置python环境,Python环境选择3.8.10,也即最新版Anaconda提供的默认环境。 从Anaconda官网下载安装包,下载后点击安装。本人已经安装,这里不在显示安装截图,傻瓜式安装过程,不必赘述。 安装后,要配置环境变量。 右击此电脑,点击属性,进入属性界面,点击高级系统设置。 接着点击环境变量。 在系统变量中找到Path。 点击编辑。 点
2021-06-28 16:39:37
446
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人