大数据技术与应用-广东省赛总结

1 篇文章 0 订阅
1 篇文章 0 订阅
该博客主要探讨了如何运用Scrapy进行网页抓取,理解其框架流程,并利用json库处理数据。同时,介绍了Selenium自动化库在处理动态网页和寻找页面元素上的应用,特别提到了切换框架的重要性。此外,还讨论了在Flask中操作MySQL数据库以及修改路由,使用Echarts展示数据时需要注意的文件路径问题,并展示了如何定制Echarts的图表样式。
摘要由CSDN通过智能技术生成

任务二
主要考对scrapy框架流程的熟悉程度,熟悉json库,Selenium自动化库下次可能会换别的库 熟悉网页抓包分析 熟练找元素id或者class_name 等等 (最大的坑在于某些元素不在默认的主框架,需要在执行点击或者填表命令前声明在那个框架执行下面的代码)
Scrapy,json,Selenium,os。。。。。。
在这里插入图片描述
在这里插入图片描述
任务四
要求对mysql命令比较熟悉 这次用的是db库 下次可能用到别的python_mysql的库
对flask框架 要会修改路由地址 访问ip以及端口
在flask框架跑的echarts html所有要导入的本地文件都必须按照flask的规则来修改文件路径否则会找不到依赖文件"{{url_for(‘static’,filename=‘path’)}}"
Echarts 增加主副标题 修改粗细,颜色,位置,字体大小
添加x y轴标题,修改样式
Flask,db,echarts,pandas,json,jinja2。。。。。。
在这里插入图片描述

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值