![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据与可视化
文章平均质量分 62
RobertLikeDurian
这个作者很懒,什么都没留下…
展开
-
第一部分-实时爬取WeiBo热搜
python实时爬取微博热搜文章只做简单记录和复现,详细内容可以一起讨论第一步lxml方法获取内容从站内找到的方法,xpath.py代码如下import requestsfrom lxml import etreeimport mysqldef run(): # 定义爬取的url url = "https://s.weibo.com/top/summary" header = { 'User-Agent': 'Mozilla/5.0 (Windows原创 2021-04-11 16:26:56 · 868 阅读 · 1 评论 -
第八部分-微博热搜出现的省份在地图上高亮
热搜出现的省份在地图上高亮1、在学习到echart之前存在的China.js绘制中国地图2、上一部分将热搜内容的省份写入数据库就可以实现代码以下是mapEchart.js代码var myChart = echarts.init(document.querySelector(".map .chart"));let word=[];theJson = { "type": "FeatureCollection", "features": [原创 2021-07-16 09:17:19 · 273 阅读 · 0 评论 -
第七部分-微博热搜省份判断
微博热搜省份判断之前的文章中提到,通过字符串匹配的中文分词可以词典方法取出热搜的关键字这次进一步,我们只取出城市名,写入数据库预期效果通过识别城市名称返回省份(或直辖市)的名称厦门—》福建省实现原理通过json完成工具类,输入名称返回省份代码在基于以前文章的基础上,做了一定的修改放在了github上https://github.com/Robert-plus/python-weibo-mysql...原创 2021-07-16 09:00:56 · 114 阅读 · 0 评论 -
第六部分-springboot配置https与http2.0
springboot配置https与http2.0文章只做简单记录和放出完整代码,详细内容可以一起讨论文章需要https://blog.csdn.net/weixin_43596589/article/details/116594617等之前部分的代码httpshttps为http+SSL第一步利用jdk原生keytool生成一个安全证书[cmd/shell/terminal]都行keytool -genkey -alias RobertKey -storetype PKCS12 -keya原创 2021-05-27 14:57:57 · 560 阅读 · 0 评论 -
第五部分-微博热搜内容标签
python微博热搜内容标签文章只做简单记录和放出完整代码,详细内容可以一起讨论文章需要https://blog.csdn.net/weixin_43596589/article/details/115601133上一部分的代码字符串匹配的中文分词参考到前辈写的代码及提供的方法,利用词典匹配,识别热搜内容第一步在调用mysql存入数据库前写入以下代码 # 初始化关键词数组 key_list = [] # 将StringList转换为NumList view =原创 2021-05-19 16:15:27 · 236 阅读 · 0 评论 -
第四部分-WebSocket后端轮询代替Ajax轮询
WebSocket后端轮询代替Ajax轮询Websocket服务端可以主动推送信息给客户端,解决了http轮询延迟的问题同时解决服务器上消耗资源的问题由于Websocket只需要一次HTTP握手,所以说整个通讯过程是建立在一次连接/状态中,也就避免了HTTP的非状态性,服务端会一直知道你的信息,直到你关闭请求目前唯一的问题是:不兼容低版本的IE第一步...原创 2021-05-10 15:40:33 · 594 阅读 · 0 评论 -
第二部分-SpringBoot程序返回数据库json数据
微博热搜内容接口简单编写文章只做简单记录和放出完整代码,详细内容可以一起讨论mybatis+springboot+mysql(使用了Lombok)第一步创建WeiBoNewModel.javapackage bx.springChart.demoProject.model;import lombok.*;import java.io.Serializable;@Data@ToString@NoArgsConstructor@AllArgsConstructor@Builderp原创 2021-04-12 16:26:32 · 252 阅读 · 0 评论 -
第三部分-微博热搜echart可视化呈现
微博热搜echart可视化呈现文章只做简单记录和放出完整代码,详细内容可以一起讨论参考网址https://echarts.apache.org/examples/zh/editor.html?c=bar-race-country本部分内容需要上部分的SpringBoot程序https://blog.csdn.net/weixin_43596589/article/details/115611383第一步准备html在templates下创建weiBoTopReDraw.html<!DOC原创 2021-04-13 10:25:55 · 716 阅读 · 1 评论