数据分析
文章平均质量分 79
阿泽的学习笔记
微信公众号:阿泽的学习笔记
展开
-
基于 Flink 的实时数据分析系统
最近在学 Flink,做了一个实时数据分析的 Demo,流程如下所示:Data Mock:作为生产者模拟数据,负责从本地文件系统中读取数据并发往 Kafka;Zookeeper:Kafka 的依赖;KafKa:消息队列,可以用于发布和订阅消息;Flink:流式处理引擎,作为消费者订阅 Kafka 的消息;ElasticSearch:搜索引擎,也可以作为实时存储引擎;Kibana:可视化 ElasticSearch 中的数据。除了看过两周 Flink 外,其他的框架都没有接触过,只是简单的原创 2020-09-18 10:51:37 · 4345 阅读 · 1 评论 -
数据分析博文总结
简介这篇文章主要用于介绍我所看过的数据分析博文,并给出个人看法,和值得学习的地方,也欢迎大家推荐高质量的数据分析博文,一起学习。博文的顺序是以我阅读顺序为基础。博文1.《我用Python爬了7W知乎用户信息,终于捕获了心仪小姐姐......》 爬虫工具:Python + Scrapy框架 简述:开始简单介绍了Scrapy原理,然后介绍了部分代码,接着介绍了统计、分词...原创 2018-08-31 20:52:52 · 306 阅读 · 0 评论