福州大数据 hadoop学习

转载 Spark实现流式实时日志分析系统

实验介绍 我们知道对于一个网站的用户访问流量是不间断的，基于网站的访问日志，即WEB LOG的分析是经典的流式实时计算应用场景。比如百度统计，它可以做流量分析、来源分析、网站分析、转化分析。另外还有特定场景分析，比如安全分析，用来识别 CC 攻击、 SQL 注入分析、脱库等。这里我们简单实现一个类似于百度分析的系统。 课程来源 这里的课程来自于【实验楼课程】：流式实时日志分析系统——《Spa...