qq_55906442的博客

添加依赖 <dependencies> <dependency> <groupId>org.apache.flume</groupId> <artifactId>flume-ng-core</artifactId> <version>1.9.0</version> <scope&g..

目录一.说明二.flume三.kafka四.MySQL五.IDEA写程序六.运行一.说明1.1使用工具：IDEA，spark-2.1.0-bin-hadoop2.7，kafka_2.11-2.3.1，zookeeper-3.4.5，apache-flume-1.9.0-bin，jdk1.8.0_171Scala版本：2.12.15相关工具的安装请关注我的博客！1.2日志可以到这里下载：testlog7.log-spark文档类资源-CSDN下载也可以用..

使用工具：IDEAScala版本：2.12.15日志可以到这里下载：testlog7.log-spark文档类资源-CSDN下载也可以用代码生成：Scala模拟日志生成_一个人的牛牛的博客-CSDN博客一定要在数据库中建表！！！！！import java.sql.{Connection, DriverManager, PreparedStatement}import org.apache.spark.{SparkConf, SparkContext}//MySQL表,www是表

2010-1-10_Lenovo_2012-12-30-5:58:49_192.168.140.37_Safari_http://kan.sogou.com/player/180744624/_192.168.165.168测试的日志由时间年月日，设备名称，时间精确到秒，用户ip，浏览器类型，浏览的网址，服务器ip这些元素组成，每一个元素之间用下划线（“_”）连接。年月日：2010-1-10设备名称：Lenovo时间精确到秒：2021-12-30-5:58:49用户ip：192.168.