【flume】flume读取web应用某个文件夹下日志到hdfs

简介

这里主要是做这个实验遇到的问题以及解决方法
问题：java.lang.OutOfMemoryError: GC overhead limit exceeded

###1.准备工作
我本来想用已经写过的一个项目，那个项目是springboot写的，里面有log4j轮转日志，把日志写到一个文件夹里，我想的是flume把这些日志读取到hdfs上和hbase中，但是部署错误，因此我想个方法，本地建立一个文件夹，手动往里面放一些有格式的数据文件。
文件内容如下

字段

| hotel  |         |         |
		 | h_id   | id  |
|        | h_region  | 旅馆行政区划  |
|        | h_hname  | 旅馆名称    |
|        | h_address  | 旅馆地址    |
|        | h_uname  | 姓名      |
|        | h_code  | 证件号码    |
|        | h_start  | 开房时间    |
|        | h_end  | 退房时间    |
|        | h_start  | 开房时间时间戳    |
|        | h_end  | 退房时间时间戳    |
|        | h_homecode | 入住房号    |

数据样式

1,2,宾馆642,杭州市下城区xx484路373号,姓名65,U104,2006/06/23 00:00:00,2006/06/23 00:03:00,1150992000000,1150992180000,495
2,8,宾馆29,杭州市余杭区xx866路927号