一、同步增量数据时,HDFS中没有增量表
解决方法1:
原因:jar包不对也可能是过程中的配置文件出错
解决:重新使用老师网盘中,代码 ---> CaijiInterceprot.zip ,使用这里代码重新打包。然后检查flume文件夹中job目录下kafka_to_hdfs_db.conf中的大约14行,a1.sources.r1.interceptors.i1.type = com.XXX.gmall.flume.interceptor.TimestampAndTableNameInterceptor$Builder是否和jar包中的文件路径是否对应。
确定没问题之后上传到/opt/module/flume/lib目录下就行。
二、在连接到Hive之后,对表进行修改都不好使
原因分析:以为这里写的是root,与hadoop的配置文件中的core-site.xml写的(下面第二个图黑框部分)不一致,所以没有权限。