大数据学习之路
Marlboro_2
这个作者很懒,什么都没留下…
展开
-
Kafka Connector使用jdbc源抽取DB2数据库报java.io.CharConversionException导致的数据丢失
kafka connector 源为db2抽取时报错,错误信息为[2019-12-02 00:09:22,130] WARN =============DB2 columns fields error================: (io.confluent.connect.jdbc.source.JdbcSourceTask)com.ibm.db2.jcc.am.SqlException...原创 2019-12-03 15:37:10 · 2537 阅读 · 0 评论 -
浅析Hadoop中namenode和datanode
1.namenode职能存储文件的类型、大小、权限、路径等基本元数据,文件的存储通过edits(编辑日志)和fsimage(镜像文件)进行存储,其中编辑日志存放的是操作日志,包括用户的基本操作和系统的写入信息.在写操作过程中,整个流程分为以下阶段 1、创建copying文件在写操作过程中,整个流程分为以下阶段 1、创建copy...原创 2018-08-25 11:44:54 · 408 阅读 · 0 评论