生产环境使用的时Sqoop 从Oracle 抽数
经历过错行----去掉一些特殊字符解决
大字段错行----https://blog.csdn.net/u012422198/article/details/84662691
长数字数据重复,特别是金融数据的各种号,长长的一串
当Hive上数据处理时,去重发现Hive比Oracle数据少很多。
因为Hive默认的长数字显示为科学技术法,把字段类型改为字符型。
生产环境使用的时Sqoop 从Oracle 抽数
经历过错行----去掉一些特殊字符解决
大字段错行----https://blog.csdn.net/u012422198/article/details/84662691
长数字数据重复,特别是金融数据的各种号,长长的一串
当Hive上数据处理时,去重发现Hive比Oracle数据少很多。
因为Hive默认的长数字显示为科学技术法,把字段类型改为字符型。