Hive 生产中数据问题踩的坑

生产环境使用的时Sqoop 从Oracle 抽数

经历过错行----去掉一些特殊字符解决

大字段错行----https://blog.csdn.net/u012422198/article/details/84662691

长数字数据重复，特别是金融数据的各种号，长长的一串

当Hive上数据处理时，去重发现Hive比Oracle数据少很多。

因为Hive默认的长数字显示为科学技术法，把字段类型改为字符型。