- 博客(2)
- 收藏
- 关注
原创 数据倾斜知识小结
原因: 大部分是因key分布不均匀,也有map端或reduce端倾斜或因数据本身特征问题,只要涉及key的操作都可能出现倾斜。 容易出现的情况:a.group by不搭配聚合函数使用 b.count(distinct)数据量大时,因为此操作是根据group by分组按distinct字段排序的 c.小表关联大表的join操作 解析:大数据里的数据一般都是map类型,key-value形式...
2018-09-03 21:35:16 471
原创 Linux上mysql解决中文乱码,不显示中文问题
平台:Linux centos6.5 mysql5.1 mysql5.6 遇到问题:导入txt文本显示不出中文 解决步骤摘要: 1.创建数据库后,在建表之前要指定数据库utf8(alter databasename character set utf8) 2.导入的txt文件要改为utf8格式 3.mysql配置文件需要改为utf8(mysql5.5前的版本和后的版本修改内容不同)
2017-10-19 11:37:30 932
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人