- 博客(2)
- 资源 (2)
- 问答 (1)
- 收藏
- 关注
原创 Property ‘name‘ has no setter method in class
用BeanUtils.setProperty设置的类必须是public,否则会报此错误
2020-11-24 20:57:57 2169 1
原创 hive order by/sort by /distribute by /cluster by
官网说明 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+SortBy order by 全局排序,但是只有一个reduce,因此在数据量很大的情况下,效率很低 sort by 单个reduce内有效,但是全局无序,要想实现和order by 一样的效果,必须要进行一次归并排序(下面讲),控制个数:set mapred.reduce.tasks=xxx 如果是spark则是控制partitions distribute by
2020-11-22 10:44:15 155
hive建表为parquet实际上为text
2020-07-23
TA创建的收藏夹 TA关注的收藏夹
TA关注的人