hadoop
CY_TEC
Good good study, day day up~~~
展开
-
Hive Drop 外表,同时删除数据
将外表的清除属性设置为 true 就可以在 drop 的时候清除外表的数据,无需手动删除了。ALTER TABLE addresses_text SET TBLPROPERTIES ('external.table.purge'='true');参考https://docs.cloudera.com/HDPDocuments/HDP3/HDP-3.1.4/using-hiveql/cont...原创 2019-12-18 15:26:16 · 2785 阅读 · 0 评论 -
hadoop streaming 的两种 key
参考:Hadoop Streaming 0.18 文档第一种 key,用来做 reducer 里面的排序 -jobconf stream.map.output.field.separator=. \ -jobconf stream.num.map.output.key.fields=4 \第二种 key,用来将具有相同 key 的数据分配到同一个 reducer 里面 -...原创 2019-06-24 21:06:51 · 459 阅读 · 0 评论