- 博客(5)
- 收藏
- 关注
RSS订阅原创 Hive 之 影评案例
现有如此三份数据：1、users.dat 数据格式为： 2::M::56::16::70072对应字段为：UserID BigInt, Gender String, Age Int, Occupation String, Zipcode String对应字段中文解释：用户id，性别，年龄，职业，邮政编码2、movies.dat 数据格式为： 2::Jumanji (1995)::...
2019-08-06 21:51:16
1041
原创 Shell 括号总结
( )用途 1：在运算中，先计算小括号里面的内容用途 2：数组用途 3：匹配分组(( ))用途 1：表达式，不支持-eq 这类的运算符。不支持-a 和-o，支持<=、>=、<、>这类比较符和&&、||用途 2：C 语言风格的 for(())表达式$( ) 执行 Shell 命令，与反撇号等效$(( ))用途 1：简单算数运算用途 2：...
2019-07-25 22:33:38
189
原创 Shell的字体颜色设置
#!/bin/bash# 字体颜色for i in {31..37}; doecho -e "\033[$i;40mHello world!\033[0m"done# 背景颜色for i in {41..47}; doecho -e "\033[47;${i}mHello world!\033[0m"done# 显示方式for i in {1..8}; doecho -e "...
2019-07-25 21:53:33
3685
原创 MapReduce 异常总结（一）
序列化异常19/06/13 14:11:46 INFO Configuration.deprecation: session.id is deprecated. Instead, use dfs.metrics.session-id19/06/13 14:11:46 INFO jvm.JvmMetrics: Initializing JVM Metrics with processName=J...
2019-07-13 11:43:30
2618
转载 MapReduce调优
一 、 资源相关参数以下参数是在用户自己的 mapreduce 应用程序中配置就可以生效 ：1、mapreduce.map.memory.mb: 一个 Map Task 可使用的资源上限（单位:MB），默认为 1024。如果 Map Task 实际使用的资源量超过该值，则会被强制杀死。2、mapreduce.reduce.memory.mb: 一个 Reduce Task 可使用的资源上...
2019-07-13 11:28:14
279
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人