【 大 数 据 】
残阳摧雪
行有不得,反求诸己!
展开
-
SecondNamenode
什么是Namenode相当于一个领导者,负责调度 比如你需要存一个640m的文件 如果按照64m分块 那么namenode就会把这10个块(这里不考虑副本)分配到集群中的datanode上 并记录对于关系 。当你要下载这个文件的时候namenode就知道在那些节点上给你取这些数据了,它主要维护两个map: 一个是文件到块的对应关系 一个是块到节点的对应关系。什么是SecondNamenodeSeco原创 2017-09-07 17:54:12 · 982 阅读 · 0 评论 -
SQL常用管理命令
启动停止服务net start mysqlnet stop mysql登录mysql -uroot -ppassword: ****(输入密码)原创 2018-07-09 16:53:11 · 228 阅读 · 0 评论 -
Hive执行脚本时传参
使用-hiveconf传参测试脚本-- test.sqlselect 'Start Testing ...';select ${hiveconf:day}, '${hiveconf:url}';select 'Test End!';命令行hive -hiveconf day=20180716 -hiveconf url='www.baidu.com' -S -f t...原创 2018-07-19 10:38:26 · 5375 阅读 · 0 评论 -
crontab
crontab用于创建定时任务。# crontab –e# 在每天早上5点运行 /root/bin/backup.sh0 5 * * * /root/bin/backup.sh语法{minute} {hour} {day-of-month} {month} {day-of-week} {full-path-to-shell-script} minute: 区间为 0 – 59 ...原创 2018-08-01 16:31:03 · 951 阅读 · 0 评论