- 博客(8)
- 资源 (5)
- 收藏
- 关注
原创 ,日志各地区访问量统计分析
1. 对access.log进行数据的预处理并进行清洗,将静态请求去除, //过滤所有静态的资源请求 if(url.startsWith("GET /static")){ return; } if(url.startsWith("GET")){ url = url.substring("GET ".length()+1, url.length()-" H
2016-06-27 09:56:04 562
原创 hive udf使用
0.要继承org.apache.hadoop.hive.ql.exec.UDF类实现evaluate 自定义函数调用过程: 1.添加jar包(在hive命令行里面执行) hive> add jar /root/NUDF.jar; 2.创建临时函数 hive> create temporary function getNation as 'cn.itcast.hive.ud
2016-06-24 16:49:41 278
转载 sqoop
sqoop安装:安装在一台节点上就可以了。 1.上传sqoop 2.安装和配置 在添加sqoop到环境变量 将数据库连接驱动拷贝到$SQOOP_HOME/lib里 3.使用 第一类:数据库中的数据导入到HDFS上 sqoop import --connect jdbc:mysql://192.168.1.10:3306/test --username root --p
2016-06-24 09:41:04 222
原创 Centos6.4下安装Ganglia监控hadoop
安装yum EPEL源rpm -Uvh http://dl.fedoraproject.org/pub/epel/6/i386/epel-release-6-8.noarch.rpm #需要root权限,否则前面加sudovim /etc/yum.repos.d/epel.repo #baseurlmirrorlist改成baseurl#mirro
2016-06-16 16:58:08 352
转载 shell记录
出password中shell出现的次数 第一种方法结果: 4 /bin/bash 1 /bin/sync 1 /sbin/halt 31 /sbin/nologin 1 /sbin/shutdown 第二种方法结果: /bin/sync 1 /bin/bash 1 /sbin/nologin
2016-06-13 15:06:12 350
转载 linux 下 join命令总结
有两个文件需要合并,开始写了脚本实现,忽然发现join命令能够完全替代,总结了一下join的基本用法 linux常用命令系列—join 文档内容合并 指令名称:join 功能介绍:找出两个文件中,指定栏位内容相同的行,并加以合并,再输出到标准输出设备。join强大呀,像sql里 面的join 呢.join工作方式。这里有两个文件f i l e 1和f i l e 2,当然已经分类。每
2016-06-13 14:28:27 362
转载 $(( )) 與 $( ) 還有${ } 差在哪
8) $(( )) 與 $( ) 還有${ } 差在哪? 我們上一章介紹了 ( ) 與 { } 的不同,這次讓我們擴展一下,看看更多的變化:$( ) 與 ${ } 又是啥玩意兒呢? 在 bash shell 中,$( ) 與 ` ` (反引號) 都是用來做命令替換用(command substitution)的。 所謂的命令替換與我們第五章學過的變量替換差不多,都是用來重組命令行:
2016-06-06 09:50:26 291
Netty 入门与实战:仿写微信 IM 即时通讯系统.zip
2019-12-30
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人