- 博客(3)
- 收藏
- 关注
RSS订阅原创 linux安装maven
一.安装1.1 官网下载地址：http://maven.apache.org/download.cgi，这里下载最新版apache-maven-3.3.9-bin.tar.gz1.2 安装前需要安装JDK1.7或更新版本，这里已安装JDK1.8[root@besttone-003-0001 ~]# java -version java version "1.8.0_91" Java(TM)
2016-07-29 15:45:43
305
1
原创 重新编译、安装spark assembly，使CDH5.5.1支持sparkSQL
重新编译、安装spark assembly，使CDH5.5.1支持sparkSQLCDH内嵌spark版本不支持spark-sql，sparkR,如果要使用，需要将hive的相关依赖包打进spark assembly jar中，下面就是针对spark-sql的编译、安装步骤一.在任意一台linux机器上准备编译环境spark-1.5.0.tgz 下载地址: https://spark.apache
2016-07-27 16:32:13
4538
原创 hadoop——压缩和本地库
1. 压缩hadoop中为什么使用压缩，因为压缩既减少了占用磁盘的空间又加快了文件的传输速度。 hadoop中常用到的压缩格式有lzo，lz4，gzip，snappy，bzip2，关于这几种压缩格式的比 较可参看: http://www.linuxidc.com/Linux/2014-05/101230.htm实际使用案例：按小时收集服务器日志，并且清洗数据后输出。解决方案：因为日志格式是文本
2016-07-12 15:38:33
2177
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人