![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 63
codeforces
这个作者很懒,什么都没留下…
展开
-
kafka 集群
至少三台服务器,Zookeeper 集群。原创 2024-03-20 14:33:08 · 428 阅读 · 1 评论 -
Zookeeper 集群
至少三台服务器。原创 2024-03-20 14:32:30 · 589 阅读 · 0 评论 -
Hadoop 集群
可以访问的 web 页面全部绑定了 127.0.0.1。禁止外部访问,需要访问可以使用 nginx 反向代理 增加鉴权之后暴露出去。如果不需要可以替换 IP。原创 2024-03-20 14:30:45 · 1289 阅读 · 0 评论 -
hive 3.1.3 搭建
一台机器,一个mysql数据库可以访问的 web 页面全部绑定了 127.0.0.1。禁止外部访问,需要访问可以使用 nginx 反向代理 增加鉴权之后暴露出去。如果不需要可以替换 IP。原创 2024-03-20 14:29:44 · 488 阅读 · 0 评论 -
hadoop 压缩 gzip biz2 lzo snappy
转载于:http://aperise.iteye.com/blog/2397398集成snappy和LZO压缩格式的一般步骤如下: 1)编译hadoop-xxx-master.zip得到一个hadoop-xxx-0.0.1-SNAPSHOT.jar和native/Linux-amd64-64/*.so等文件; 2)拷贝上面的jar和so文件到hadoop或者hbase的目录 ...转载 2018-11-22 16:48:39 · 342 阅读 · 0 评论 -
Hadoop-lzo的安装和配置,亲测可用。
转自 http://blog.csdn.net/joseph_happy/article/details/50374057简介启用lzo启用lzo的压缩方式对于小规模集群是很有用处,压缩比率大概能降到原始日志大小的1/3。同时解压缩的速度也比较快。安装lzolzo并不是linux系统原生支持,所以需要下载安装软件包。这里至少需要安装3个软件包:lzo, lzop, hadoo...转载 2018-12-02 21:22:55 · 1102 阅读 · 0 评论 -
Centos7 安装 ambari 2.6.2.2 和HDP 2.6.5 的艰苦历程
Centos7 安装 ambari 2.6.2.2 和HDP 2.6.5 的艰苦历程安装前的准备VM虚拟机三台(切记别吝啬,硬盘大点,不然安装的时候突然机器写满,centos连机都开不开)HDP地址: http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.6.5.0/HDP-2.6.5.0-centos7-rpm.t...原创 2019-08-02 16:58:06 · 665 阅读 · 0 评论