Apache大数据
文章平均质量分 91
mvpboss1004
这个作者很懒,什么都没留下…
展开
-
Cloudera 6.x 手工配置TLS加密
本文详细介绍了Cloudera配置TLS的步骤,解决无license情况下无法使用auto-TLS自动配置的问题。原创 2021-05-18 12:36:19 · 519 阅读 · 0 评论 -
Linux安装配置Spark集群
Linux安装配置Spark集群假设我们有99.1.36.164(Master)、99.1.36.165(Slave01)、99.1.36.166(Slave02)三台机器,想要搭建一个Spark集群。首先我们需要搭建一个分布式的Hadoop集群,如果是零基础建议从单机伪分布式的集群开始学习,具体可以参见Linux安装配置Hadoop 。这篇文章里我们针对生产环境的需求,会修改一些默认配置。另外,由原创 2017-03-05 20:49:14 · 1022 阅读 · 0 评论 -
Linux安装配置Kafka
1.安装Kafka下载kafka_2.10-0.8.2.2.tgztar -zxvf kafka_2.10-0.8.2.2.tgzmv kafka_2.10-0.8.2.2/ /usr/share/kafka2.启动zookeepercd /usr/share/kafkabin/zookeeper-server-start.sh config/zookeeper.pro原创 2016-10-21 14:53:47 · 442 阅读 · 0 评论 -
Flume对接Kafka
1.配置文件:s1kkafka.conf# s1kkafka.conf: A single-source and kafka-sink configuration # Name the components on this agenta3.sources = r1a3.sinks = k1a3.channels = c1 # Describe/configure t原创 2016-10-21 14:52:05 · 399 阅读 · 0 评论 -
Linux安装配置Flume
1.安装flume下载apache-flume-1.6.0-bin.tar.gztar -zxvf apache-flume-1.6.0-bin.tar.gzmv apache-flume-1.6.0-bin/ /usr/share/apache-flume2.设置环境变量cd /usr/share/apache-flumecp conf/flume-env.sh.te原创 2016-10-21 14:48:46 · 1937 阅读 · 0 评论 -
Linux安装配置Hadoop
Linux安装配置Hadoop1.新建hadoop用户新建hadoop用户。以下的所有操作,都用hadoop用户进行。 生成密钥:ssh-keygen -t rsa2.下载hadoop下载hadoop-2.7.2.tar.gz,解压到/usr/local/,进入该目录。 修改./etc/hadoop/hadoop-env.sh,将export JAVA_HOME=${JAVA_HOME} 等式右原创 2016-10-26 15:31:46 · 761 阅读 · 0 评论