CentOS下载地址 Index of /centos/7.9.2009/isos/x86_64/http://mirrors.aliyun.com/centos/7.9.2009/isos/x86_64/
SparkStreaming 数据生成器代码 模拟爬虫从网络中爬取数据的过程,并将数据灌输到Kafka中,供下游消费者使用pom.xml<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.ap
spark 集群的手动搭建 一、安装scala1.下载 scala 安装包并上传到 Linux 上 链接:https://pan.baidu.com/s/1jkUwVqFx__y140AZZjig0Q 提取码:c3p02.解压安装包到指定位置tar -zxvf scala-2.11.8.tgz -C /opt/moudle并修改名字:mv scala-2.11.8.tgz scala3.修改环境变量:vim /etc/profile 并添加export SCALA_HOM...
Kafka集群部署 1)解压安装包tar -zxvf kafka_2.11-0.11.0.0.tgz2)修改解压后的文件名称 mv kafka_2.11-0.11.0.0/ kafka3)在/opt/module/kafka目录下创建logs文件夹mkdir logs4)修改配置文件cd config/vim server.properties输入以下内容:注:千万不要有空格#broker的全局唯一编号,不能重复broker.id=0#删除topic