![](https://img-blog.csdnimg.cn/20201012194950884.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据阶段-集群搭建
集群搭建
x我有辣条跟我走。
当你的才华还撑不起你的野心时,就应该静下心来学习。
展开
-
linux中zookeeper的安装与配置
三台虚拟机zookeeper的下载与安装原创 2020-03-11 19:52:26 · 815 阅读 · 0 评论 -
virtualbox中jdk的下载安装及分发
一.Linux中JDK的下载网址:https://www.oracle.com/java/technologies/javase-jdk13-downloads.html将下载的文件放到note1中并分发到2-4中:上图第三步详解:将安装包已经全部分发到note1-4中。二....原创 2020-03-19 14:30:48 · 398 阅读 · 0 评论 -
virtualbox用linux系统新建一个虚拟机步骤详解
第一步:第二步:启动后:重启后进入virtualbox下载地址:https://www.virtualbox.org/wiki/Downloadscentos下载地址:https://wiki.centos.org/Download原创 2020-03-09 16:07:18 · 427 阅读 · 0 评论 -
virtualbox中的Linux网络配置及基本配置
配置网络ll ,lsrebootrebootvirtualbox中[D:~]$Connecting to 192.168.56.104:22…Connection established.To escape to local shell, press ‘Ctrl+Alt+]’.WARNING! The remote SSH server rejected X11...原创 2020-03-09 15:09:12 · 349 阅读 · 0 评论 -
Sqoop的下载与安装:
Sqoop的下载地址:http://mirrors.aliyun.com/apache/sqoop/官网地址:http://sqoop.apache.org/装的:sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz改配置文件:sqoop.sh里面的HADOOP_HOME=/data/hadoop/hadoop 在server/lib下面添加mysql的jar包:mysql-connector-java-8.0.13.jar hadoop的目录:(hadoop\ha.原创 2020-07-18 16:33:26 · 4506 阅读 · 0 评论 -
hbase基本操作
搭建好hbase,它主要管缓存进入hbase:[root@node7-3 hbase]# bin/hbase shell2020-07-13 21:39:21,244 WARN [main] util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicableHBase ShellUse "hel..原创 2020-07-13 21:53:36 · 304 阅读 · 0 评论 -
Flink的安装配置
Flink的安装配置单机:解压:(找到你想放地目录下)tar zxvf flink-1.6.1-bin-hadoop27-scala_2.11.tgz -C修改配置文件:(flink/conf/) masters,slaves,flink-conf.yamlmasters:node7-1:8081slaves:node7-2node7-3flink-conf.yamljobmanager.rpc.address: node7-1...原创 2020-09-18 18:57:51 · 331 阅读 · 0 评论 -
kafka下载及集群配置创建
介绍官网:http://kafka.apache.org/Kafka用于构建实时数据管道和流应用程序。它是横向可扩展的,容错的,镜像地址: http://mirrors.aliyun.com/apache/kafka/2.5.0/2.单机随机选择一台服务器把kafka传上去:node7-2命令列表: 解压: tar -xzf kafka_2.12-2.5.0.tgz重命名:mv kafka_2.12-2.5.0 kafka删除tar包:rm -rf ka...原创 2020-08-22 16:37:33 · 154 阅读 · 0 评论 -
mysql在linux系统安装
1.下载:https://dev.mysql.com/downloads/repo/yum2.安装https://jingyan.baidu.com/article/6525d4b1704f52ac7d2e94c1.html拖到linux系统:安装顺序 common>libs>client>server>devel按着这个上面步骤走:https://www.cnblogs.com/lemon-feng/p/11233227.html3.安装时如果没以下..原创 2020-09-08 16:37:25 · 168 阅读 · 0 评论 -
MongoDB的安装配置 :linux系统及windows系统
MongoDB下载:https://www.mongodb.com/try/download/community(建议在火狐或者谷歌浏览器下载,不要在qq上下载)原创 2020-09-11 17:56:52 · 331 阅读 · 0 评论 -
Scala在idea的插件及SDK安装
下载Scala的安装包:https://www.scala-lang.org/download/(下载两个包)InteliJ IDEA Scala的在线安装(idea的版本2020.1.3),可以直接下载安装:完成后就有了SDK,说明ok了。创建一个对象文件,运行一下:运行成功....原创 2020-08-05 11:39:59 · 1512 阅读 · 0 评论 -
搭建spark集群(一)
1.下载地址:https://mirrors.aliyun.com/apache/spark/spark-3.0.0/包名:spark-3.0.0-bin-hadoop2.7-hive1.2.tgz2.解压到node7-1,改名,删包3.在spark运行期间,我们可以通过网页访问:http://node-1:4040/# scala:bin/run-example SparkPi 10# java:bin/run-example JavaSparkPi 1004.输入原创 2020-08-13 20:25:38 · 144 阅读 · 0 评论