- 博客(6)
- 收藏
- 关注
RSS订阅原创 Spark
文章目录Apache Spark环境搭建准备工作安装SparkSpark程序开发依赖WordCount提交Jar包本地模拟Spark RDD创建方式集合文件系统RDBMSHBase容错算子Transformation**map**(*func*) √**filter**(*func*) √**flatMap**(*func*) √**mapPartitions**(*func*) √**mapPa...
2020-01-25 13:12:59
222
原创 Kafka
搭建准备工作分布式集群中时钟同步JDK1.8以上ZooKeeper集群服务运行正常安装[root@Kafka0* ~]# tar -zxf kafka_2.11-2.2.0.tgz -C /usr环境修改kafka核心配置文件server.properties[root@Kafka01 kafka_2.11-2.2.0]# vi config/server.pr...
2019-11-21 21:41:47
100
原创 Hive
操作创建表create table t_user( id int, name string, sex boolean, birthDay date, salary double, hobbies array<string>, card map<string,string>, address struct<country:string...
2019-11-21 21:00:03
185
原创 HBase
操作shell命名空间操作# 创建一个普通的命名空间hbase(main):006:0> create_namespace "zzj"# 创建带属性的命名空间hbase(main):007:0> create_namespace "shahe",{'subway'=>'bj'}#删除命名空间hbase(main):001:0> drop_namespac...
2019-11-21 20:31:26
225
原创 Hadoop
HDFS安装（伪集群）准备物理虚拟机一台版本：CentOS7配置网络# 如果需要配置双网卡，需要添加网卡硬件支持vi /etc/sysconfig/network-scripts/ifcfg-ens331. 将ip的分配方式改为static2. 添加 IPADDR=静态IP地址3. 添加 NETMASK=255.255.255.04. 网卡开机自启动 ONBOOT=...
2019-11-12 22:34:33
241
原创 MongoDB
基本安装yum安装（rpm）vi /etc/yum.repos.d/mongodb-org-3.4.repo[mongodb-org-3.4]name=MongoDB Repositorybaseurl=https://repo.mongodb.org/yum/redhat/$releasever（这里填写系统版本）/mongodb-org/3.4/x86_64/gpgcheck=1...
2019-11-12 20:53:18
602
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人