- 博客(27)
- 收藏
- 关注
RSS订阅原创 当centos7中profile环境配置错误怎么办
直接输入:export PATH=/usr/bin:/usr/sbin:/bin:/sbin:/usr/X11R6/bin
2022-10-17 06:59:19
351
原创 使用python写mapreduce单词计数
1.map#!/usr/bin/env pythonimport sysfor line in sys.stdin: line = line.strip() words = line.split() for word in words: print('%s\t%s' % (word, 1))2
2021-06-03 18:47:14
671
1
原创 平台搭建遇到namenode和datanode启动不了
1.遇到这种情况首先检测hadoop/conf文件中是否有错误2.去查看hadoop下logs日志保错3.如果是namenode 和 datanodeid
2021-06-03 15:18:00
1184
原创 liunx网卡启动不了解决办法
1.关闭NetworkManager服务：systemctl stop NetworkManager2.设置禁止开机启动：systemctl disable NetworkManager3.重启网卡：service network restart
2021-06-03 14:47:23
2309
原创 hive的使用
（1）显示数据库 hive> show databases;（2）使用 default 数据库 hive> use default;（4）显示 default 数据库中的表 hive> show tables;（5）删除已创建的 student 表 hive> drop table student;
2021-06-01 16:50:05
56
原创 yarn调优
容器内存yarn.nodemanager.resource.memory-mb最小容器内存yarn.scheduler.minimum-allocation-mb容器内存增量yarn.scheduler.increment-allocation-mb最大容器内存yarn.scheduler.maximum-allocation-mb容器虚拟cpu内核yarn.nodemanager.resource.cpu-vcores最小容器虚拟cpu内核数量yarn.sche
2021-06-01 09:50:56
105
原创 完全分布式的搭建
1.首先创建三台虚拟机2.修改主机名：2.配置三台主机ip(仅供参考）vi /etc/sysconfig/network-scripts/ifcfg-ens33
2021-06-01 09:13:44
68
原创 sqoop的安装
一.sqoop的安装1.解压sqoop安装包[root@master h3cu]# tar zxvf /h3cu/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/src/2.xiu
2021-05-31 20:44:04
215
原创 hive的安装
一.hive的安装1.首先在linux上解压hive安装包[root@master ~]# tar zxvf /h3cu/apache-hive-1.2.2-bin.tar.gz -C /usr/local/src/
2021-05-31 20:34:56
50
原创 通过sqoop 导入导出
Hive-mysql./sqoop export --connect jdbc:mysql://ip地址:3306/库 \--username root \--passwrd 123456 \--table 表名 \--export-dir /hive路径 \--fields-terminated-by ‘,’2.mysql-hdfs./sqoop import \--connect jdbc:mysql://ip地址 \--username root...
2021-05-31 15:43:36
95
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人