- 博客(13)
- 收藏
- 关注
RSS订阅原创 Idea连接远程centos操作HDFS
1、 根据配置文件获取HDFS操作对象static { conf = new Configuration(); conf.set("fs.defaultFS", "hdfs://192.168.236.135:9000"); try { fs = FileSystem.get(conf); } catch (...
2018-12-11 16:22:43
1411
原创 Hive安装配置
HIVE安装配置Hadoop版本为3.0.3下载HIVE安装包[hive下载 3.1.1版本] http://mirrors.hust.edu.cn/apache/hive/上传安装包解压tar -xvf apache-hive-3.1.1-bin.tar.gzmv apache-hive-3.1.1 hive配置HIVE环境变量vi ~/.bash_profileHIVE_H...
2018-12-06 14:40:33
501
原创 Docker配置hadoop集群
1、配置网络代理(公司电脑需要设置代理)vi /etc/profilehttp_proxy=ip:porthttps_proxy=$http_proxy2、安装docker3、下载centos镜像docker pull centos4、以centos镜像为基础，配置sshvi Dockerfile-ssh -- 配置ssh====================...
2018-12-05 15:39:08
373
翻译 centos7 ping: www.baidu.com: Name or service not known(访问外网失败)
[root@www ~]# ping www.baidu.comping: www.baidu.com: Name or service not known解决：记住NAT设置中的子网IP、子网掩码、网关IP三项，接下来配置文件主要是这三项。 ...
2018-11-26 22:55:46
2105
翻译 cron 表达式
Cron表达式是一个字符串，字符串以5或6个空格隔开，分为6或7个域，每一个域代表一个含义，Cron有如下两种语法格式： Seconds Minutes Hours DayofMonth Month DayofWeek Year或 Seconds Minutes Hours DayofMonth Month DayofWeek每一个域可出现的字符如下： Seconds:可出现", - ...
2018-08-24 15:08:44
79
翻译 Centos7 设置静态IP地址
一： 修改网卡配置文件（操作前先备份一下该文件），/etc/sysconfig/network-scripts/(1) cd /etc/sysconfig/network-scripts/（2）编辑 网卡网卡 ifcfg-ens33 TYPE="Ethernet" BOOTPROTO="static" IPADDR=192.168.1.21 NETMASK=255.2...
2018-07-30 15:35:00
116
翻译 CentOS7安装mysql
试着在腾讯云服务器上部署web应用，就想着先搭建一下服务器环境，操作系统选的是centos7，在安装好jdk，tomcat后测试可以部署web应用就准备再安装一个mysql数据库，之前试过好几种方式都是以初始密码找不到告终，这次就又重新百度安装方式。 据说centos7没有mysql 的yum源，于是就直接从网上下载mysql的repo源（这个玩意目前还没仔细探究是什么东西，在centos里...
2018-07-26 17:00:38
90
原创 CentOS7搭建hadoop3.0.3集群
关闭防火墙 查看防火墙状态 firewall-cmd –state 停止firewall systemctl stop firewalld.service 禁止firewall开机启动 systemctl disable firewalld.service .配置主机名 设置主机名 hostnamectl set-hostname hadoop01 查看主机名 hostnam...
2018-07-26 15:08:19
420
翻译 Hadoop作业JVM堆大小设置优化
https://www.cnblogs.com/wangq17/articles/6038406.htmlContainer is running beyond memory limitshttp://stackoverflow.com/questions/21005643/container-is-running-beyond-memory-limits` [hadoop] - Con...
2018-07-24 17:24:52
1065
原创 本地项目上传GitHub
1、进入GitHub，登陆2、新建项目3、创建成功，提示可使用ssh和Https的方式。这里使用https方式4、在本地选中要提交的文件夹，打开Git Bash Here5、按照命令执行即可...
2018-04-27 17:08:09
80
原创 linux安装rubygems讲解
一、RubyGems 是 Ruby 的一个包管理器，它提供一个分发 Ruby 程序和库的标准格式，还提供一个管理程序包安装的工具。RubyGems 旨在方便地管理 gem 安装的工具，以及用于分发 gem 的服务器。这类似于 Ubuntu 下的apt-get, Centos 的 yum，Python 的 pip。二、下载rubygems安装包 cd /usr
2017-11-23 14:43:03
1303
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人