- 博客(16)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 HDFS的常用API详解
import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;/** * hdfs入门程序: * 面向对象：一切皆对象 * 文件系统也可以看做是一类事物、FileSystem * * 一定有共同的行为和属性：...
2018-03-30 18:07:03
8338
1
原创 linux常用命令(未完版，持续更新)
1.netstat -nltp 查看进程号和端口号对应关系2.ps -ef | grep -i java 查看某个(java)进程的详细启动信息
2018-03-30 16:57:35
283
原创 hbase的java API使用详解
import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.TableName;import org.apache.hadoop.hbase.client.Admin;import org.apache...
2018-03-29 20:38:07
1794
原创 hbase的shell操作
1.进入 hbase hbase shell 在你安装的随意台服务器节点上，执行命令：hbase shell，会进入到你的 hbase shell 客户端[root@hadoop02 ~]# hbase shell2.帮助命令相关 help 获取所有命令提示 help "dml" 获取一组命令的提示 help "put" 获取一个单独命令的提示帮助3.显示 hbase 中的...
2018-03-29 18:43:09
883
原创 hbase-1.2.6的高可用集群搭建安装文档
1.安装 zookeeper 集群，此处略2.找到官网下载 hbase 安装包 hbase-1.2.6-bin.tar.gz， 这里给大家提供一个下载地址：http://mirrors.hust.edu.cn/apache/hbase/ 对应版本的官方文档：http://hbase.apache.org/1.2/book.html3.上传安装包到服务器，并解压到对应的安装目录[hado...
2018-03-29 13:55:41
633
原创 一条数据的HBase之旅，简明HBase入门教程-开篇
一条数据的HBase之旅，简明HBase入门教程-开篇一些常见的HBase新手问题 什么样的数据适合用HBase来存储？ 既然HBase也是一个数据库，能否用它将现有系统中昂贵的Oracle替换掉？ 存放于HBase中的数据记录，为何不直接存放于HDFS之上？ 能否直接使用HBase来存储文件数据？ Region(HBase中的数据分片)迁移...
2018-03-29 10:38:46
593
原创 hadoop的eclipse开发环境安装
配置eclipse可视化hadoop环境1.下载 hadoop-eclipse-plugin-2.7.5.jar 并解压 此文jar包的作用是配置hdfs在eclipse中的文档目录树可视化窗口，作用如下图 把hadoop-eclipse-plugin-2.7.5.jar放入到ECLIPSE_HOME/plugins中2.在window安装hadoop安装包，把hadoop-2...
2018-03-28 22:40:12
985
原创 eclipse下开发hadoop的jar包配置
1.进入我们的hadoop安装目录（hadoop-2.7.5-centos-6.7.tar.gz版本），里面有我们需要的jar包 G:\myProgram\hadoop-2.7.5\share\hadoop2.按照如图所示进行添加eclipse用户自己的jar包3.把下图红线内的所有jar都添加进eclipse中（以mapreduce为例）按照上图的操作把全部添加进去...
2018-03-28 21:52:19
4284
原创 HDFS的shell常用命令大全
1.启动相关 启动zookeeper： zkServer.sh start 启动HDFS : 不管在集群中的那个节点都可以 start-dfs.sh 启动YARN ： 只能在YARN主节点中进行启动 start-yarn.sh HDFS : http://hadoop02:50070 YARN ： http://hadoop05:80...
2018-03-28 21:35:49
2948
原创 Linux下安装Mysql
1.检查是否安装过mysqlrpm -qa|grep -i mysql2.如果发现有就卸载以前版本的mysqlrpm -e --nodeps mysql-libs-5.1.73-5.el6_6.x86_64（注意：上面的命令需要使用root用户，hadoop用户因为权限不够无法操作。使用 su root 进行切换）3.删除老版本mysql的开发头文件及库...
2018-03-28 19:47:23
293
原创 hadoop2.7.5搭建高可用集群
本文目的：搭建hadoop的高可用集群集群规划1.下载 hadoop-2.7.5-centos-6.7.tar.gz 安装包2.通过CRT软件上传到hadoop02号机器3.解压软件到apps目录下tar -zxvf hadoop-2.7.5-centos-6.7.tar.gz -C ~/apps/4.修改hadoop-env.sh 配置文件先查看jdk安装路径echo $JAVA_HOME vi...
2018-03-25 11:47:53
1948
1
原创 hadoop的eclipse的使用安装
1.把插件名为 hadoop-eclipse-plugin-2.7.5.jar 放在ECLIPSE_HOME/plugins 目录下2.把 hadoop-2.7.5-centos-6.7.tar.gz 解压到本地电脑3.在本机配置windows环境变量 HADOOP_HOME=C:\myProgram\hadoop-2.7.5 必须要配置的。 path加入：%HADOOP_HOME%\bin;4...
2018-03-23 10:28:13
3183
原创 hadoop基础集群的安装
说明：该文章以4台centos系统为案例配置hadoop基础集群，节点名字分别为hadoop02,hadoop03,hadoop04,hadoop051.基础集群环境准备1.1修改主机名在root用户下：vi /etc/sysconfig/network或者如何配置了hadoop账户的sudo权限，则在hadoop登陆情况下使用命令 sudo vi/etc/sysconfig/network修改里...
2018-03-22 21:09:25
420
原创 zookeeper的eclipse插件安装
1.先下载zookeeper eclipse plugin.zip2.解压把下面六个jar包复制到eclipse_home/plugins/3.打开eclipse4.会出现zookeeper面板5.点击下图红色按钮6.点击下图红色按钮7.按照下图配置8.为了防止宕机，建议在add几个zookeeper节点，方法入上9.最后插件会自动读取zookeeper目录树出现上图即为成功...
2018-03-22 10:40:09
618
原创 zookeeper的shell操作
启动：zkServer.sh start停止：zkServer.sh stop查看状态：zkServer.sh status1.进入zookeeper集群zkCli.sh2.创建默认永久节点(注意父节点必须要存在)create /a 'aa'3.创建临时节点(注意父节点必须要存在)create -e /b "bb"4.创建带顺序编号的永久节点(注意父节点必须要存在)create -s /a/cc ...
2018-03-22 09:54:39
2474
原创 zookeeper的linux安装
须知：zookeeper的节点数量不适宜太多，也不适宜太少。必须是奇数个本文准备的zookeeper集群的节点个数有3个分别是hadoop02， hadoop03， hadoop04zookeeper集群不用依赖于任何东西，除了JDK。版本的选择：zookeeper-3.4.5到10.tar.gz 都可以。安装步骤：（本文以zookeeper-3.4.10.tar.gz为例）1、获取安装包包。并且...
2018-03-21 20:04:11
386
AZ-900_186Q详细讲解版(2020.09.02版本).docx
2020-09-02
AZ-900_186Q题库（英中结合)_考试原题.pdf
2020-08-30
GnuPG-2.2.20.dmg
2020-08-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人