自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(16)
  • 资源 (4)
  • 收藏
  • 关注

原创 华为命令行基础

命令行视图命令行功能命令行帮助:查看命令作用以及当前视图下所有命令1.首字母+?2.?基本配置步骤配置系统名称--sysname配置系统时钟配置标题信息注:header (login/shelll) 可+文件名命令等级系统将命令进行分级管理,以增加设备的安全性。设备管理员可以设置 用户级别,一定级别的用户可以使用对应级别的命令行。...

2019-07-29 09:59:34 1060

原创 链路聚合技术

随着网络规模的不断扩大,用户对骨干链路的带宽和可靠性提出了越来越高的要求。在传统技术中,常用更换高速率的接口卡或者更换支持高速率接口板的设备的方式来增加带宽,但是这种方式往往需要付出高额的费用,而且不够灵活。 采用链路聚合技术可以在不进行硬件升级的条件下,通过将多个物理接口捆绑为一个逻辑接口,来达到增加链路带宽的目的。在实现增大链路带宽的同时,链路聚合技术采用备...

2019-07-23 21:27:02 1916

原创 电路交换与分组交换

交换:按照某种方式动态地分配传输线路的资源。1.电路交换建立连接(占用通信资源)-通信(一直占用通信资源)-释放连接(归还通信资源)。特点:通信的全部时间内,通信的两个用户始终占用端到端的通信资源2.分组交换分组交换采用分存储转发技术。分组交换的问题:1.分组在路由器存储转发时需要排队,会造成一定的时延。2.各分组必须携带的控制信息造成了一定的开销。3.分组交换需要专门...

2019-07-09 21:58:25 953

原创 running sqoop:java.lang.NullpointerException错误解决

 缺少java-json.jar的jar包,下载jar包,并将其放在hbase/lib 和sqoop/lib的文件夹下 下载路径:https://download.csdn.net/download/bd_ai_iot/10588012

2018-08-07 11:44:04 4935 5

原创 mysql数据导入hbase

下载sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz解压//配置环境变量export SQOOP_HOME=/home/hadoop/software/sqoop-1.4.6.bin__hadoop-2.0.4-alphaexport SQOOP_SERVER_EXTRA_LIB=$SQOOP_HOME/libexport PATH=$SQO

2017-11-19 17:37:46 1650

原创 json文件导入hbase

/*{"id":[{"_id":"https://img.alicdn.com/imgextra/i4/1677335387/TB2MNEhiXXXXXXwXXXXXXXXXXXX_!!1677335387.jpg","width":"750","商品标题":"【努比亚旗舰店】nubia/努比亚 Z9 max 移动联通双4G版智能手机","商品链接":"https://detail.tmall

2017-10-30 20:24:38 5838 1

原创 hbase存储照片的修改

//照片格式201603022112.jpg(年月日时分)import java.io.IOException;import java.util.Scanner;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import

2017-10-30 20:20:00 1372

原创 spark安装与配置

spark安装与配置1. 安装JDK下载jdk-8u144-linux-x64解压安装:rpm -ivh jdk-8u144-linux-x64.rpm配置环境变量:vi .bashrc export JAVA_HOME=/usr/java/jdk1.8.0_144export PATH=$PATH:$JAVA_HOME/bin 使环境变量生效2. 安装

2017-10-21 12:56:37 667

原创 hbase安装

hbase 1、上传hbase1.2.4上传hbase1.2.4压缩包2.解压[hadoop@master ~]$cd/home/hadoop/software[hadoop@master software]$tar xzvf hbase-1.2.4-bin.tar.gz配置环境变量[hadoop@master software]$cd[hadoop@m

2017-10-21 12:55:43 552

原创 zookeeper安装

Zookeeper为了搭建HBase完全分布式环境,前提就是搭建好zookeeper和Hadoop环境,zookeeper环境搭建第一步:准备环境​zookeeper-3.4.6​三台机器​​, 我的机器环境如下:​192.168.6.250  master​192.168.6.251  slave1192.168.6.252  slave2第二步:配置​下

2017-10-21 12:53:55 425

原创 hive安装

Hive 2.1.0安装环境Hadoop2.6.4   jdk1.7安装Hive修改hadoop 配置文件 etc/hadoop/core-site.xml,加入如下配置项hadoop.proxyuser.hadoop.hosts*hadoop.proxyuser.hadoop.groups*1.上传到/home/Hadoop/software,

2017-10-21 12:46:46 664

原创 Hadoop安装

(本例以安装Hadoop-2.6.4为例) 1、 配置主机名 Master 节点: masterSlave 节点: Slave1Slave 节点: Slave2*自定义:#vi /etc/sysconfig/networkNETWORKING=yes #启动网络 HOSTNAME=master  #主机名#hostname master  * Slave 节

2017-10-21 12:39:25 481

原创 Centos常用基础命令

常用指令功能ls显示当前文件夹内的内容ll -a显示当前文件夹下的详细内容mkdir+目录/文件夹名创建目录/文件夹mkdir -p +目录/文件夹名创建目录,若无父目录,则创建p(parent)cd到当前用户的根目录下cd + 目录切换目录

2017-10-21 12:22:03 389

原创 配置Centos的虚拟机网卡

配置网卡在界面处右击打开“open in terminal”su root 进入管理员vi /etc/sysconfig/network-scripts/ifcfg-eth0 1.修改BOOTPROTO=”none”2.在下方输入IPADDR=192.168.6.251(IP地址)DNS1=114.114.114.114DNS2=202.102.154.3GAT

2017-10-21 12:13:41 599

原创 hbase存取照片

import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.HColumnDescriptor;import org.apache.

2017-10-21 12:02:30 4748

原创 Eclipse连接hbase并实现简单表的建立

Eclipse连接hbase并实现简单表的建立在安装启动环境之前要做的准备.1.JDK以及Eclipse软件2.Eclpse的Hadoop插件一份  点击下载3.hadoop压缩包一份,4.确保集群正在启动状态正常,node节点工作正常,宿主机可以ping通master主机,并可以连接SSH(测试防火墙是否关闭)5.复制hadoop集群中的hosts文件到windows的c

2017-10-19 17:29:47 9910

mysql导入hbase所需要的jar

报错空指针,且提示json错误时,将此jar包放到hbase/lib和sqoop/lib 中,可解决问题

2018-08-07

kafka的安装和简单使用

kafka的集群安装和配置,以及简单的使用生产数据和消费数据

2017-11-19

mysql数据导入hbase

MySQL通过sqoop工具用命令将数据导入到hbase的代码文件

2017-11-19

用于hive的实例

用户Java对于hive的实例操作,帮助更好地加深对hive语句的理解

2017-10-23

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除