关于SQL Server级联操作

首先推荐一个SQL Server 基本练习连接:https://www.2cto.com/database/201804/737669.html。 数据库中有三张表:department(部门),major(专业),teacher(老师) 创建三张表: -- 创建表 -- 创建院系信息表...

2018-10-30 11:35:25

阅读数 134

评论数 0

Day12-Hadoop中MapReduce编程

hadoop -------------------------------   1.组成:common、hdfs、mapreduce、yarn。   2.hadoop集群搭建流程:3种搭建流程。   3.hdfs shell命令   4.hdfs体系结构:主从结构{namenode、datano...

2018-08-25 10:24:45

阅读数 41

评论数 0

Day09-hdfs API

hdfs API --------------------     1.HDFS:hadoop分布式文件系统-->         两种表现形式:1.hadoop fs shell命令:【hadoop fs -commond】                   2.java...

2018-08-25 10:21:42

阅读数 40

评论数 0

Day09-搭建IDE

hdfs API -----------------------   1.   2. 搭建IDE     a.     b. 集成eclipse环境       1.将hadoop-eclipse-plugin-2.6.0.jar复制到       2.       3.       4.  ...

2018-08-25 10:20:46

阅读数 36

评论数 0

Day08-hdfs commond命令

hdfs commond命令 ----------------------------     1.appendToFile追加文件至目标文件末尾;(开yarn进程)        $>hadoop fs -appendToFile text111.txt /spaceQuo...

2018-08-25 10:19:03

阅读数 36

评论数 0

使用rpm命令查看软件是否安装,卸载、安装软件

使用rpm命令查看软件是否安装,卸载、安装软件 常用命令 rpm -qa | grep mysql    //查看系统是否安装mysql rpm -e mysql        //卸载mysql rpm -i 安装包        //安装软件 rpm相关命令: -a:查询所有套件; -b&...

2018-08-25 10:15:45

阅读数 271

评论数 0

关于继承Reducer类,内部方法分析

写自己的MyReducer类需要继承Reducer类。 其中逻辑算术写在reduce()函数中,setup()函数在整个reducer中是靠前面执行的,且只执行一次。所以很多需要设计在输出前面的且不重复执行的可以写在setup()方法中。...

2018-07-24 17:03:38

阅读数 121

评论数 0

出错:/bin/bash: line 0: fg: no job control

问题:在windows的myeclipse上运行MapReduce在Linux的yarn上,会出现这个错误。4个配置文件已经配好,Linux上的集群和yarn也已经开启。 原因:我是刚配置完mapred-site.xml文件中的mapreduce.framework.name值为yarn,集群上也...

2018-07-24 17:01:16

阅读数 221

评论数 0

在myeclipse中运行MR从http://localhost:8080/到http://master:8088/

问题:我把4个配置文件已经设置为在hdfs存储,在yarn上运行,但是打包driver类放到lib目录下,也添加到path中,集群也打开了,问题就是运行的时候显示job在localhost上运行。即The url to track the job: http://localhost:8080...

2018-07-23 23:06:02

阅读数 217

评论数 0

提交MapReduce任务出错:unknown queue: default

  报错:unknown queue: default 原因:提交job作业,给application设置队列,如果没有设置队列,默认加载default队列,问题是学习配置任务队列的时候,我把参数设置order,phone,这样把之前root下默认的default给覆盖掉了。 解决:在重新配置...

2018-07-23 22:04:36

阅读数 168

评论数 0

JAVA 常用框架和工具

JAVA 常用框架和工具集成开发工具(IDE):Eclipse、MyEclipse、Spring Tool Suite(STS)、Intellij IDEA、NetBeans、JBuilder、JCreatorJAVA服务器:tomcat、jboss、websphere、weblogic、resi...

2018-07-15 09:30:39

阅读数 245

评论数 0

非常好用的刺客推荐

最近玩王者荣耀喜欢上玩一个刺客,这个刺客是兰陵王,它前期刷完一波野后立即升4级,抓人简直无解。杀人秘籍:1.开大隐身走到敌人附近,保证1和2技能都能打中,先放2技能再1技能眩晕,最后反向补大招,这样就算杀不死也能跑掉。如果能必定杀死先平A几刀,最后反向大。...

2018-07-15 09:26:01

阅读数 82

评论数 0

hadoop2-第十二章-Sqoop安装与使用

Sqoop的安装与使用Sqoop介绍Sqoop即 SQL to Hadoop ,是一款方便的在传统型数据库与Hadoop之间进行数据迁移的工具,充分利用MapReduce并行特点以批处理的方式加快数据传输,发展至今主要演化了二大版本,Sqoop1和Sqoop2,我们以Sqoop1为案例进行讲解,S...

2018-06-21 21:52:51

阅读数 87

评论数 0

hadoop1-实验四-ubuntu-14.04.5-desktop-i386中安装Hbase

ubuntu-14.04.5-desktop-i386中安装Hbase实验环境:1.ubuntu-14.04.5系统2.hbase-1.1.5-bin.tar.gz安装包3.hadoop伪分布式搭建完成一、 安装Hbase  1. 使用传输工具将Hbase安装包发送到Ubutu系统的/home/h...

2018-06-21 14:15:05

阅读数 75

评论数 0

Kafka的安装和简单实例测试

Kafka的安装和简单实例测试一、安装kafka前提:事先将kafka_2.10-0.10.1.0.tgz安装包放入到~/下载目录下。注:kafka的使用依赖zookeeper,安装kafka前必须先安装zookeeper, 下载稳定版本0.10.1.0的kafka.此安装包内已经附带zookee...

2018-06-19 09:02:26

阅读数 448

评论数 0

第十一章-安装Flume(使用Flume操作两个实例)

一、安装Flume1.     解压Flume安装包到/usr/local中$>sudo tar -zxf apache-flume-1.7.0-bin.tar.gz -C/usr/local2.     给Flume文件夹改名$>cd /usr/loc...

2018-06-08 15:06:17

阅读数 886

评论数 0

Storm编程实践(安装Maven-使用Maven编译运行代码-mvn 打包)

Storm编程实践(安装Maven-使用Maven编译运行代码-mvn 打包)实验报告(三)《Hadoop数据分析平台II》实验报告 实验名称:Storm编程实践 姓名/学号:甘宇/041540120 日期:18.6.4 实验环境: 操作系统:Linux Hadoop版本:2.6.0或以上...

2018-06-08 09:44:43

阅读数 222

评论数 2

Ubuntu14中安装zookeeper3.4.6和Storm0.9.6

安装Zookeeper1.     解压安装包到/usr/local中2.     修改/usr/local下的zookeeper-版本号文件夹改为zookeeper3.     修改zookeeper文件的拥有者为hadoop用户4.     修改配置文件/usr/local/zookeeper...

2018-06-07 19:01:17

阅读数 96

评论数 0

Day04-静态IP设置、克隆虚拟机、Hadoop完全分布式搭建

静态IP设置、关闭防火墙、克隆虚拟机、Hadoop完全分布式搭建静态IP的设置--------------------------    1.VMware-->编辑-->虚拟网络编辑器-->还原默认配置-->重...

2018-06-07 14:27:57

阅读数 75

评论数 0

Day06-HDFS的体系结构(namenode作用、datanode作用、block)、fsimage文件、edits文件和checkpoing检查点机制

HDFS的体系结构(namenode作用、datanode作用、block)、fsimage文件、edits文件和checkpoing检查点机制和Namenode开启过程HDFS的体系结构-------------------------    1.namenode[守护进程]作用:       ...

2018-06-07 13:08:28

阅读数 141

评论数 1

提示
确定要删除当前文章?
取消 删除
关闭
关闭