2017年07月_科技论文精讲

原创 Hbase参数配置及含义

1。 HBase.hregion.max.filesize配置文件： hbase-site.xml含义：决定单个region大小，当一个region大小变得大于该值（因为写入了更多数据）时，它会切分成两个region

2017-07-21 16:05:12 360

原创 Hbase shell 的使用

1.进入hbase shell[root@yufan ~]# hbase shellSLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/home/bigdata/hbase/hbase-1.1.8/lib/slf4j-log4j12-1.7.5.jar!/org/slf4

2017-07-20 16:02:38 222

原创 Hbase安装

·前途条件：已经安装了Hadoop 2.x版本且hadopp可以正常运行本机和本地可以通过ssh 主机名直接连接Zookeeper已经启动 1. 去官网下载Hbase 文件2. 放到 linux系统中3. 解压缩[root@yufan1 hbase]# tar -zxvf hbase-1.1.8-bin.tar.gz4. 配置环境变量。在

2017-07-20 15:55:36 209

原创 Zookeeper的安装

1. 解压缩 zookeeper压缩包 tar –zxvf zookeeper-3.4.9.tar.gz2. 移动到 conf 路径下，将zoo_sample.cfg 文件更名zoo.cfg复制到coof 路径下[root@yufan hbase]# cd zookeeper-3.4.9/conf/[root@yufan conf]# cp zoo_sa

2017-07-20 15:51:18 160

原创 Hbase错误及处理

1. master结点报错2017-07-20 11:16:10,353 ERROR [main] master.HMasterCommandLine: Master exitingjava.io.IOException: Could not start ZK with 3 ZK serversin local mode deployment. Aborting as clients

2017-07-20 11:28:24 2395

原创 HDFS中dfs 命令

Usage: hadoop fs [generic options] [-appendToFile ... ] [-cat [-ignoreCrc] ...] [-checksum ...] [-chgrp [-R] GROUP PATH...] [-chmod [-R] PATH...] [-chown [-R] [OWNER][:[GROUP]] PATH...] [-c

2017-07-18 09:16:37 9934

原创 hadoop在eclipse上的安装

1.eclipse在 linux上的安装。（1）将eclipse-linux的压缩包导到linux系统中，然后进行解压缩，跟hadoop放在同一个目录下。（2）然后将 hadoop的插件放入到eclipse下plugins的文件夹下，打开eclipse，打开Preferences页面，设置hadoop路径（3）转换到MapReduce工作目录。（4）连

2017-07-18 09:08:33 356

原创 hadoop2.2安装教程

三．Hadoop安装1. 配置多台虚拟机来搭建一个Hadoop集群。a) 一台作为 namenode 节点b) 其他作为 datanode 节点c) 虚拟机使用仅主机模式连入网络。三种连入网络方式说明：i. 桥接模式：1. 会直接分配一个物理地址，与主机是同一等级的。ii. NAT模式：1. 共享主机的IP地址，iii. 仅主机模式桥接模式和仅主

2017-07-18 08:56:46 245

原创 Sql(Oracle)

简单查询语法：select 字段名1,字段名2,... from 表名；1.查询部分列语法：select 字段名。。。。 from 表名2.查询全部列语法：select * from 表名3.为查询的列列取列名语法： select字段名 as别名，表达式 [as]别名 from表名；其中as可以省略。注意：别名中如果出现空格或使用sql中的关

2017-07-10 15:57:02 477

原创计算机网络--概述

基础概念：比特是网络通信技术中的最小数据单位。（bit 位）字节是计算机内部存储文件的最小数据单位。（Byte字节）、注意：B/s 的含义是字节/每秒，b/s 的含义是比特/每秒。 1KB = 1024 Byte 1Kb = 1024 bit 1MB = 1024 KByte

2017-07-03 21:26:50 307

原创数据结构（Java）--查找

由于查找运算的使用频率很高，几乎在任何一个计算机系统软件和应用软件中都会涉及到，所以当问题所涉及的数据量相当大时，查找方法的效率就显得格外重要。在一些实时查询系统中尤其如此。 1、查找条件、查找操作和查找结果一个数据结构由相同数据类型的多个数据元素所组成，一个数据元素通常由多个数据项组成。关键字是数据元素中用于识别该元素的一个或多个数据项。能够唯一识别

2017-07-03 20:50:26 1531

原创数据结构（Java）--排序

排序的基本概念（1）排序的数据序列与关键字n数据序列指待排序的数据元素集合，排序是以关键字为基准进行的，n排序过程指将一个数据序列中的元素按照关键字值大小递增（或递减）的次序重新排列。n升序（正序）：按关键字从小到大排列得到的序列。n降序（反序）：按关键字从大到小排列得到的序列。（2）排序算法的性能评价（a）

2017-07-03 20:43:30 521

原创数据结构（Java）--图

图（graph）是由结点集合及结点间的关系集合组成的一种数据结构。图中的结点又称为顶点，结点之间的关系称为边（edge）。一个图G 记作G=(V, E) 其中，V 是顶点A 的有限集合，E 是边的有限集合。即V ={A|A∈某个数据元素集合}E={(A,B )|A,B∈V } 或 E={〈A,B〉|A,B∈V且Path(A,B) } 其中，(A,B)表示从结点A到B的一

2017-07-02 23:25:18 663

原创数据结构（Java）--树和二叉树

一.树 1.基础知识树是由n（n>=0）个结点组成的有限集合。n=0的树称为空树；n>0 的树由以下两个条件约定构成有且仅有一个结点n，它没有前驱结点，只有后继结点。n称为树的根结点除结点n外，其余的每一个结点都有且仅有一个直接前驱结点；有零个或多个直接后继结点。一颗大树分成几个大的分枝，每个大分枝也都是一棵树，由此我们可以给出树的递归定义。树是由n个结点组成的有

2017-07-02 20:12:08 415

原创数据结构（Java）--数组和矩阵

一.数组 1.基础知识数组是一种数据结构，数据元素固有相同的数据类型一维数组的逻辑结构是线性表多维数组是线性表的扩展 2.一维数组一维数组采用顺序存储结构数组通过下标识别元素，元素地址是下标的线性函数数组是随机存取结构数组一旦创建，其所占据的存储空间将确定下来，不能进行插

2017-07-02 18:25:45 1887

原创数据结构（Java）--栈和队列

一.栈 1.基础概念栈是指插入和删除运算被限制在表的一端进行的线性表允许操作的一端称为栈顶不允许操作的一端称为栈底在栈顶插入元素的操作称为入栈删除栈顶元素的操作称为出栈没有元素的栈称为空栈后进先出 LIFO（last in first out）栈接口public inte

2017-07-02 18:19:13 302

原创数据结构（Java）--双链表

一、双链表结点类public class DoubleNode{ public T data; public DoubleNode prev, next; //前驱，后继 public DoubleNode(T data, DoubleNode prev,DoubleNode next) //构造方法重载 p

2017-07-02 11:19:14 513

原创数据结构（Java）--线性表

一.线性表的定义线性表（Linear List）是由n（n≥0）个类型相同的数据元素a0，a1，…，an-1组成的有限序列。 LinearList=(a0，a1，…，an-1) ①n是线性表的元素个数，称为线性表的长度。n=0时LinearLis

2017-07-02 11:09:37 532

原创数据结构（Java）--基础概念

java作为一种学习工具数据元素：表示一个事物的一组数据，数据元素是数据的基本单位数据结构概念包括三方面： ①数据的逻辑结构 ②数据的存储结构 ③数据的操作1.数据的逻辑结构：B=(K,R) K表示元素的个数，R表示元素之间的关系线性结构：元素之间具有线性结构，及除第一个和最

2017-07-02 11:05:11 317

原创 MySql-cmd登录基本指令

mysql服务状态的开启关闭及查询service mysqld startservice mysqld stopservice mysqld status使用 cd 命令进入 mysql 中的bin目录下如果是初次登录使用mysqld install之后使用net start mysql 进入mysql连接数据库的语法格式 mysql -u用户名 -p密码!!所有的sql语句后别忘记；创建...

2017-07-02 08:11:25 1254

原创 Linux—基本命令

改变文件属性与权限chgrp改变文件所属用户组chgrp [-R] 用户组名称文件或目录 chown改变文件所有者chown [-R] 账号名称文件或目录chmod 改变文件的权限chmod [-R] u g o -+= xyz 文件或目录ugo-+=rwx目录的相关操作cd

2017-07-01 17:59:03 172

原创 C++__指针

如果在程序中定义了一个变量，在编译时就给这个变量分配内存单元。系统根据程序中定义的变量类型，分配一定长度的空间。内存区的每一个字节有一个编号，这就是“地址”地址。

2017-07-01 17:37:54 241

原创 C++__多态性与虚函数

多态性的概念多态性(polymorphism)是面向对象程序设计的一个重要特征。利用多态性可以设计和实现一个易于扩展的系统。在C++程序设计中，多态性是指具有不同功能的函数可以用同一个函数名，这样就可以用一个函数名调用不同内容的函数。在面向对象方法中的多态性:向不同的对象发送同一个消息（函数名），不同的对象在接收时会产生不同的行为(即方法)。也就是说，每个对象可以用

2017-07-01 17:35:32 322

原创 C++__继承和派生

继承与派生面向对象程序设计有4个主要特点: 抽象、封装、继承和多态性。要较好地进行面向对象程序设计，还必须了解面向对象程序设计另外两个重要特征——继承性和多态性。1 继承与派生的概念（基类和派生类）在C++中可重用性是通过继承(inheritance)这一机制来实现的。继承是C++的一个重要组成部分。一个类中包含了若干数据成员和成员函数。有时两个类的内容基本相同或有

2017-07-01 17:31:49 253

原创 C++__运算符重载

运算符重载的方法与实现运算符重载的方法是定义一个重载运算符的函数，在需要执行被重载的运算符时，系统就自动调用该函数，以实现相应的运算。运算符重载实质上是函数的重载。重载运算符的函数一般格式：函数类型operator 运算符名称 (形参表列) { 对运算符的重载处理}在定义了重载运算符的函数后，可以说：函数opera

2017-07-01 17:29:34 240

原创 C++__类与对象

面向对象程序设计方法概述1. 对象客观世界中任何一个事物都可以看成一个对象(object)。对象可大可小。对象是构成系统的基本单位。对象的构成：任何一个对象都应当具有这两个要素，即属性(attribute)和行为(behavior)，它能根据外界给的信息进行相应的操作。一个对象往往是由一组属性和一组行为构成的。对象间的交互或对象的调用：要使某一个对象实现某一种行为(即操作)

2017-07-01 15:46:02 633

原创 C++__自定义数据类型

C++除了提供多种基本的数据类型(如int、float、double、char等)供用户使用外，还允许用户根据需要自己声明一些类型，例如数组、结构体(structure)类型、共用体(union)类型、枚举(enumeration)类型、类(class)类型等，这些统称为用户自定义类型(user-definedtype,UDT)。1 结构体类型C++将用户自己指定的、包含有若干个

2017-07-01 15:42:54 2866 2

原创 C++__数据类型和表达式

一.符号常量用一个符号名来代替一个常量，称为符号常量。使用预处理命令#define 指定的#define 格式（宏定义命令）简单的宏定义 #define 带参数的宏定义 #define （）符号常量是个名字，但它不是变量，在它的作用域内其值不能改变，也不能赋值。二.常变量在定义变量时，如果在前面加上关键字const，则变量的值在程序运

2017-07-01 15:38:01 1099

原创 C++__函数与预处理

在一个程序文件中可以包含若干个函数。无论把一个程序划分为多少个程序模块，但只能有一个main函数。程序总是从main函数开始执行的。在程序运行过程中，由主函数调用其他函数，其他函数也可以互相调用。从用户使用的角度看，函数有两种： ① 系统函数，即库函数。这是由编译系统提供的，用户不必自己定义这些函数，可以直接使用它们。

2017-07-01 15:30:38 2078

原创 C++__程序设计初步

一.C++的输入输出操作 cout语句格式：cout不能用一个插入运算符“用cout输出时，用户不必通知计算机按何种类型输出，系统会自动判别输出数据的类型，使输出的数据按相应的类型输出。cin语句格式：cin>>表达式1>>表达式2>>……>>表达式n；在用cin输入时，系统会根据变量的类型从输入流中提取相应长度的字节系统把空格作为数据间的分隔符，不予提

2017-07-01 15:20:05 294

雨ゆこ