china_demon的专栏

原创 BloomFilter

原创 HBase容错处理

原创 WAL机制

原创 HFile格式

原创 LSM树

原创 Observer模型

原创 过滤器

原创 Hbase源码解析和开发实战笔记

Hbase笔记简介1）HBase是一个分布式的、多版本的、面向列的开源数据库2）HBase利用Hadoop HDFS作为其文件存储系统，提供高可靠性、高性能、列存储、可伸缩、实时读写、适用于非结构化数据存储的数据库系统3）HBase利用Hadoop MapReduce来处理HBase中的海量数据4）HBase利用Zookeeper作为分布式协同服务特点：

原创 Linux 给history加时间戳

在sudo vim /etc/profileexport HISTTIMEFORMAT="%F %T `whoami` "history | morehistoyr | tail文件夹里文件数量ls -l |grep "^-"|wc -l

原创 股票数据自动入库hive到oracle

------import_stock_d.py-----------------------------------#!/usr/bin/pythonimport tushare as tsimport osimport restocklistpath = '/home/cloudera/data/list/stocklist.txt'savepath='/home/clo

原创 JVM内部结构

原创 2015Hadoop数据处理实战视频教程笔记

2015Hadoop数据处理实战视频教程笔记hadoop_hdfs_分布式文件系统Hadoop是Google的集群系统的开源实现-Google集群系统：GFS(Google File System)、MapReduce、BigTable-Hadoop主要由HDFS（hadoop distributed File System Hadoop分布式文件系统）、MapReduce和Hba

原创 mysql grant命令

MySQL 赋予用户权限命令的简单格式可概括为：grant 权限 on 数据库对象 to 用户 一、grant 普通数据用户，查询、插入、更新、删除 数据库中所有表数据的权利。grant select on testdb.* to common_user@'%'grant insert on testdb.* to common_user@'%'grant

原创 hadoop 排序、分区、分组实例

data.txt1949-10-01 14:21:02/t34℃1949-10-02 14:01:02/t36℃1950-01-01 11:21:02/t32℃1950-10-01 12:21:02/t37℃1951-12-01 12:21:02/t23℃1950-10-02 12:21:02/t41℃1950-10-03 12:21:02/t27℃1951-07-

原创 hadoop 集群布局

NNDNZKZKFCJNRMDMNode11 11 1 Node211111 1Node3

原创 HDFS 2.x HA机制

原创 Hadoop 词频权重公式

原创 Hadoop计算框架shuffle过程详解

原创 MR四个数据处理阶段

原创 计算框架MR

原创 hadoop Hdfs写流程

原创 Hadoop HDFS读流程

原创 快学scala笔记.

第一章 基础val 定义的值实际上是一个常量var 声明其值可变的变量val xmax,ymax = 100var greeting,message: String = null1.3 常用类型Scala的7种数值类型：Byte、Char、Short、Int、Long、Float和Double1、toString()2、to(10)

原创 python 笔记

第一节 Python 简历 （蟒蛇）是一种使你在编程时能够保持自己风格的程序设计语言，你不用费什么劲就可以实现你想要的功能，并且编写的程序清洗易懂。一种解释型的、面向对象的、带有动态语义的高级程序设计语言作者：Guido van RossumPython的发展，可以分成几个重要的阶段：-CNRI时期：CNRI是资助Python发展初期的重要单位Python1.5版之前的成果大部

原创 Linux 环境变量配置

/etc/profilerpm -ivh .....

原创 sqoop导入导出

sqoop  export --table tm_stockdeal_d  -connect jdbc:oracle:thin:@192.168.1.10:1521:orcl  --username stock --password stock     --export-dir '/user/hive/warehouse/tm_stockdeal_d/000000_0'  --input-fiel

转载 地沟油在围观玻尿酸

时代时代，进化到今天，巍巍大千这拜金的当代，物化的时代这个时代已经不是笑贫不笑娼，而是娼笑贫不笑。娼经过当代“文化”的包装，时而黑，时而红。今天的网上，它们红。土鳖二代也好，变相娼妓也罢，众生在网络前苦苦等待，等来的无非是金币或淫荡，或者是金币加淫荡。昔日金银，今又金淫买金币，卖淫荡，在网上而在网络的等候者无非是没有金币而无法淫荡。他

原创 第二节Python特征

Python编程语言中的定位 ---脚本语言(scripting language)---高级动态编程语言简单易学Python是一种代表简单主义思想的语言。Python的这种伪代码本质是它最大的优点之一。它使你能够专注于解决问题而不是去搞明白语言本身。Python有极其简单的语法，极易上手。解释性&编译性-Python语言写的程序不需要编译成二进制代码。可以直接从源

原创 第一节 Python 简历 （蟒蛇）

是一种使你在编程时能够保持自己风格的程序设计语言，你不用费什么劲就可以实现你想要的功能，并且编写的程序清洗易懂。一种解释型的、面向对象的、带有动态语义的高级程序设计语言作者：Guido van RossumPython的发展，可以分成几个重要的阶段：-CNRI时期：CNRI是资助Python发展初期的重要单位Python1.5版之前的成果大部分都在此时期内完成。-BeOpen时

原创 冒泡法

//冒泡法public class MaxMinSort1 { public static void BubbleSort(int array[]){ int i,j; int len = array.length; int temp; for(i = 0;i < len-1;++i) for(j = len-1;j > i;--j){ if(arra

原创 链表的基本操作

package com.zyf.data;import java.util.Hashtable;import org.junit.Test;/** *链表的基本操作 * @author zyf * */public class MyLinkedList{ Node head = null;//链表头引用 public void addNode(int d){ Nod