2015年12月_pNull

原创 MySQL 之 Left out join

2015-12-25 14:11:51 2645

原创 sql中常用函数的用法

1、sql中sum和count的区别 ----sql聚合函数（1）首先，sum是对一个字段求和，hive中字段的类型一般是string或者是int，如果是int当然没有问题，如果是string类型但是全部是数字也没有问题，但是如果string类型中包含一个字母，sum的结果将会是0 例如如下的表： user

2015-12-24 11:58:34 6056

原创 Linux 常用命令积累

linux 基础精华：点我，我是链接 Linux命令大全（挺好的）11、两个文件中提取相同行或者不同行找相同的行：grep -Ff file1 file2不同的行：grep -vFf file1 file2grep -Ff只能用于两个文件中一整行内容都相同的结果的查找，速度较快，但是遇到一行中部分内容相同的情况就...

2015-12-24 11:56:26 323

原创 SSH 免密码登录

1. 修改.bashrc文件之后如何使之生效 source ~/.bashrc2. ssh免密登录A机器免密码登录B机器：在A机器上：（1）$ ssh-keygen -t rsa -p'' 一直回车就可以了，文件存储在/home/xiaoju/.ssh目录下面（2）把id_rsa.pub追加到授权的key里面去。

2015-12-23 17:58:10 231

原创 Hadoop中的一些概念

Hadoop:一个分布式系统架构，充分利用集群的威力进行高速运算和存储ZooKeeper: 是一个针对大型分布式系统的可靠协调系统，提供的功能包括：配置维护、名字服务、分布式同步、组服务等。是Hadoop和Hbase的重要组件。是的的地方地方 Zookeeper集群的职责 1、负责监控整个hbas

2015-12-18 11:16:14 712

原创一个Hadoop的小例子

1. 创建输入文件 echo "Hello World" > file1.txt echo "Hello Hadoop" > file2.txt 2. 在HDFS上创建输入文件夹 hadoop fs -mkdir input 3. 上传本地文件到集群的input目录下 hadoop fs -put ~/bingjie/file*.txt in

2015-12-17 18:26:28 639

原创 HIVE 基本命令

#hive 启动hive>quit; --退出hivehive> exit; --exit会影响之前的使用，所以需要下一句kill掉hadoop的进程>hadoop job -kill jobidhive>create database database_name; 创建数据库如果数据库已经存在就会抛出一个错误信息，使用如下语句可以避免抛出

2015-12-17 16:19:38 32155 1

原创 Linux 下执行Mysql的 sql文件

假设.sql文件存在F:\hello world\hello world.sql第一种方式：1. 连接到mysql: mysql -u用户名 -p用户密码 2. 在MySQL下执行： source F:\hello world\hello world.sql说明：在命令行下(已连接数据库,此时的提示符为 mysql> ),输入 source F:\hello world\

2015-12-14 17:48:32 25213 2

原创当你在浏览器中输入Google.com并且按下回车之后发生了什么？

文章其实是这篇文章的翻译：https://github.com/alex/what-happens-when/blob/master/README.rst翻译内容如下：这个仓库试图回答一个古老的面试问题：当你在浏览器中输入 google.com 并且按下回车之后发生了什么？不过我们不再局限于平常的回答，而是想办法回答地尽可能具体，不遗漏任何细节。这将

2015-12-11 11:24:28 775

原创 apache AB参数说明

三种最常见的请求类型是：GET，POST 和 HEADGET：获取一个文档 POST：发送数据至服务器ab -n 50000 -c 10 "url" 并发数为10，总请求次数为50000ApacheBench结果查看：说明：对于并发请求，cpu实际上并不是同时处理的，而是按照每个请求获得的时间片逐个轮转处理的，所以基本上第一

2015-12-08 16:16:02 1923

原创 Hadoop读书笔记（1）

hadoop fs -ls hadoop fs -lsr hadoop fs -mkdir input //在HDFS上创建输入文件夹hadoop fs -put a.txt input //上传本地file中文件到集群的input目录下hadoop fs -ls input //在集群上运行WordCount程序hadoop jar /hadoop-2.2

2015-12-07 11:03:18 462

Hebe