2014年07月_陈奉刚11

12月 08月 07月

原创 hadoop 常用命令

1、ssh-host-config -y 开启一个主机认证。2、bin/start-all.sh 开启 hadoop的命令，所有命令，不过我的机器好像没有全部开启。3、jps 检查开启的状况。全部开启有5个：分别是namenode，dataname, secondarynamenode, jobtracker,tasktraker.4、单个开启bi

2014-07-28 15:07:28 481

转载海量数据处理

海量数据处理 1. 给定a、b两个文件，各存放50亿个url，每个url各占64字节，内存限制是4G，让你找出a、b文件共同的url？方案1：可以估计每个文件安的大小为50G×64=320G，远远大于内存限制的4G。所以不可能将其完全加载到内存中处理。考虑采取分而治之的方法。s 遍历文件a，对每个url求取，然后根据所取得的值将url分别

2014-07-28 12:11:16 647

原创 hadoop 在win7 下安装 +eclipse 和 cygwin

在win7环境下的Cygwin64+eclipse+hadoop 。一开始需要jdk环境。1、安装cygwin64，主要注意一下几个方面，（这里选择install from inernet）一直下面的节面需要选择安装几个：Net 下面的有关ssh 的文件。然后一直等到结束，我的最后安装大小为1.7G。所以注意自己的网速。也可以在网上下载一个完全版本的测

2014-07-24 14:54:10 719

原创 pl sql 学习笔记（六）再学动态sql

1、动态SQL和动态pl/SQL:Execute immediate SQL_string[into define_variable]—结构放到某一变量或者record中；[using ]如：Begin Execute immediate ‘sql 语句’ –这里必须用引号包围。 End；用过程包装： Createor rep

2014-07-21 16:55:18 487

原创 pl sql 学习笔记（六）再学动态sql

2014-07-21 16:00:40 410

原创 pl SQL 学习笔记（五）oracle 游标

1、游标属性。游标属性的值总是属于最后一次执行的sql语句。除%isopen 的初值是FALSE 之外，都是NULL。SQL%FOUND 如果有修改则返回trueSQL%NOTFOUND 没有修改则返回trueSQL%ROWCOUNT 修改记录行数。SQL%ISOPEN 游标是否打开。\SQL%BULK_ROWCOUNT forall语句的修改记录SQL%BULK_

2014-07-21 14:51:51 456

原创 pl sql 学习笔记（四） merge oracle 用法

1、 Merge语句：语法：merge into table_name , rename_table_name Using (qurery_sql语句) 查询结果rename On (条件： ) When matchedthen Update_sq; When notmatched then Insert

2014-07-21 09:52:58 1027

原创 pl sql 学习笔记（三）异常处理。

2014-07-18 12:33:41 496

原创 pl sql 学习笔记（2）

1、 / 用于结束命令。2、 setserveroutput on 可以在sql*pls中看到输出结果。3、 @文件名，可以执行文件中所有命令。4、 Start 文件名等价于上者。5、不包含procedure 的程序块是匿名程序块。一般用于测试。程序块嵌入过程中等。函数：create

2014-07-17 18:02:30 545

原创 pLsql 学习笔记（-）

读3pl-sql language reference11.2 笔记1、查询一次处理一行结果案例；begin for someonein( --someone变量 select *from table1 --数据表 ) loop DBMS_OUTPUT.PUT_LINE (someone.id||' : '

2014-07-16 17:29:31 520