- 博客(15)
- 资源 (10)
- 收藏
- 关注
原创 This system is not registered with RHN
[root@ing sdc]# yum install sysstatLoaded plugins: rhnplugin, securityThis system is not registered with RHN.RHN support will be disabled.Setting up Install ProcessNo package sysstat available.N
2014-01-29 15:08:06 941
原创 dbms_profiler 调整PL/SQL的性能
1、DBMS_PROFILER 介绍如果需要针对PL/SQL进行跟踪,找出最耗时间的语句块,可以使用oracle提供的DBMS_PROFILER进行跟踪。检查DBMS_PROFILER包是否安装 sys@ORCL> desc dbms_profiler如果没有安装可以运行$ORACLE_HOME/rdbms/admin/profload.sql 脚本安装默认情况下DBMS
2014-01-19 15:39:20 1937 4
原创 第10周 hadoop与关系型数据库交换数据
SqoopSQL-to-HDFS工具利用JDBC连接关系型数据库Sqoop的获取Hadoop-0.20.2下使用SqoopSQOOP不支持此版本,可使用CDH3。也可以通过拷贝相应的包到sqoop-1.2.0-CDH3B4/lib下,依然可以使用。CDH3和SQOOP 1.2.0的下载地址http://archive.cloudera.com/cd
2014-01-15 10:36:58 3625
原创 第9周 Hive体系架构、安装与HiveQL,应用案例
Hadoop流##wordcount的例子bin/hadoop jar contrib/streaming/hadoop-0.20.2-streaming.jar -input input -output output -mapper /bin/cat -reducer /usr/bin/wc注意,命令一定要写完整的路径Hive 简介数据仓库工具。可以把H
2014-01-15 10:36:04 1636
原创 第8周 Pig安装与Pig Latin语言,应用案例
pig 简介Pig可以看做hadoop的客户端软件,可以连接到hadoop集群进行数据分析工作Pig方便不熟悉java的用户,使用一种较为简便的类似于SQL的面向数据流的语言pig latin进行数据处理Pig latin可以进行排序、过滤、求和、分组、关联等常用操作,还可以自定义函数,这是一种面向数据分析处理的轻量级脚本语言Pig可以看做是pig latin到map-
2014-01-15 10:33:55 2468
原创 第7周 HBase集群安装,管理
Hbase安装:单机模式#下载及解压hbase安装包http://download.csdn.net/detail/woshigeshou123/5452389#修改conf/hbase-env.sh脚本,设置环境变量[root@hadoop1 hbae]# tar zxf hbase-0.90.5.tar.gz[root@hadoop1 hbae]# cd hba
2014-01-13 18:09:52 999
原创 第6周 Hadoop子项目与Hbase
Hadoop家族PigHadoop客户端使用类似于SQL的面向数据流的语言Pig LatinPig Latin可以完成排序,过滤,求和,聚组,关联等操作,可以支持自定义函数Pig自动把Pig Latin映射为Map-Reduce作业上传到集群运行,减少用户编写Java程序的苦恼三种运行方式:Grunt shell,脚本方式,嵌入式Hbase
2014-01-13 18:08:28 2431
原创 第5周 Map-Reduce编程实战,eclipse与Hadoop集群连接
Eclipse的Hadoop插件参考:http://blog.csdn.net/cybercode/article/details/7084603http://www.cnblogs.com/xia520pi/archive/2012/05/20/2510723.htmlwin7下安装hadoop完成后,接下来就是eclipse hadoop开发环境配置了。具体的操作如下:
2014-01-11 00:09:44 3132
原创 第4周 Map-Reduce体系架构
Map-Reduce编程模型ncdc气象数据下载:ftp://ftp.ncdc.noaa.gov/pub/data/gsod/ 数据中每一行就是一个时间点采集的温度信息,现在要分析一年中的最高温度。##MapperMap-reduce的思想就是“分而治之”Mapper负责“分”,即把复杂的任务分解为若干个“简单的任务”执行“简单的任务”有几个含义:1 数据
2014-01-11 00:08:13 1703
原创 第3周 分布式文件系统HDFS原理与操作
Hello, World!##对刚安装好的hadoop集群做个测试[root@hadoop1 hadoop]# pwd/nosql/hadoop[root@hadoop1 hadoop]# mkdir input[root@hadoop1 hadoop]# cd input/[root@hadoop1 input]# echo "hello word" > test1.tx
2014-01-09 16:26:53 1335 1
原创 第2周 实施Hadoop集群
Hadoop配置有关文件完全分布式模式的安装和配置##配置hosts文件 (所有节点都要做)[root@hadoop1 hadoop-0.20.2]# cat /etc/hosts# Do not remove the following line, or various programs# that require network functionality
2014-01-09 16:25:51 1980
原创 第1周 Hadoop的源起与体系介绍
Hadoop的源起——LuceneDoug Cutting开创的开源软件,用java书写代码,实现与Google类似的全文搜索功能,它提供了全文检索引擎的架构,包括完整的查询引擎和索引引擎早期发布在个人网站和SourceForge,2001年年底成为apache软件基金会jakarta的一个子项目Lucene的目的是为软件开发人员提供一个简单易用的工具包,以方便的在目标系统中实现
2014-01-09 16:24:10 1734
原创 PL/SQL 读写OS文件
24-1:建立directory conn system/manager CREATE DIRECTORY dir1 AS 'E:\DEMO'; GRANT READ,WRITE ON DIRECTORY EXP_DIR TO scott; w:以文本方式写入OS文件;a:以文本方式追加内容到OS文件;wb:以字节方式写入OS文件;ab:以字节方式追加内容到OS文件; 24-2:
2014-01-07 17:09:33 1095
原创 结果缓存函数
19-5:结果缓存函数(11G新特性)#RESULT_CACHE 用于指定建立结果缓存函数,必需关键字;#RELIES_ON 指定函数结果所依赖的对象,可选关键字。#当使用RESULT_CACHE选项时,函数不能带有out或in out参数。CREATE OR REPLACE FUNCTION get_name(no VARCHAR2)RETURN NUMBER RES
2014-01-07 16:10:19 1079 1
原创 oracle sys_context()函数
第一个参数为'USERENV',是固定的,第二个参数也是固定的,但是是多选固定,可选的值如下所示:select sys_context('USERENV','AUTHENTICATION_TYPE') from dual;--用户的认证类型select sys_context('USERENV','AUTHENTICATION_DATA') from dual;--未知select s
2014-01-06 11:02:44 1203
oracle高级sql学习
2011-02-13
推荐个hadoop方面的考试认证机构
2022-10-24
TA创建的收藏夹 TA关注的收藏夹
TA关注的人