baosq99-CSDN博客

转载一个非典型的ORA-01555的解决

ORA-01555:快照过旧。一个对于Oracle DBA来说最经典问题。发生的根本原因：一致性读出了问题。看到网上有个同学，举例说明，觉得不错，拿来用下：假设有张表，叫table1，里面有5000万行数据，假设预计全表扫描1次需要1个小时，我们从过程来看： 1、在1点钟，有个用户A发出了select * from table1;此时不管将来ta

2017-02-17 14:25:44 683

转载【转】Oracle 正则表达式函数-REGEXP_REPLACE 使用例子

6个参数第一个是输入的字符串第二个是正则表达式第三个是替换的字符第四个是标识从第几个字符开始正则表达式匹配。（默认为1）第五个是标识第几个匹配组。（默认为全部都替换掉）第六个是是取值范围：i：大小写不敏感；c：大小写敏感；n：点号 . 不匹配换行符号；m：多行模式；x：扩展模式，忽略正则表达式中的空白字符。

2017-02-14 14:49:06 408

原创 YARN 笔记

YARN 笔记1. YARN的产生背景2. YARN的设计思想3. YARN的基本架构4. YARN的工作流程（小结）课程地址：https://edu.hellobi.com/course/93/play/lesson/14711. YARN的产生背景MRv1· 编程模型：Map阶段和Reduce阶段· 数据处理引擎：MapTask和ReduceTask·

2017-01-11 17:27:04 376

原创 sqoop安装笔记

先到http://sqoop.apache.org/官网下载sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz解压安装设置环境变量[root@bigdata baosq]# vim /etc/profile添加SQOOP_HOME和pathSQOOP_HOME=/users/baosq/sqoop-1.4.6和path=$SQOOP_HOME/

2017-01-11 17:20:01 408

原创 hadoop学习笔记

大数据特点volume：产生的数据量计算量很大variety：数据来源数据格式多种多样value：价值密度低，综合价值大velocity：增长速度处理速度，要求系统在短时间内做出反应，可用于生成决策的时间非常少开源组件：hadoop,spark（内存计算）,hbase（列式数据库）,zookeeper,nutch（数据采集）,storm（流式计算）R语言

2017-01-11 17:14:46 308

转载 HIVE 动态分区与静态分区

HIVE分区，实际上是通过一个路径来标识的，而不是在物理数据中。比如每天的数据，可能分区是pt=20121023这样，那么路径中它就会变成：/hdfs/path/pt=20121023/data_files。通过路径来标识的好处是，如果我们需要取特定分区的数据，只需要把这个路径下的数据取出来就可以了，不用扫描全部的数据。HIVE默认是静态分区。但是有时候可能需要动态创建不同的分区，比如商品

2017-01-11 17:07:05 401

转载 Friday BI Fly | 2016年10月28日晚8点半微信直播交流大数据、大变革与大成长第37场图文版记录

大数据、大变革与大成长元年科技股份有限公司的郝宇晓郝总分享转载至https://ask.hellobi.com/blog/tianshansoft/5366

2016-11-01 16:42:38 236

转载 Friday BI Fly | 2016年10月21日晚8点半微信直播交流在实践中挖掘数据的价值第36场图文版记录

挖掘数据的价值主要分析1大数据及其分析方法2大数据的主要应用场景3企业经营分析涉及的领域存在的问题4目前经营分析领域存在的问题转载自https://ask.hellobi.com/blog/tianshansoft/5310

2016-10-24 14:33:46 247

baosq99的博客