大数据存储
onlyzhaozhen
这个作者很懒,什么都没留下…
展开
-
使用Flume+Logstash+Kafka+Spark Streaming进行实时日志处理分析【公安大数据】
[url=https://blog.csdn.net/u010022051/article/details/54342357]使用Flume+Logstash+Kafka+Spark Streaming进行实时日志处理分析【公安大数据】[/url]原创 2018-09-20 16:53:44 · 680 阅读 · 0 评论 -
WebLogic 9.2异地IP登录不上的解决方法
启动后浏览器访问 http://localhost:7001/console 如果显示管理控制台界面则否安装成功。此时通过IP可能无法访问WebLogic管理控制台,可访问http://localhost:7001/console ,输入用户名和密码进入控制台界面Lock & EditDomain Structure ==> Environment ==> Servers右...原创 2013-03-13 02:44:46 · 146 阅读 · 0 评论 -
win7下,安装oracle10g
win7下,安装oracle10g,需要改改下面的配置才能正确安装。主要是通过配置文件告诉oracle要识别win7.更改如下:1.更改..\db\Disk1\stage\prereq\db下的refhost.xml文件,在 之前增加 [code="java"] [/code]2、再到install目录中找到oraparam.ini文件,...原创 2012-07-17 12:47:09 · 68 阅读 · 0 评论 -
安装LINUX X86-64的10201出现链接ins_ctx.mk错误
在安装linux X86-64的Oracle10201时,在链接过程中出现了这个错误。详细错误信息为:Error in invoking target‘install’of makefile‘/opt/oracle/product/10.2/ctx/lib/ins_ctx.mk’. See‘/opt/oracle/oraInvertory/logs/installActions20...原创 2012-02-16 16:05:20 · 123 阅读 · 0 评论 -
CentOS 6.0 Oracle10g安装成功
[url]http://www.linuxde.net/2011/09/755.html[/url]原创 2012-02-16 16:04:19 · 63 阅读 · 0 评论 -
warning: db4-tcl-4.3.29-10.el5.i386.rpm: Header V3 DSA signature: NOKEY, key ID
warning: db4-tcl-4.3.29-10.el5.i386.rpm: Header V3 DSA signature: NOKEY, key ID e85628972011-10-27 11:28rpm Header V3 DSA signature: NOKEY, key IDrpm -ivh db4-tcl-4.3.29-10.el5.i386.rpmwarni...原创 2012-02-16 16:02:47 · 239 阅读 · 0 评论 -
ORA-27125解决方案
帮客户解决一个Linux上数据库无法启动的问题。客户的Linux 5.6 x86-64环境,安装数据库后,启动数据库报错:ORA-27125。Oracle文档上关于ORA-27125错误的描述为:ORA-27125: unable to create shared memory segment Cause: shmget() call failedAction: contact...原创 2012-02-16 16:02:05 · 159 阅读 · 0 评论 -
需要rpm包的绝佳网址
[url]http://rpmfind.net/linux/rpm2html/search.php?query=&submit=Search+...&system=&arch=[/url]原创 2012-02-16 15:56:45 · 60 阅读 · 0 评论 -
我相信
想飞上天,和太阳肩并肩 世界等着我去改变 想做的梦从不怕别人看见 在这里我都能实现 大声欢笑让你我肩并肩 何处不能欢乐无限 抛开烦恼 勇敢的大步向前 我就站在舞台中间 我相信我就是我 我相信明天 我相信青春没有地平线 在日落的海边 在热闹的大街 都是我心中最美的乐园 我相信自由自在 我相信希望 我相信伸手就能碰到天 有你在我身边 ...原创 2012-05-09 15:54:55 · 113 阅读 · 0 评论 -
解决ora-12514 问题
我用database configuration assistant 创建了一个数据库名为testDB, 制定它的globle database name 和SID 都是testDB.我又已system 登陆oracle 创建了一个anna的用户:c:>sqlplus system/geh*****sql>create user anna identified by geh*...原创 2012-05-03 16:40:33 · 92 阅读 · 0 评论 -
ORA-01502: 索引'P_ABCD.PK_WEB_BASE'或这类索引的分区处于不可用状态
ORA-01502: 索引'P_ABCD.PK_WEB_BASE'或这类索引的分区处于不可用状态 原因:出现这个问题,可能有人move过表,或者disable 过索引。1、alter table xxxxxx move tablespace xxxxxxx 命令后,索引就会失效。2、alter index index_name unusable,命令使索引失效。解决办法:...原创 2012-01-03 22:45:19 · 79 阅读 · 0 评论 -
关于梦的一篇比较好的文章
[url]http://www.china.com.cn/city/txt/2007-02/02/content_7753855.htm[/url]原创 2011-12-20 11:48:02 · 66 阅读 · 0 评论 -
oracle job 相关
给大家介绍一下ORACLE job的使用方法:这个job 执行的功能: 向某张表中定时插入一条记录(比如一分钟插入一条) step 1: 首先创建一张表 a, [code="java"]create table a(a date); [/code]step 2: 创建一个proc test ,这个 test 就是取出系统的当前时间值,然后插入到 a 表中 [co...原创 2011-04-07 10:59:29 · 74 阅读 · 0 评论 -
hadoop官方中文文档
hadoop官方中文文档[url]http://hadoop.apache.org/common/docs/r0.19.2/cn/index.html[/url]文档概述快速入门集群搭建HDFS构架设计HDFS使用指南HDFS权限指南HDFS配额管理指南命令手册FS Shell使用指南DistCp使用指南Map-Reduce教程Hadoop本...原创 2011-08-02 10:24:45 · 227 阅读 · 0 评论 -
Oracle 10g 下载地址
Oracle Database 10g Release 2 (10.2.0.1.0) Enterprise/Standard Edition for Microsoft Windows (32-bit) http://download.oracle.com/otn/nt/oracle10g/10201/10201_database_win32.ziphttp://download.orac...原创 2011-10-01 01:31:18 · 93 阅读 · 0 评论 -
oracle备份相关
同事的blog,[url]http://www.cnblogs.com/shishanyuan/archive/2010/12/30/1916935.html[/url]备份相关的内容,写的比较好。原创 2011-02-24 16:04:09 · 67 阅读 · 0 评论 -
mysql问题,ERROR 1130
一直使用本机的mysql,将数据库迁移到服务器上,报错:ERROR 1130: Host '192.168.1.3' is not allowed to connect to this MySQL server。是因为Mysql默认安装只运行本机进行访问。需要修改一下配置即可:[code="java"]mysql -u root -pvmwaremysql>use mysql;...原创 2011-08-26 12:14:44 · 70 阅读 · 0 评论 -
oracle联表更新
联表更新示例语句update uevent e set(e.clientcmy_id,e.clientdpt_id) = (select c.id,d.id from U u,department d,company c where u.id = e.client_id and d.id = u.department_id and c.id = d.company_id)...原创 2012-03-30 11:15:06 · 96 阅读 · 0 评论 -
ORA-12571:TNS包写入程序失败
用pl/sql developer连接数据库一直正常连接,突然之间就无法连接了,提示ORA-12571:TNS包写入程序失败,查询网络解决方案,都不好使,有的让重建监听,有的让改监听的配置,改了,通通的不对,最后发现问题的原因,是因为我们内网防火墙设置的原因。所以,碰到这个问题,先不要着急修改数据库配置,先检查一下网络,有没有变动防火墙的设置,不然,折腾...原创 2012-11-20 12:25:06 · 576 阅读 · 0 评论 -
Cloudera Hadoop运维管理与性能调优
[url=https://blog.csdn.net/qq_30004245/article/details/78211493]Cloudera Hadoop运维管理与性能调优[/url]原创 2018-09-17 18:53:55 · 502 阅读 · 0 评论 -
CIO
一个企业的运营过程,不论其身处哪个行业,其实都是一个信息不断产生、传递、分析到最后删除的过程。对信息进行很好的管理,事实上也就是对企业的运营有一个很好的管理。中国有句老话叫“知己知彼,百战不殆”,说的就是信息的重要性。你不知道的,我知道;你知道的,我比你知道得多,知道得快,这样就能赢得胜利。对企业而言,通过及时产生各种运营数据,及时传递到合适的人,对各种海量数据进行及时、准确的分析,并确保...原创 2018-08-30 11:34:34 · 340 阅读 · 0 评论 -
Hadoop与MPP是什么关系?有什么区别和联系?
[url=https://blog.csdn.net/tbdp6411/article/details/50389059]Hadoop与MPP是什么关系?有什么区别和联系?[/url]原创 2018-08-29 11:17:38 · 1116 阅读 · 0 评论 -
大数据资料
[url=https://blog.csdn.net/u010670689/article/details/50781893]大数据资料[/url]原创 2018-05-25 09:44:10 · 98 阅读 · 0 评论 -
大数据相关的一些内容和知识
一、大数据通用处理平台1.Spark:内存版本的大数据平台,RDD微批处理,是准实时的处理架构。具有生态优势。2.Flink:实时处理架构,支持批处理和流处理。和Strom的区别,Strom只支撑流处理。3.Hadoop:硬盘版本的大数据平台,适合做批处理。4.Tez:DAG计算框架,有向无环图。二、分布式存储HDFS:Hadoop的底层存储平台三、资源调度...原创 2018-04-22 20:38:02 · 131 阅读 · 0 评论 -
难念的经
“笑你我枉花光心计 爱竞逐镜花那美丽”,感叹世人勾心斗角,追名逐利,然而富贵如云。“怕幸运会转眼远逝 为贪嗔喜恶怒着迷”,悲欢荣辱只是一刻的感受,总是想挽留住那些美好的瞬间,于是纵情在嗔喜恶怒的世界,以为可以留住糜腐无趣的生活。“责你我太贪功恋势 怪大地众生太美丽”,江湖之士,儿女情长,年少的心怎能抗拒荣华英明红颜的种种诱惑,历经的江湖险恶后方知以前的争功夺势不过是浮华一场梦,早知今日...原创 2018-03-27 12:13:31 · 196 阅读 · 0 评论 -
办公室里面小屁就没有掌握自己命运的资格
办公室里面小屁就没有掌握自己命运的资格。原创 2018-02-07 10:03:45 · 94 阅读 · 0 评论 -
一个成熟的自动化运维系统具备什么功能?
[url=https://www.zhihu.com/question/23228213]一个成熟的自动化运维系统具备什么功能?[/url]原创 2018-02-05 16:57:21 · 292 阅读 · 0 评论 -
我国“十三五”国家大数据战略离不开专业的数据中心基础设施运维服务
[url=http://www.c114.com.cn/news/212/a1014632.html]我国“十三五”国家大数据战略离不开专业的数据中心基础设施运维服务[/url]原创 2017-11-21 15:35:03 · 411 阅读 · 0 评论 -
Oralce表被锁了,咋办?
1.下面的语句用来查询哪些对象被锁:[code="java"]select object_name,machine,s.sid,s.serial#from v$locked_object l,dba_objects o ,v$session swhere l.object_id = o.object_id and l.session_id=s.sid;[/code]2.下面的语句用...原创 2015-11-02 10:27:06 · 77 阅读 · 0 评论 -
千万级记录的Discuz论坛导致MySQL CPU 100%的优化笔记
[url=http://www.zgguan.com/zsfx/mysql/564.html]千万级记录的Discuz论坛导致MySQL CPU 100%的优化笔记[/url]原创 2016-07-08 12:15:58 · 141 阅读 · 0 评论 -
Linux下启动Oracle服务和监听程序
安装完毕oracle以后,需要创建oracle系统用户,并在/home/oracle下面的.bash_profile添加几个环境变量:ORACLE_SID,ORACLE_BASE,ORACLE_HOME。比如:export ORACLE_SID=test export ORACLE_BASE=oracle_install_dir export ORACLE_HOME=xxx ...原创 2013-02-22 10:26:19 · 102 阅读 · 0 评论 -
ORA-27125终极解决方法
ORA-27125通过修改/proc/sys/vm/hugetlb_shm_group,重启之后就无法生效。下面是一劳永逸的方法:[code="java"]# more /proc/sys/vm/hugetlb_shm_group0# id ora10guid=501(ora10g) gid=502(oinstall) groups=503(oinstall),50...原创 2013-02-22 10:10:44 · 177 阅读 · 0 评论 -
id oracle
SQL> startup ORA-27125: unable to create shared memory segment Linux-x86_64 Error: 1: Operation not permitted[oracle@yans1 ~]$ id oracle uid=500(oracle) gid=502(oinstall) groups=502(oinstall...原创 2013-11-21 13:14:00 · 91 阅读 · 0 评论 -
Io 异常: Broken pipe
系统一直运行的挺好,突发-Io 异常: Broken pipe,检查运行日志发现是因为一个字段设置的为唯一的,但是在运行过程中,很罕见的出现了两个值重复的情况。概率非常非常小,但是还是发生了。之前加限制是因为之前次模块只为一个地方服务,现在多个地方用到这个字段。于是发生了这个问题。这个问题产生的原因是需求的变动导致的。后期需求变动了,还需要检查一下对前期已经做的...原创 2012-10-09 20:13:14 · 186 阅读 · 0 评论 -
一个sql简单关于分组的sql
[code="java"]select * from (select aa.person_id,aa.ip,aa.c,row_number() over(partition by aa.person_id order by aa.c desc) rnfrom (select t.person_id,t.ip,count(*) cfrom log_book twhere t....原创 2013-05-14 16:36:00 · 72 阅读 · 0 评论 -
行迁移检测及解决一例
行迁移(row migration):由于在table的pctfree设置过小,在update这个table并使其行长增大的时候,就有可能因为块的剩余空间不够存储该行,oracle会把该行数据迁移到另外一个有足够空闲空间的block中,此即发生了行迁移;发生行迁移时,行rowid并不变,原先存储该行的地方增加了一个新的指针,该指针指向迁移后的block id,所以我们在访问发生了行迁移的行时,会要...原创 2010-09-29 14:55:49 · 76 阅读 · 0 评论 -
Oracle分析函数
Oracle从8.1.6开始提供分析函数,分析函数用于计算基于组的某种聚合值,它和聚合函数的不同之处是对于每个组返回多行,而聚合函数对于每个组只返回一行,利用这一特性,我们可以对待分析的数据打很多分析标识字段(TOPN/RANK,AVG,MIN,LAG,LEAD),利用这些额外的字段,就可以很方便的实现一些复杂统计分析功能,而且其执行性能要比传统的sql实现要高不少,这一特性,在olap环境中的统...原创 2010-09-29 13:16:58 · 86 阅读 · 0 评论 -
Oracle-月光宝盒SCN
--将月光宝盒拿出来,找到要回溯的时间对应的scn代号比如6041938 [code="java"]select * from sys.smon_scn_time order by time_dp;[/code]--把自己从现在抹掉[code="java"]delete from ccustomertab c;[/code]--念咒语:般若波罗密[code="java"]ins...原创 2011-01-25 20:34:40 · 96 阅读 · 0 评论 -
SQL注入
随着B/S模式应用开发的发展,使用这种模式编写应用程序的程序员也越来越多。但是由于这个行业的入门门槛不高,程序员的水平及经验也参差不齐,相当大一部分程序员在编写代码的时候,没有对用户输入数据的合法性进行判断,使应用程序存在安全隐患。用户可以提交一段数据库查询代码,根据程序返回的结果,获得某些他想得知的数据,这就是所谓的SQL Injection,即SQL注入。 SQL注入是从正常的W...原创 2010-01-21 02:39:00 · 78 阅读 · 0 评论 -
数据库系统工程师
数据库系统工程师一、要求 (1)掌握计算机体系结构以及各主要部件的性能和基本工作原理; (2)掌握操作系统、程序设计语言的基础知识,了解编译程序的基本知识; (3)熟练掌握常用数据结构和常用算法; (4)熟悉软件工程和软件开发项目管理的基础知识; (5)熟悉计算机网络的原理和技术; (6)掌握数据库原理及基本理论; (7)掌握常用的大型数据库管理系统的应用技术; ...原创 2009-08-08 22:31:46 · 267 阅读 · 0 评论