- 博客(20)
- 资源 (18)
- 收藏
- 关注
转载 数据仓库之ETL漫谈(转自非原创)
转载来源:http://bbs.csdn.net/topics/330003174数据仓库之ETL漫谈2013-01-14 19:11:22heqiyu34阅读数 9940更多分类专栏:OracleETL,Extraction-Transformation-Loading的缩写,中文名称为数据抽取、转换和加载。大多数据仓库的数据架构可以概括为:数据源-->...
2019-10-25 11:35:25 194
转载 jdk8 安装转载
原文地址:https://www.cnblogs.com/heqiyoujing/p/9502726.htmlwindows系统下安装JDK8学习JAVA,必须得安装一下JDK(java development kit java开发工具包),配置一下环境就可以学习JAVA了,下面是下载和安装JDK的教程:一.下载1.JDK下载地址:http://www.oracle.com...
2019-10-24 09:31:04 124
转载 linux的chkconfig命令(转载)个人备忘
原文地址:http://www.cnblogs.com/lcword/p/5917405.htmlchkconfig命令主要用来更新(启动或停止)和查询系统服务的运行级信息。谨记chkconfig不是立即自动禁止或激活一个服务,它只是简单的改变了符号连接。使用语法:chkconfig [--add][--del][--list][系统服务] 或 chkconfig [--level &...
2019-10-17 17:15:59 107
转载 什么是ods(转载)https://baike.baidu.com/item/ODS/15146368?fr=aladdin
原文位置:https://baike.baidu.com/item/ODS/15146368?fr=aladdinODS(操作数据存储)编辑讨论操作数据存储ODS(Operational Data Store)是数据仓库体系结构中的一个可选部分,也被称为贴源层。ODS具备数据仓库的部分特征和OLTP系统的部分特征,它是“面向主题的、集成的、当前或接近当前的、不断变化的”数...
2019-10-15 15:52:02 3440
转载 用Cloudera Manager去安装impala总述(转载官方文档个人备忘)
原文链接:www.cloudera.com转载自Cloudera Manager 官方文档Cloudera Manager Installation Guide,可上www.cloudera.com上下载
2019-10-14 11:49:26 120
转载 利用Parcel去安装CDH(个人备忘)
原文链接:www.cloudera.com转载自Cloudera Manager 官方文档Cloudera Manager Installation Guide,可上www.cloudera.com上下载一旦点击继续CDH软件组件将会被下载并从parcle包中分发到集群中的所有节点计算机上...
2019-10-11 20:52:11 506
转载 有关 Cloudera Manager Admin Console的知识点(转载官方文档)
原文链接:www.cloudera.com转载自Cloudera Manager 官方文档Cloudera Manager Installation Guide,可上www.cloudera.com上下载
2019-10-11 17:55:42 123
转载 Cloudera Manager Agent 进程的启动(转载备忘)
原文链接:www.cloudera.com转载自Cloudera Manager 官方文档Cloudera Manager Installation Guide,可上www.cloudera.com上下载
2019-10-11 17:30:43 956
转载 通过Cloudera Manager Admin console 这个web应用间接通信 CM server 进程 在集群环境中安装配置hadoop service系列组件
原文链接:www.cloudera.com转载自Cloudera Manager 官方文档Cloudera Manager Installation Guide,可上www.cloudera.com上下载cm admin console这个web平台是用来管理和配置控制CM Server进程用的web ui交互模块平台...
2019-10-10 14:42:22 182
转载 Cloudera Manager Admin Console的作用
原文链接:www.cloudera.com转载自Cloudera Manager 官方文档Cloudera Manager Installation Guide,可上www.cloudera.com上下载
2019-10-10 13:44:44 343
原创 安装Cloudera Manager 的五大前提环境
1 mysql也可以是oracle或postgre数据库用于Cloudera Manager内部环境(Cloudera Manager Server+Cloudera Manager Agent)来记录相关配置数据和各种Cloudera Manager 工具的各种内部Service内部来使用2ntp时间同步服务组件程序用于各个linux节点计算机之间的时间同步,同时CM进程和Hadoop环...
2019-10-10 11:33:18 136
转载 Cloudera-scm-agent程序进程的启动及trouble_shooting的方法,转载自官方文档
转载自Cloudera Manager 官方文档Cloudera Manager Installation Guide,可上www.cloudera.com上下载
2019-10-10 11:17:16 508
转载 Cloudera-scm-server程序进程的启动及trouble_shooting的方法,转载自官方文档
转载自Cloudera Manager 官方文档Cloudera Manager Installation Guide,可上www.cloudera.com上下载举个例子当启动server cloudera-scm-server start进程出问题时候,查看/var/log/cloudera-scm-server/cloudera-scm-server.log日志去确认启动错误,下面是个例子...
2019-10-10 11:08:34 562
原创 cloudera manager agent 传说中cm agent的作用
CM=Cloudera Manager Agent 即 cm 代理进程它是和cm server进程通信的一个对端进程,目的是让安装了cm agent进程的那台 hadoop环境主机或者是impalad主机 定期上报自己的相关hadoop组件进程或impalad进程的工作状态数据,也是cm server下发 安装hadoop生态下其他工作组件环境程序的通信对端管理进程,在每一台安装了clou...
2019-10-10 10:22:41 2875
原创 impala创建一个外部文件表的例子和一个内部分区表的例子,向内部分区表插入数据例子
本例中以在HDFS上的存储格式为TEXTFILE格式为例子————————————————————————————————————————用impala 创建一个内部分区表的例子——-----------------------------------------------------------------------------------------impala...
2019-10-09 14:21:36 634
转载 Cloudera Manager Server软件安装时注意事项之一 (转载自Cloudera Manager 官方文档Cloudera Manager Installation Gui)
转载自www.cloudera.com通过上述内容可以看出Cloudera Manager Server软件是需要一个数据库来支撑它的,可用其自己内嵌的postgre sql数据库,也可以自己安装一个数据库如:mysql供Cloudera Manager Server(cm server)来使用具体的格式参数说明:给相关监控服务对应的数据...
2019-10-09 10:50:49 95
转载 impala为什么这么吃内存,转载网上说法(不是我原创,如有侵权,通知我立马删除)
CDH集群使用 Impala技术,在硬件层面上我们最需要关注的点就是: Impala处理的最大的表或者分区容量。因为 Impala要将数据全部读入内存才进行运算,我们必须要保证内存能够装载下所需要的表或者分区的数据。一般情况下,由于原有的集群是以基于磁盘的操作为主,需要为各数据节点计算机添加足够的内存...
2019-10-09 10:18:44 309
转载 impala 连接查询优化策略知识(转载并我非原创,如有侵权,通知我立马删除)
impala 下连接查询优化策略思想知识点:impala采用分布式查询hdfs文件系统上的parquet文件格式数据时,impala集群利用分布式查询技术,在多表连接的查询过程中难免有网络数据传输现象,这是有开销的好的查询策略会使得网络查询数据开销相对小,避免初始化数据集处理条目过多问题为了确认表的连接策略,我们可以对一个特定的查询执行 EXPLAIN执行计划语句。如果通过基准测试...
2019-10-08 11:00:43 320
ExcelUtils.rar
2020-10-13
xfire java webservice(cxf前身框架了解webservice原理很好的入门框架)
2020-09-19
Less详解.pdf 电子书文档
2020-08-27
单点登录原理超经典,原理清晰易懂,帮你很好理解单点登录的原理后,再看相关文献代码就很容易明白了
2018-04-25
poi 自己写的excel sax方式导入大量数据
2018-04-22
Excel导入 demo案例
2018-04-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人