自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

数据之路

专注数据架构 外功修行,内功修神

  • 博客(14)
  • 资源 (3)
  • 论坛 (1)

转载 HDFS集中化缓存管理

问题导读1.HDFS集中化缓存管理具有哪些优势?2.HDFS中的集中化缓存管理有哪些使用场景?3.缓存管理有哪些命令?概述HDFS中的集中化缓存管理是一个明确的缓存机制,它允许用户指定要缓存的HDFS路径。NameNode会和保存着所需快数据的所有DataNode通信,并指导他们把块数据缓存在off-heap缓存中。HDF

2015-11-25 12:12:56 1321

原创 hive Illegal Operation state transition from CLOSED to ERROR的处理

异常堆栈如下:2015-11-24 16:49:11,495 ERROR org.apache.hive.service.cli.operation.Operation: Error running hive query:org.apache.hive.service.cli.HiveSQLException: Illegal Operation state transition from

2015-11-24 19:05:39 2223

原创 数据仓库3级范式(3NF)基础

一、引言  最近在整理理大数据模式下的数据仓库数据模型,资料来自互联网和读过的数据仓库理论和实践相关。二、3NF(1)1NF-无重复的列  数据库表的每一列都是不可分割的基本数据项,同一列中不能有多个值,即实体中的某个属性不能有多个值或者不能有重复的属性。  如果出现重复的属性,就可能需要定义一个新的实体,新的实体由重复的属性构成,新实体与原实体之间为一对多关系。在第一范式(1

2015-11-23 17:48:44 3813

转载 TCP之close_wait

TCP之close_wait浏览:3697次  出处信息/* * @author: ahuaxuan * @date: 2010-4-30 */ 最近遇到的一个关于socket.close的问题,在某个应用服务器出现的状况(执行netstat -np | grep tcp): tcp        0      0 10.224.122.16:50158

2015-11-23 00:15:35 1095

原创 authentication vs authorization 验证与授权的区别

在看ldap的时候发现了两个关键词, authentication验证 和 authorization授权authentification验证 - 是指验证who you are(你是谁), 所以需要用到username和password进行身份验证。authorization授权 - 是指what can you do(你可以做什么), 而且这个发生在验证通过后。对一些文档的

2015-11-23 00:01:46 1155

原创 停止ambari上服务的顺序

Before performing any upgrades or uninstalling software, stop all of the Hadoop services in the following order:RangerKnoxOozieWebHCatHiveServer2Hive MetastoreHBase

2015-11-20 17:56:29 3623 3

转载 CentOS 6.4安装配置ldap

CentOS 6.5安装配置ldap时间:2015-07-14 00:54来源:blog.51cto.com 作者:“ly36843运维” 博客 举报 点击:274次一.安装ldap[root@dev ~]# yum install openldap openldap-* -y[root@dev ~]# yum install

2015-11-19 01:10:20 2591

转载 hive 动态分区(Dynamic Partition)异常处理

Changing Hive Dynamic Partition LimitsSymptoms:Hive enforces limits on the number of dynamic partitions that it creates.  The default is 100 dynamic partitions per node, with a total (default)

2015-11-17 10:50:40 8270

转载 数据库事务隔离级别

一,事务的4个基本特征 Atomic(原子性): 事务中包含的操作被看做一个逻辑单元,这个逻辑单元中的操作要 么全部成功,要么全部失败。 Consistency(一致性): 只有合法的数据可以被写入数据库,否则事务应该将其回滚到最初 状态。 Isolation(隔离性): 事务允许多个用户对同一个数据进行并发访问,而不破坏数据的正 确性和完整性。

2015-11-14 10:53:45 823

原创 凯立德如何获取设备特征码、版本号、激活码?

如何获取设备特征码、版本号、激活码?方式一第一步:打开凯立德移动导航系统,进入地图界面,点击“查找”第二步:在查找页面以“快拼”的输入方式下,输入“AAAAAA”(6个A)

2015-11-14 00:57:50 6695

转载 CRM系统主要业务流程思维导图

【CRM五策略】          ❶对客户进行分类,不是根据规模,而是根据和你的关系,越细腻越好;          ❷不定期更新客户资料,信息越全面越好;          ❸主动对客户进行关怀,拿出你的诚意和关爱;          ❹定期与客户面对面沟通,这是投入的表现,沟通效果也最佳;          ❺定期给客户分享有营养的价值信息

2015-11-10 17:03:01 8033

转载 生产服务器环境最小化安装后Centos 6.5优化配置备忘

生产服务器环境最小化安装后 Centos 6.5优化配置备忘August 13, 2014本文 centos 6.5 优化 的项有18处,列表如下:1、centos6.5最小化安装后启动网卡2、ifconfig查询IP进行SSH链接3、更新系统源并且升级系统4、系统时间更新和设定定时任5、修改ip地址、网关、主机名、DNS6、关闭selinux,清空ipta

2015-11-06 11:04:51 786

原创 java实现极简的LRU算法

import java.util.LinkedHashMap;import java.util.Map; /** * LRU (Least Recently Used)  */public class LRUCache extends LinkedHashMap {    /*** */private static final long serialVers

2015-11-02 23:11:41 4306 1

原创 kafka.common.ConsumerRebalanceFailedException异常解决

kafka.common.ConsumerRebalanceFailedException :test-group_xxx can't rebalance after 4 retries解决办法:1.配置zk问题(kafka的consumer配置)zookeeper.session.timeout.ms=5000zookeeper.connection.

2015-11-02 08:46:45 7173 5

正则表达式验证工具.exe

正则表达式验证工具 验证正则正确与否的利器 验证java、javascript等等,非常棒的软件,推荐下

2013-03-28

GIAC架构大会-承载每天万级任务的调度系统架构是如何设计的.pdf

承载每天万级任务的调度系统架构是如何设计的 分布式任务调度系统如何设计? 开源分布式任务调度系统介绍

2019-07-07

ippicv_linux_20151201.tgz

Ubuntu16.04安装OpenCV3.2.0过程中,在cmake下载过程中可能会出现 ICV:DOWNLONDING ippicv_linux_20151201.tgz 但是一直下载不下来,自己可以手动下载,把压缩包放到opencv3.2.0->ippic->Download下

2018-04-07

代立冬的留言板

发表于 2020-01-02 最后回复 2020-01-02

空空如也
提示
确定要删除当前文章?
取消 删除