2017年11月_Ronney-Hua

12月 11月 10月 09月 08月 07月 06月 05月 04月

原创 Python的元组被设计成不可变的影响

实际上元组是跟列表非常相近的另一种容器类型，元组和列表看起来不同的一点是元组用的是圆括号而列表用的是方括号。而功能上，元组和列表相比有一个很重要的区别，元组是一种不可变类型。正是因为这个原因元组能做一些列表不能做的事情……用做一个字典的Key。另外当处理一组对象时，这个组默认就是元组类型不可变性给元组带来了什么影响：在3个标准不可变类型里面-----数字、字符串、元组------元组是受影响最大的

2017-11-28 17:56:03 838

原创 Linux Kettle 闪退问题解决方案

我们在搭建kettle平台时，往往会搭建两种平台，一种win、一种是linux。在windows上进行kettle ETL测试工作，测试成功之后，会发布到linux服务器上，这就出现了一下问题——linux执行ktr文件，界面闪退，报Assertion `NOT_REACHED’ failed.错误。1.linux服务器上打开kettle图形化界面，并成功打开了ktr文件2界面会出现卡死并退出问题，

2017-11-28 17:10:39 4447

原创 HBase regions分布不均匀的解决

1、先确定master页面是否还有region in transition,如果有并且长时间未变化，可以考虑重启master，重新触发容灾。 2、region都加载后进入hbase shell balance_swith ture 开启balancer balancer 手动触发balance 即可。

2017-11-24 11:58:48 5212 2

转载我的ELK搭建笔记（阿里云上部署）

文章转载：http://www.jianshu.com/p/797073c1913f 仅用作个人学习，收藏我的 ELK 搭建笔记（基于阿里云） “不是最好的，但一定是有良心的操作记录。”目录一览 0 重不重要都得有的开头 1 安装配置 1.1 CentOS 7.x环境准备 1.1.1 安装操作系统 1.1.2 更新系统软件包（可选） 1.1.3 更改主机名（可选） 1.1.4

2017-11-16 10:41:22 1034

原创 Spark学习之RDD的概念

RDD又叫弹性分布式数据集，是Spark数据的基础单元，Spark编程是围绕着在RDD上创建和执行操作来进行的。它们是跨集群进行分区的不可变集合（immutable collection），如果某个分区丢失，这些分区可以重建（重新计算）。它们是使用数据流运算符（map, filter, groupby）在稳定存储中通过对数据进行变换而创建的，并且可以在并行运算架构的内存中进行缓存。弹性：如果内存中的

2017-11-16 10:37:11 367

原创 Error:-81024 LR_VUG：The 'QTWeb' type is not supported on win32 platforms

在LR的bin目录下，选择Wlrun.exe文件，右键单击，选择属性；在兼容性里面把兼容性模式改为Windows XP (Service Pack 3),应用保存；然后再关闭controller，重新打开运行就可以了；

2017-11-13 17:36:21 11630 5

原创 pip download timeout 下载慢，超时解决方法

更换国内的pypi源：如： pip install -i https://pypi.tuna.tsinghua.edu.cn/simple –upgrade tensorflow-gpu

2017-11-06 22:18:38 4474

原创 Kylin修改默认hbase namespace命名空间default的解决方案

问题及背景：同一用户的三家公司的物理集群合并，合并后用dataspace+kerberos控制不同公司对集群资料的访问权限，三家公司分别使用独立的kerberos票据访问，特定的namespace,而生产环境部署的kylin-2.0/2.1只能保存cuboid到hbase 的 default namespace。解决的过程及方案： 1、经多方查找发现， Kylin源码github项目，最新的mas

2017-11-02 20:16:04 2732

转载 Kylin 2.0升级总结

文章转载，原文地址：https://blog.bcmeng.com/post/kylin-upgrade.html #6-给kylin社区的建议引用于个人自查、学习Kylin 2.0的升级节奏升级的大原则升级的目标 1 Kylin 2.0 升级流程 1.1 Kylin 2.0 代码合入 1.2 配置更新和梳理 1.3 兼容性测试 1.4 Cube构建测试 1.5 Cube

2017-11-01 17:40:27 2138