micklf的博客

远处的一只猫

互联网医疗调研

最近查阅了下互联网医疗的几个平台的信息,稍微整理了下。 交互形式   春雨医生 丁香医生 好孕帮 试管婴儿APP 薄荷孕育 网站(功能性) ...

2018-10-10 17:04:10

阅读数 222

评论数 0

powerdesigner的导入excel插件

插件的code是参考网上代码的(抄过来改了一两行) '导入Excel表结构 '开始 Option Explicit Dim mdl ' the current model Set mdl = ActiveModel If (mdl Is Nothing) Then MsgBo...

2018-10-09 09:06:45

阅读数 291

评论数 0

大数据数仓中增量数据问题讨论

目录 数据增量类型介绍 三种增量类型的具体介绍 流水新增数据 常规业务变化数据 优化的业务变化数据 总结 数仓中增量数据的方法探讨 先做个数据例子 1月份 2月份 3月份 4月份 数仓分层 生产数据同步到ODS层 1月份ODS层表 2月份ODS层表 3月份ODS层...

2018-09-29 10:24:20

阅读数 1811

评论数 1

【转载】ETL之增量抽取方式

1、触发器方式  触发器方式是普遍采取的一种增量抽取机制。该方式是根据抽取要求,在要被抽取的源表上建立插入、修改、删除3个触发器,每当源表中的数据发生变化,就被相应的触发器将变化的数据写入一个增量日志表,ETL的增量抽取则是从增量日志表中而不是直接在源表中抽取数据,同时增量日志表中抽取过的数据要及...

2018-07-31 09:59:34

阅读数 358

评论数 0

阿里大数据平台MaxCompute初窥

如下内容大多来自官方手册、论坛等。 这个产品解决了什么问题 概况 MaxCompute,旧名ODPS,是阿里的一款离线计算引擎。 底层基于阿里飞天、伏羲等阿里云基础套件,MaxCompute专注于离线计算部分。 对标产品:hadoop、spark等。 目前看,发展方向应该和很多公司...

2018-06-27 19:42:34

阅读数 2689

评论数 0

如何在查看docker container内进程信息,与宿主机上进程信息的映射关系

docker container内运行的进程,在宿主机上,通过ps也是能够查到的,但是在不熟悉命令的时候,无法快速找到他们的关系。这里科普一个基础命令 docker top1. 找到容器的iddocker ps2. 找到容器在宿主机上映射后的进程信息docker top 9b40a74ceb82(...

2018-03-15 10:09:49

阅读数 8606

评论数 0

转greenplum中文手册,强赞

https://gp-docs-cn.github.io/docs/common/gpdb-features.html

2018-02-22 10:26:26

阅读数 1528

评论数 0

greenplum架构初窥

2018-01-24 15:49:33

阅读数 143

评论数 0

greenplum中vacuum如何计算ao表的冗余度

http://blog.csdn.net/shipeng1022/article/details/78720867 背景 Greenplum支持行存储(堆存储)与AO存储,堆存储的垃圾回收和膨胀检测方法请参考: 《如何检测、清理Greenplum膨胀、垃圾 - 阿...

2017-12-20 16:40:55

阅读数 279

评论数 0

greenplum的几个内存配置

max_statement_mem 设置每个查询最大使用的内存量,该参数是防止statement_mem参数设置的内存过大导致的内存溢出statement_mem 设置每个查询在segment主机中可用的内存,该参数设置的值不能超过max_statement_mem设置的值,如果配置了资源队...

2017-12-06 11:05:50

阅读数 3172

评论数 1

两阶段事务

【转自】http://www.cnblogs.com/binyue/p/3678390.html 一、分布式数据一致性 在分布式系统中,为了保证数据的高可用,通常会将数据保留多个副本(replica),这些副本会放置在不同的物理的机器上。 (1)什么是数据一致性 在数据有多份副本的情况下,...

2017-11-06 15:47:04

阅读数 331

评论数 0

【转载】定位 UNIX 上常见问题的经验总结

原文地址: https://www.ibm.com/developerworks/cn/aix/library/1206_yudh_unixproblemsolve/index.html 同时通过对下面两个例子的介绍,巩固了上面问题分析的介绍: 一个多线程应用的性能问题的分析 一个 c...

2017-10-14 10:47:31

阅读数 143

评论数 0

【未完待续】greenplum AO

AO表,以前是append-only,现在是append-optimizedAO表都是追加的方式,写数据到文件末尾,然后通过EOF来确认结束。 AO模式相关的几个部分pg_appendonly table记录表的元数据信息,可以理解类似pg_classAosegments table存储了所有a...

2017-10-13 10:19:40

阅读数 265

评论数 0

3008 sas卡

3008有三种型号,3008 imr加raid key可以支持,3008 it/ir没有办法加riad key,所以不支持~

2017-09-29 09:43:54

阅读数 918

评论数 0

使用.pgpass密码文件,通过psql登录greenplum

前景存在用户mick,已经配置md5登录,允许所有ip地址登录常规登录[gpadmin@m2 ~]$ psql -h 192.168.181.216 -d postgres -Umick Password for user mick: 会提示你输入密码文件配置在操作系统用户目录,也就是cd ~,创...

2017-09-07 17:32:45

阅读数 2086

评论数 0

ipmitool配置管理网络

配置管理网络(ipmi/ilo)ipmi设置ipmitool lan set 1 ipsrc static ipmitool lan set 1 ipaddr 192.168.142.11 ipmitool lan set 1 netmask 255.255.255.0 ipmitool lan ...

2017-09-07 17:14:27

阅读数 3605

评论数 0

通过ipmi无法从pci网卡启动pxe模式

描述一般通过ipmitool chassis bootdev pxe ipmitool power reset就可以让服务器下一次从pxe模式启动 但是有一台服务器,默认4个千兆网口,我给装了一个万兆网卡,配好后,执行ipmi,无法从pxe启动检查一般检查是否允许网卡走pxe模式等,这些都做了,...

2017-09-07 17:06:51

阅读数 1613

评论数 0

zookeeper的单机使用例子

安装下载文件: zookeeper-3.4.9.tar.gz 1. 解压 2. 修改/home/zookeeper/zookeeper-3.4.9/conf/zoo.cfg:``` [root@zk conf]# cat zoo.cfg tickTime=2000 initLimit=10 ...

2017-08-22 16:51:01

阅读数 163

评论数 0

greenplum使用postgis例子

greenplum中使用postgis的版本是v2.0.3安装安装插件在如下位置下载postgis gppkg https://network.pivotal.io/products/pivotal-gpdb/#/releases/4540/file_groups/493 安装插件gppkg ...

2017-08-22 14:03:27

阅读数 1779

评论数 0

理解 bashrc 和 profile

在一般的 linux 或者 unix 系统中, 都可以通过编辑 bashrc 和 profile 来设置用户的工作环境, 很多文章对于 profile 和 bashrc 也都有使用, 但究竟每个文件都有什么作用和该如何使用呢? 首先我们来看系统中的这些文件, 一般的系统可能会有 ...

2017-08-22 10:23:20

阅读数 118

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭