- 博客(9)
- 资源 (3)
- 问答 (1)
- 收藏
- 关注
原创 ARIMA简介
1. ARIMA简介ARIMA(p,d,q)模型全称为差分自回归移动平均模型(Autoregressive Integrated Moving Average Model,简记ARIMA), p为自回归项,q为移动平均项数,d为时间序列成为平稳时所做的差分次数。所谓ARIMA模型,是指将非平稳时间序列转化为平稳时间序列,然后将因变量仅对它的滞后值以及随机误差项的现值和滞后值进行回归所建立的模型
2017-02-27 11:21:41 14187
原创 Mac下Spark2.1.0的伪分布式安装配置
Mac下的安装配置可以用一句话概括:下载编译后的文件(或者用brew直接安装),配置环境变量。MAC OS X版本为10.11.6。配置SSH为了确保在远程管理Hadoop以及Hadoop节点用户共享时的安全性, Hadoop需要配置使用SSH协议。SSH原理可见 http://www.ruanyifeng.com/blog/2011/12/ssh_remote_login.html生成SSH k
2017-02-16 17:05:00 2254
原创 Mac下安装配置Nginx1.10.3+PHP7.1+CI
1. 编译安装php-7.1 由于homebrew中PHP还是php70及以前版本,所以直接用php7.1的源文件编译安装。 -首先在PHP官网下载PHP源代码 -解压 -在终端进入源文件内部用以下命令编译安装,其中: –prefix=/usr/local/php 指定安装目录; –with-config-file-path 指定php.ini位
2017-02-15 16:42:48 995
原创 Mac下MySQL忘记初始密码
从官网安装好MySQL的dmg后。1 设置mysql命令从终端输入mysql --version若显示版本号表明正常;若显示command not found,则按如下代码链接安装路径cd /usr/local/bin/sudo ln -fs /usr/local/mysql/bin/mysql mysql关闭mysql服务sudo /usr/local/mysql/support-file
2017-02-13 16:42:17 329
转载 Mac vim iterm2配色方案
转自:http://www.vpsee.com/2013/09/use-the-solarized-color-theme-on-mac-os-x-terminal/相信长期浸泡在终端和代码的小伙伴们都有一套自己喜爱的配色方案。以前一直在用简单、适合阅读的 Terminal.app 配色方案,换到 MacBook Pro with Retina display 后发现这个配色时间看长了眼睛
2017-01-11 11:31:36 1442
原创 Druid的Coordinator负载均衡原理
此方法在Druid 0.9.1.1 release版本中已上线。segment是druid的工作单元。当执行一个query的时候,每个segment被分配给一个core,各个segment并行计算。query的查询范围从几小时到几周不等,对每个查询,我们想最大限度的使用CPU cores。因此,对每一个给定的时间段,我们要把data放在尽可能多的server上,即跨多个服务器分散数据。
2016-12-28 19:18:45 1780
原创 Druid Kafka indexing task停不下来,不进行Handoff
问题描述:Kafka indexing task,过了taskDuration仍在运行、ingest实时数据,不生成segments,导致coordinator console中最近的segments都是0B(即没有生成segments,数据都在middlemanager上)。原因分析:1). 默认配置中supervisor的workerThreads(default == mi
2016-12-28 19:16:43 2299
原创 Druid——Hadoop-based Batch Ingestion
druid导入历史数据有两种方法:1.import直接向metadata中insert segments.参考文档: http://druid.io/docs/0.9.2-rc2/operations/insert-segment-to-db.html2.Hadoop-based Batch Ingestion通过提交一个hadoop ingest task
2016-12-28 19:07:28 3440
原创 PhxSQL使用及部署——替换druid metadata使用的mysql
PhxSQL是一个兼容MySQL、服务高可用、数据强一致的关系型数据库集群。PhxSQL以单Master多Slave方式部署,在集群内超过一半机器存活的情况下,可自身实现自动Master切换,且保证数据一致性。Github地址:https://github.com/tencent-wechat/phxsql/blob/master/README.zh_cn.md总览PhxS
2016-12-28 18:44:22 2623
约瑟夫环 C
2012-10-23
MySQL表名的通配符 %1$s 是什么意思
2016-10-12
TA创建的收藏夹 TA关注的收藏夹
TA关注的人