2017年09月_张吉Jerry

原创 Perl 入门实战：JVM 监控脚本（上）

由于最近在搭建Zabbix监控服务，需要制作各类监控的模板，如iostat、Nginx、MySQL等，因此会写一些脚本来完成数据采集的工作。又因为近期对Perl语言比较感兴趣，因此决定花些时间学一学，写一个脚本来练练手，于是就有了这样一份笔记。

2017-09-23 07:23:49 812

原创 Apache Beam 快速入门（Python 版）

Apache Beam 是一种大数据处理标准，由谷歌于 2016 年创建。它提供了一套统一的 DSL 用以处理离线和实时数据，并能在目前主流的大数据处理平台上使用，包括 Spark、Flink、以及谷歌自身的商业套件 Dataflow。Beam 的数据模型基于过去的几项研究成果：FlumeJava、Millwheel，适用场景包括 ETL、统计分析、实时计算等。

2017-09-13 20:25:36 4053

原创 fork() 与僵尸进程

使用fork()函数派生出多个子进程来并行执行程序的不同代码块，是一种常用的编程泛型。特别是在网络编程中，父进程初始化后派生出指定数量的子进程，共同监听网络端口并处理请求，从而达到扩容的目的。但是，在使用fork()函数时若处理不当，很容易产生僵尸进程。

2017-09-12 06:24:05 1976

翻译 2017 Top 15 Python 数据科学类库；时间序列异常点检测；如何加入开源项目

近年来，Python 在数据科学领域得到了越来越多的关注，本文整理归类了使用率最高的数据科学类库，供大家参考。

2017-09-06 10:07:28 6735

原创 Hive 窗口与分析型函数

新版的 SQL 标准引入了窗口查询功能，使用 WINDOW 语句我们可以计算分组排名、滑动平均值等。本文将介绍 Hive 中窗口及分析型函数的使用方法。

2017-09-05 12:39:18 4257

原创 Perl 入门实战：JVM 监控脚本（下）

套接字使用套接字（Socket）进行网络通信的基本流程是：服务端：监听端口、等待连接、接收请求、发送应答；客户端：连接服务端、发送请求、接收应答。

2017-09-02 06:16:24 1075

原创 Clojure 实战 (5)：Storm 实时计算框架

Storm简介上一章介绍的Hadoop工具能够对海量数据进行批量处理，采用分布式的并行计算架构，只需使用其提供的MapReduce API编写脚本即可。但随着人们对数据实时性的要求越来越高，如实时日志分析、实时推荐系统等，Hadoop就无能为力了。这时，Storm诞生了。它的设计初衷就是提供一套分布式的实时计算框架，实现低延迟、高并发的海量数据处理，被誉为“Realtime Hadoop”。

2017-09-01 08:32:03 1609

张吉的博客