liushun520520的博客

应用场景：如何讲一个大任务合并成多个小任务，多个小任务其实就是多个线程去完成，他们执行的先后顺序不可能完全一直，如像hadoop的分布式计算，多个reduce任务最终把数据集合并倒数ouput输出。...

1. JVM的基本机构

1.下载flink源码git clonehttps://github.com/apache/flink.git需要源码来构建Flink。可以[下载发行版源码]({{ site.download_url }}) 或这 [从 git 仓库复制]({{ site.github_url }})。此外，您需要Maven 3和JDK(Java Development Kit)。需要使...

由于运维人员再一次的操作中把，cdh5.7测试环境的秘密修改错误以后，无法登陆上去，需要重新修改密码。查找CDHdb文件[root@cdh1 cmf]# find / -name db.properties/opt/cm-5.7.1/etc/cloudera-scm-server/db.properties/usr/local/bigdata/software/cm-5.7.1/et...

背景随着业务量的增加，以及其他厂商数据的对接整个，我们的数据量从每天gb到pb的增加，实现了千亿级别的经济方案。疼点：Elasticsearch在新建索引都需要指定shard分片数，当索引数据量增加不好扩容，业务代码需要调整等等；索引别名Elasticsearch中的API在针对特定索引时接受索引名称，并在适用时接受多个索引。索引别名API允许使用名称别名化索引，所有API都自动将...

1. 可变参数public static void main(String[] args) {System.out.println(addParms(1,2));System.out.println(addParms(1,2,3,4));}public static int addParms(int ... args){int sum = 0;for(int i=0