大D饲养员

原创 java注解-思维导图

原创 java反射-思维导图

翻译 flink1.11 学习篇--DataStream API

背景对于大多数流数据处理应用程序而言，能够使用处理实时数据的代码重新处理历史数据并产生确定并一致的结果非常有价值。在处理流式数据时，我们通常更需要关注事件本身发生的顺序而不是事件被传输以及处理的顺序，因为这能够帮助我们推理出一组事件（事件集合）是何时发生以及结束的。例如电子商务交易或金融交易中涉及到的事件集合。为了满足上述这类的实时流处理场景，我们通常会使用记录在数据流中的事件时间的时间戳，而不是处理数据的机器时钟的时间戳...

翻译 flink1.11 学习篇--流处理

总览：如何实现流数据处理管道（pipelines） flink如何管理状态及为何需要状态管理 如何使用事件时间来一致并准确的进行计算分析 如何在流式数据构建事件驱动分析 如何提供具有exactly-one计算语义的可容错、有状态流处理流处理分析数据时，可以围绕有界流（bounded）或无界流（unbounded）两种模型来组织处理数据批处理是有界数据流处理的范例。在这种模式下，你可以选择在计算结果输出之前输入整个数据集，这也就意味着你可以对整个数据集的数据进行排序、统计或汇总计..

原创 java-volatile思维导图

参考：https://www.cnblogs.com/dolphin0520/p/3920373.html

原创 java-final关键字思维导图

final

原创 Java-ClassLoader思维导图

最近在看HugeGraph源码，结果里面很多java基础内容，顺便总结和学习一波。参考：https://blog.csdn.net/xyang81/article/details/7292380https://cloud.tencent.com/developer/article/1412585

原创 HugeGraph思维导图

原创 HugeGraph 添加kerberos认证Hbase backend

HugeGraph 添加kerberos认证Hbase backend背景线上环境更改步骤后记背景最近流行图计算，公司也正好推进使用，正好趁着这个机会学习一波。不过，第一步搭建就遇到一个坑，官网不支持kerberos认证的hbase，捣鼓了一天，终于把hugeGraph服务给搭建完毕，正好分享一下过程。线上环境集群hbase版本：2.1.0HugeGraph-Server 版本： 0.10.4更改步骤1、下载官网代码：git 地址为：https://github.com/hugegraph/

原创 hadoop集群传输（kerberos、非kerberos、kerberos与非kerbers）

1、在非kerberos认证的集群中distcp hdfs://IP:8020/xxx hdfs://IP:8020/xxx/2、在kerberos与非kerberos集群中配置core-site.xml 需降低安全配置；<property><name>ipc.client.fallback-to-simple-auth-allowed</name><value>true</v...

原创 Hbase数据导入导出

Hbase数据导入导出背景Import/Export 导出ExportImport样例参考snapshot数据导入导出样例参考背景在生产当中，经常会有不同集群的Hbase数据导入导出，这里整理两份导入导出方案，供大家参考Import/Export 导出这种方式非常简答，利用原生HbaseJar包进行MR的处理，可以通过更改相关参数，进行速度的限制。Export注意默认情况下，导出的位置是hdfs。hbase org.apache.hadoop.hbase.mapreduce.ExportU

原创 数据结构与算法-链表（循环链表的实现）

是什么？链表是通过‘指针’把一组零散的内存串联起来的‘数组’干什么？既生数组，又唯有有链表。由于数组需要一块连续的内存空间来存储数据，对内存的要求比较高，比如申请一个100MB大小数据空间，而有时内存中并没有那么多连续的空间，此时链表则有勇武之地。 怎么用？常用的链表为单链表、双向链表、循环链表。单链表是一种链式存取的数据结构，用一组地址任意的存储单元存放线性表中的数据元素。链表中的数据是以结点来表示的，元素就是...

原创 数据结构与算法-数组篇

是什么？数组是一个连续的内存空间存储的相同类型的数据干什么？数据在日常使用中很常见，存储相同类型的数据怎么用？在java中数组是string []表示 ，需要指定的内存空间长度。数组在按照下标遍历的时间复杂度是O(1),根据arr[i]=base_addr+(i)*type_size优点：数组的优点是查询快，根据下标直接查询地址缺点：插入、删除的复杂度高。如果在数组的末尾插入元素，那就不需要移动数据了，时间复杂度为 O(1)。但如果在数组的开头插入元素，那所有