qq_43001627的博客

原创 spark与pandas中DataFrame对比

原创 Alink使用入门，基于flink的机器学习

一、什么是 Alink？​ Alink 是阿里巴巴计算平台事业部PAI团队从 2017 年开始基于实时计算引擎 Flink 研发的新一代机器学习算法平台，提供丰富的算法组件库和便捷的操作框架，开发者可以一键搭建覆盖数据处理、特征工程、模型训练、模型预测的算法模型开发全流程。​ 借助Flink在批流一体化方面的优势，Alink能够为批流任务提供一致性的操作。在实践过程中，Flink原有的机器...

翻译 Flink最全入门必备知识！！

原创 同样是消息队列，Kafka凭什么速度那么快？

Kafka的消息是保存或缓存在磁盘上的，一般认为在磁盘上读写数据是会降低性能的，因为寻址会比较消耗时间，但是实际上，Kafka的特性之一就是高吞吐率。即使是普通的服务器，Kafka也可以轻松支持每秒百万级的写入请求，超过了大部分的消息中间件，这种特性也使得Kafka在日志处理等海量数据场景广泛应用。针对Kafka的基准测试可以参考，Apache Kafka基准测试：每秒写入2百万（在三台廉价机...

转载 深入理解ElasticSearch

翻译 JDK8十大特性，干货

简介毫无疑问，Java 8是Java自Java 5（发布于2004年）之后的最重要的版本。这个版本包含语言、编译器、库、工具和JVM等方面的十多个新特性。在本文中我们将学习这些新特性，并用实际的例子说明在什么场景下适合使用。这个教程包含Java开发者经常面对的几类问题：语言编译器库工具运行时（JVM）2. Java语言的新特性Java 8是Java的一个重大版本，有人认为，...

转载 单点登录机制

原创 快速提升sql能力

查询每个月倒数第 2 天入职的员工的信息.查询出 last_name 为 ‘Chen’ 的 manager 的信息.查询平均工资高于 8000 的部门 id 和它的平均工资.查询工资最低的员工信息: last_name, salary查询平均工资最低的部门信息查询平均工资最低的部门信息和该部门的平均工资查询平均工资最高的 job 信息查询平均工资高于公...

转载 redis集群原理

尊重原创，转载请标明出处：https://www.cnblogs.com/liyasong目录3.0版本之前　　3.0版本及以后正文redis是单线程，但是一般的作为缓存使用的话，redis足够了，因为它的读写速度太快了。官方的一个简单测试：测试完成了50个并发执行100000个请求。设置和获取的值是一个256字节字符串。结果:读的速度是110000次/s,写的速度是81000次...