- 博客(7)
- 资源 (4)
- 收藏
- 关注
转载 如何为Hadoop集群选择正确的硬件
当我们想搭建一个Hadoop大数据平台时,碰到的第一个问题就是我们到底该如何选择硬件。虽然Hadoop被设计为可以运行在标准的X86硬件上,但在选择具体服务器配置的时候其实没那么简单。为已知的工作负载或者应用场景选择硬件时,往往都要综合考虑性能因素和性价比,才能选择合适的硬件。比如,对于IO密集型的工作负载,用户往往需要为每个CPU core匹配更多的存储或更高的吞吐(more spi
2017-11-15 20:25:39 7941
转载 基于canal实现mysql、oracle的数据库实时同步
发表于2017/2/14 22:30:36 1172人阅读分类: 架构人生1. 前言产品生态链中有一块是数据库实时同步模块,一直以来使用的是数据库特定相关的方法(如触发器)实现数据库同步,随着产品越来越多,该设计方法逐渐显得不合理。于是想到是否有通用的数据库实时同步模块,问了度娘,找到canal。2. 需求2.1. oracle发送端
2017-11-13 16:16:58 5176
转载 Kafka 0.10.0 SASL/PLAIN身份认证及权限实现
Kafka 0.10.0 SASL/PLAIN身份认证及权限实现Jul 29, 2016 | 技术 | 2,082 字 | 1588 Times文章目录1. Kafka 安全机制2. Kafka身份认证2.1. SASL/PLAIN 认证2.1.1. Kafka Server 端配置2.1.2. KafkaClient 配置3
2017-11-10 13:35:48 4781 1
转载 Kafka Security Mechanism (SASL/PLAIN)
Bharat ViswanadhamPublished on April 10, 2017 / Updated on June 7, 20171Starting from Kafka 0.10.x Kafka Broker supports username/password authentication. This
2017-11-10 10:35:34 2353
转载 智能分单算法
大数据讨论群:104595215 387084660大数据算法:385010646 nlp研究与讨论 413423481 hive impala 288047381 spark scala 464791668 机器学习与深度学习256154524 104595215微服务架构实战 181942601 用户画像交流193467273 docker 521020621
2017-11-07 20:39:54 1604 1
转载 机器学习实战教程(一):K-近邻算法(史诗级干货长文)
摘要本文将从k-近邻算法的思想开始讲起,使用python3一步一步编写代码进行实战训练。并且,我也提供了相应的数据集,对代码进行了详细的注释。除此之外,本文也对sklearn实现k-近邻算法的方法进行了讲解。实战实例:电影类别分类、约会网站配对效果判定、手写数字识别。一、简单k-近邻算法本文将从k-近邻算法的思想开始讲起,使用python3一步一步编写代
2017-11-07 20:18:29 1088
转载 Cobub无码埋点关键技术的实现
By Cobub OP Team in 博客, 未分类11 hours ago 0 59随着大数据时代的到来,数据采集也已经变的越来越重要。前端埋点作为一个比较成熟的数据接入手段被广泛应用着。目前埋点分为两种方式,有码与无码埋点。有码埋点比较容易理解,即调用SDK的API,在代码中插入埋点的相关代码,实现用户行为采集。由于我们在开发项目的时候,埋点都是手动的,每次业务需求的改变
2017-11-01 20:37:19 1437
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人