- 博客(10)
- 资源 (4)
- 收藏
- 关注
转载 Ambari——大数据平台的搭建利器之进阶篇
Ambari——大数据平台的搭建利器之进阶篇虽然大数据越来越流行,但其学习的门槛却一直阻碍着很多的初学者,而且各个产品之间的集成和维护也显得比较困难。不管是 Hadoop V1 或者 V2 的安装,又或者 Spark/YARN 等的集成,都不是几行简单的命令,而是要关联到许多的配置。有了 Ambari,这些都不再是难题。2 评论沈 钊伟, 软件工程师
2016-06-29 09:46:37 3783
转载 Spark Streaming使用Kafka保证数据零丢失
Spark Streaming使用Kafka保证数据零丢失Kafka Spark Streaming 2016-02-02 09:06:58 发布您的评价: 0.0收藏 0收藏来自: https://community.qingcloud.com/topic/
2016-06-27 21:05:57 992
转载 互联网金融系统技术沙龙:小米风控实践
互联网金融系统技术沙龙:小米风控实践原创 2016-06-24 邓文俊 高可用架构导读:最近上映的魔兽世界有一句话“光明源于黑暗,黑暗涌现光明”,和互联网金融的安全风控领域非常相似。在 6 月 19 日,微博商业产品部联合小米支付等金融技术团队策划了首届互联网金融系统沙龙,围绕在互联网金融过程中碰到系统安全等问题与业界展开分享及交流。本文是邓文俊在沙龙上的演讲,授权高可用架构首
2016-06-27 13:21:21 2017
转载 基于内容推荐的个性化新闻阅读实现(二):基于SVD的推荐算法
基于内容推荐的个性化新闻阅读实现(二):基于SVD的推荐算法时间 2016-06-24 12:23:02 Nicol的博客铭原文 https://taozj.org/2016/06/基于内容推荐的个性化新闻阅读实现(二):基于SVD的推荐算法/主题 奇异值分解 推荐系统一、前言SVD前面已经说了好多次了,先不论其信息检索被宣称的各种长处如何如何,在此
2016-06-24 13:21:20 4414 1
转载 【好书摘要】性能优化中CPU、内存、磁盘IO、网络性能的依赖
【好书摘要】性能优化中CPU、内存、磁盘IO、网络性能的依赖系统优化是一项复杂、繁琐、长期的工作,优化前需要监测、采集、测试、评估,优化后也需要测试、采集、评估、监测,而且是一个长期和持续的过程,不 是说现在优化了,测试了,以后就可以一劳永逸了,也不是说书本上的优化就适合眼下正在运行的系统,不同的系统、不同的硬件、不同的应用优化的重点也不同、 优化的方法也不同、优化的参数也不同
2016-06-22 13:34:57 770
原创 cloudermanger 管理监控问题Bug
Operating System Known IssuesRandom JVM Hangs on RHEL 6.6 (Kernels 3.14-3.17)User Java processes—HBase RegionServers, HDFS DataNodes—can deadlock and hang for no apparent reason.Symptom:
2016-06-21 11:02:38 935
转载 Spark教程(2)Spark Streaming 介绍
问题导读1、如何利用DStream所提供的api,而在数据流上实时进行操作?2、你如何理解Spark Streaming启动后的流程?3、如何创建StreamingContext对象?随着big data的发展,人们对大数据的处理要求也越来越高,传统的MapReduce等批处理框架在某些特定领域(如实时用户推荐,用户行为分析)已经无法满足人们对实时性的需求。因此
2016-06-18 23:00:38 1102
转载 CDH使用秘籍(二):cloudera Manager中监控数据的存储
CDH使用秘籍(二):cloudera Manager中监控数据的存储时间 2014-11-19 14:18:28 CSDN博客原文 http://blog.csdn.net/shifenglov/article/details/41281399主题 Cloudera概述上一篇文章分析了 cloudera manager 中监控数据、中心数据的存
2016-06-16 16:49:46 1587 1
转载 Kafka - SQL 引擎分享
问题导读:1.在Kafka中使用SQL的流程是什么?2.怎样配置Kafka,使得在Kafka中使用SQL?3.在Kafka中使用SQL有哪些注意事项?1.概述 大多数情况下,我们使用 Kafka 只是作为消息处理。在有些情况下,我们需要多次读取 Kafka 集群中的数据。当然,我们可以通过调用 Kafka 的 API 来完成,但是针对不同的业务需求
2016-06-12 19:01:00 1689
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人