第五届CCF大数据与计算智能大赛决战巅峰,百万大奖汇聚海内外数据科学家

摘要:9月24日,第五届中国计算机学会(CCF)大数据与计算智能大赛(Big Data & Computing Intelligence Contest,简称“BDCI”)启动仪式在北京梅地亚中心酒店正式举办。 时下的大数据已进入以数据广泛关联、跨域融合和深度应用为特...

2017-09-30 11:09:11

阅读数:177

评论数:0

基于Hadoop大数据分析应用场景与实战

为了满足日益增长的业务变化,京东的京麦团队在京东大数据平台的基础上,采用了Hadoop等热门的开源大数据计算引擎,打造了一款为京东运营和产品提供决策性的数据类产品-北斗平台。一、Hadoop的应用业务分析大数据是不能用传统的计算技术处理的大型数据集的集合。它不是一个单一的技术或工具,而是涉及的业务...

2017-09-29 16:32:57

阅读数:1714

评论数:0

用R语言把数据玩出花样

R语言作为统计学一门语言,一直在小众领域闪耀着光芒。直到大数据的爆发,R语言变成了一门炙手可热的数据分析的利器。随着越来越多的工程背景的人的加入,R语言的社区在迅速扩大成长。现在已不仅仅是统计领域,教育,银行,电商,互联网…都在使用R语言。要成为有理想的极客,我们不能停留在语法上,要掌握牢固...

2017-09-29 16:15:15

阅读数:633

评论数:0

中国程序员如何升职加薪,也许我们该学学印度人

近几年越来越多的印度人在美国硅谷占据要职,其中比较著名的有谷歌 CEO 桑德.皮查伊,微软 CEO 萨蒂亚.纳德拉,Adobe CEO 山塔努.纳拉延。 谷歌 CEO 桑德.皮查伊反观硅谷的华裔,虽然在数量上与印度裔相近,却不像印度人那样大量占据企业的中高层。你可以说因为印度人英语比较好,虽然他...

2017-09-20 17:28:22

阅读数:115

评论数:0

51个你需要知道的大数据术语

每天数十亿字节的数据收集下,了解大数据的复杂内涵非常重要。为了帮助你了解这一领域,我们从最近的大数据指南中编辑了一个列表,列出了最重要的相关术语和定义。你认为我们还应该添加哪些术语?请在评论中告诉我们。A 算法:给予AI、神经网络或其他机器的一组规则,以帮助其自己学习;分类、聚类、推荐和回归是四种...

2017-09-18 13:02:13

阅读数:451

评论数:0

MySQL主从同步那点事儿

关于mysql主从同步,相信大家都不陌生,随着系统应用访问量逐渐增大,单台数据库读写访问压力也随之增大,当读写访问达到一定瓶颈时,将数据库的读写效率骤然下降,甚至不可用;为了解决此类问题,通常会采用mysql集群,当主库宕机后,集群会自动将一个从库升级为主库,继续对外提供服务;那么主库和从库之间的...

2017-09-15 15:37:34

阅读数:194

评论数:0

云时代的必然选择,华为CloudFabric重新定义云数据中心网络

2017华为全联接大会HUAWEI CONNECT,华为重磅发布了CloudFabric解决方案,首次在数据中心领域提出面向应用场景的模型化组网概念,并发布面向高可用(High Availability)、超大规模(Hyperscale)、高性能计算(HPC,High Performance Co...

2017-09-13 09:01:46

阅读数:81

评论数:0

高吞吐消息网关的探索与思考

唯品会是一家立足于“全球精选,正品特卖”的电商网站,拥有4亿注册会员,日活约2千万会员。随着会员数量的增多,公司业务部门的飞速发展,和用户的沟通变得日益重要。沿用至今的消息网关,面对多变的业务和爆发式增长的消息面前,显得力不从心,多次大促出现性能瓶颈,急需重构来跟上公司业务发展的需要。唯品会消息网...

2017-09-11 10:26:49

阅读数:270

评论数:0

基于Mesos/Docker构建数据处理平台

本文深入介绍了去哪儿网利用Mesos和Docker构建私有云服务的全过程,分享了从无状态应用向有状态应用逐步过度的经验与心得。 平台概览2014年下半年左右,去哪儿完成了有关构建私有云服务的技术调研,并最终拍定了Docker/Mesos这一方案。下图1展示了去哪儿数据平台的整体架构: 图1...

2017-09-11 08:55:37

阅读数:506

评论数:0

KSQL,用于Apache Kafka的流数据SQL引擎

Apache Kafka是一个分布式的、分区的、多复本的日志提交服务,使用Scala编写,以可水平扩展和高吞吐率而被广泛使用。Kafka最初是由LinkedIn开发,并于2011年初开源,目标是为实时数据处理提供一个统一、高通量、低等待的平台。目前,越来越多的开源分布式处理系统如Cloudera、...

2017-09-01 15:39:28

阅读数:391

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭