叶谦-移动大数据平台的一些实践经验

最新推荐文章于 2024-10-13 20:28:02 发布
最新推荐文章于 2024-10-13 20:28:02 发布
阅读量590 收藏
点赞数
文章标签： 大数据 移动 任务调度 经验 数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chengying332/article/details/42424215
版权

叶谦-移动大数据平台的一些实践经验


友盟数据统计分析系统的整体架构，包含SDK，实时计算系统，离线计算系统?等?几部分。友盟自行研发的任务调度器满足了日常任务调度和异常情况下重跑数据的调度需求。还研发了自己的查询中间层使得后台直接使用HBase并对前端的查询接口保持一致。此外，还做了一些Hadoop/HBase源码级的改造，以使得系统的...


详细解读 和小伙伴们一起来吐槽

chengying332
关注
【附下载】手摸手带你搭建广告需求平台DSP
weixin_52346300的博客
11-25 1007
这是彭文华的第110篇原创 以前分享过DMP（数据管理平台）的来龙去脉。DMP是互联网最挣钱的广告系统中的用户基础数据提供方。百度的凤巢、淘宝的直通车（阿里妈妈）还有腾讯的广点通，是...
阿里云强力贡献：如何让 StarRocks 做到极速数据湖分析
StarRocks的博客
04-13 923
StarRocks是一个强大的数据分析系统，主要宗旨是为用户提供极速、统一并且易用的数据分析能力
专访友盟CEO叶谦：深挖海量终端用户数据的价值
周红伟讲AI
07-15 1115
 专访友盟CEO叶谦：深挖海量终端用户数据的价值 发表于10小时前| 651次阅读| 来源CSDN| 0 条评论| 作者Banbury 访谈友盟CEO叶谦大数据数据挖掘移动互联网物联网移动开发开发者 摘要：2015，友盟从提供工具、数据、服务的综合性移动开发者服务平台，调整为提供更多基于数据的一站式解决方案。CSDN专访友盟新任CEO 叶谦，听他畅谈对移动互联网、大
【友盟+】COO叶谦：解读全域大数据战略背后的技术演进
weixin_34137799的博客
06-21 144
今年年初，Oracle发布了一份大数据变化趋势报告，报告中指出，越来越多的企业将用户分析甚至是企业应用同大数据加以结合。从AI支持型应用到Megabox等数据流客户端，各家企业都将迎来自己的大数据转型及下一代数据驱动型应用。Oracle亚太客户体验策略及转型部门总监Krisi Mansfield也表示：“预见并了解了客户的意向，并相应地采取行动之后，就可...
奉送9个重磅PPT：来自2015中国互联网大会-大数据应用论坛
weixin_34198453的博客
05-02 186
本次论坛围绕主题“大数据开启大未来”，邀请了众多互联网政企代表，包括中国互联网协会、贵阳市政府、阿里、微软、缔元信、中国电信、晶赞科技、搜狗广告、秒针、世界邦旅行网、友盟等。此次论坛从互联网大数据的现状、应用及未来趋势都作了深入探讨，行业大数据应用企业都从自身实例做了分享与交流。 论坛由北大新媒体营销中心研究员马旗戟先生主持，论坛开始，中国互联网...
StarRocks COO叶谦：仰望星空，脚踏实地，StarRocks 开启新的序章｜数据猿专访
数据猿
11-05 323
数据智能产业创新服务媒体——聚焦数智· 改变商业少有赛道像当前中国数据库那样“纠结”：一方面，迎着时代的风，数据库的发展如火如荼。2020 年 4 月，数据被正式列为与土地、劳动力、资本...
阿里布局大数据 盈利模式还需探索
weixin_33967071的博客
07-03 209
随着社会的高速发展，我们逐渐步入互联网时代，大数据已经成为这个时代的标签。大家都在说大数据，有人说得数据者得天下。数据在未来的价值不可限量。 大数据是什么呢?大数据就是基于人们消费应用，社会活动等海量信息资产。大数据可以做什么呢?基于大数据的分析，可以做精细化定制服务，定向营销，以及征信各方面应用等。 近年来，布局大数据的企业越来越多，阿里也不例外。此前...
2016全域大数据应用论坛11位嘉宾核心观点
weixin_34023982的博客
05-22 161
2016中国互联网大会最受关注的大数据应用论坛再次由【友盟+】承办，本届论坛更专注“大数据应用落地和效果”。会上，十余位企业领袖及大数据专家分享了当下大数据应用的案例及经验，为行业从业者提供了学习和借鉴的应用典范。 【友盟+】叶谦核心观点： 【友盟+】COO叶谦 大数据在业务应用中的三大困局：1、缺数据2、缺能力3、缺乏工具。在解决这三个困局上，全域...
【友盟+】COO叶谦：全域数据 智能未来
weixin_34270865的博客
05-22 111
在2016中国互联网大会全域大数据应用论坛上，【友盟+】COO叶谦对全域数据做了更为深入的阐释，同时也分享了【友盟+】全域数据应用上的研究。 叶谦表示，全域数据能力包括全面的数据采集能力、全面的数据处理能力和全面的数据服务能力。 （图为：【友盟+】COO叶谦） 大数据在业务应用中的三大困局：1、缺数据2、缺能力3、缺乏工具 缺乏数据：无从支持业务。特...
大学生创新大赛：打造个性化追星App，破解移动App市场挑战
当时的社交网络分为三个层次：社交网络平台、开放平台和第三方应用，而手机的特性如操作系统、通讯录和传感器的运用使得社交更加方便。3G网络的普及加速了移动互联网的变革，催生了诸如Facebook、Twitter等社交巨头...
hadoop权威指南
04-10
经典之作 -hadoop权威指南-包含所有hadoop生态圈技术基础
浙江专版2017秋九年级英语全册Unit4Iusedtobeafraidofthedark写作小专题习题新版人教新目标版
08-05
- 叶谦过去喜欢打篮球，他是学校篮球队的一员，身体素质非常好。但现在他对乒乓球更感兴趣。 - 当莉莉还是个小女孩时，她对画画有着极大的热情，但现在她更热衷于阅读，尤其是科幻小说。 通过这些练习，学生们...
消息队列介绍
weixin_38703379的博客
10-09 468
优点：性能单台（12000+），性能较好，管理界面较丰富。在互联网公司也有较多应用，有多个语言的成熟客户端。优点：性能单台（10万级），模型简单，接口易用。在阿里巴巴大规模应用。优点：性能单台（6000+）成熟，已经在很多公司得到应用。各种协议支持好，有多个语言的成熟客户端。缺点：运维难度大，对ZooKeeper强依赖。缺点：内部机制很难了解，也意味很难定制和掌控。缺点：性能较弱，缺乏大规模吞吐的场景的应用，有江河日下之感。优点：天生分布式性能最好，所以常见大数据领域。缺点：文档少，支持的语言较少。
020 elasticsearch7.10.2 elasticsearch-head kibana安装
m0_46695127的博客
10-13 751
020 elasticsearch7.10.2 elasticsearch-head kibana安装
pandas常用数据格式IO性能对比
lining9508的博客
10-09 803
本文对pandas支持的一些数据格式进行IO（读写）的性能测试，大数据时代以数据为基础，经常会遇到操作大量数据的情景，数据的IO性能尤为重要，本文对常见的数据格式csv、feather、hdf5、jay、parquet、pickle性能进行对比。
第十二章 RabbitMQ之失败消息处理策略
Calvin的博客
10-11 1303
Spring AMQP提供了消费者失败重试机制，在消费者出现异常时利用本地重试，而不是无限地requeue到mq。我们可以定义一个异常队列和交换机，来接收其他交换机队列转发的无法处理的异常消息。然后我们可以查看其中的异常消息并进行人工处理。重试耗尽后，直接reject，丢弃消息（默认方式）重试耗尽后，将失败消息投递到指定的交换机（推荐）2. 定义接收失败消息的交换机、队列及其绑定关系。重试耗尽后，返回nack，消息重新入队。在实际项目的生产环境中，通过。
SparkSQL介绍及使用
最新发布
m0_70882914的博客
10-13 376
SparkSQL介绍及使用
大数据治理：挑战与实践
weidl001的博客
10-13 1102
大数据治理是现代企业在数据管理过程中必须面对的挑战，通过科学有效的治理策略和先进的工具，企业可以有效地提升数据质量、增强数据安全、满足合规要求，并最大化数据的业务价值。随着大数据技术和AI的进步，大数据治理的自动化和智能化将为企业提供更强的竞争力。持续投入和关注数据治理，将有助于企业在复杂的数据环境中把握先机、实现创新。
第七章 RabbitMQ之交换机
Calvin的博客
10-10 1656
在RabbitMQ中，交换机（Exchange）是用来接收生产者发送的消息并将这些消息路由到一个或多个队列的组件。不同类型的交换机决定了它们如何路由这些消息。以下是RabbitMQ中几种常用交换机类型：直接交换机（direct）：如果路由键完全匹配，消息就被投递到相应的队列。广播交换机（fanout）：消息被广播到所有绑定的队列。主题交换机（topic）：如果路由键匹配模式（通配符*代表匹配多个单词和#代表匹配一个单词），消息被投递到相应的队列。头交换机（headers）：通过匹配消息头进行路由。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值