大数据
文章平均质量分 77
魅族技术
魅族技术团队用高效的技术推动业务发展,以质量第一,服务至上,用开放,诚信的心态促进互联网行业共同受益。
展开
-
魅族大数据上云之路
首先我先介绍一下魅族大数据上云的背景,即我们为什么要上云?在开始之前我们默认今天参与直播的各位同学对Hadoop相关技术和docker都有一定的了解,另外以下提到Hadoop是泛指目前魅族大数据使用的Hadoop生态圈技术,资源除特别说明则泛指存储资源、计算资源和网络资源的总和。原创 2016-05-16 17:49:57 · 10062 阅读 · 0 评论 -
魅族推荐平台架构解析(二)
魅族推荐平台实现了在海量的数据中对算法模型进行在线及离线训练,在高并发的场景下实时进行预测为用户推荐更感兴趣的信息。同时支撑多算法组合A/B测试,以供算法进行在线实验,并能在线进行动态机器资源分配以达到资源的最大化利用。原创 2017-04-19 10:52:20 · 2444 阅读 · 0 评论 -
魅族推荐平台架构解析(三)
魅族推荐平台实现了在海量的数据中对算法模型进行在线及离线训练,在高并发的场景下实时进行预测为用户推荐更感兴趣的信息。同时支撑多算法组合A/B测试,以供算法进行在线实验,并能在线进行动态机器资源分配以达到资源的最大化利用。原创 2017-04-20 14:35:44 · 1596 阅读 · 0 评论 -
魅族推荐平台架构解析(一)
魅族推荐平台实现了在海量的数据中对算法模型进行在线及离线训练,在高并发的场景下实时进行预测为用户推荐更感兴趣的信息。同时支撑多算法组合A/B测试,以供算法进行在线实验,并能在线进行动态机器资源分配以达到资源的最大化利用。原创 2017-04-17 09:30:57 · 3089 阅读 · 0 评论 -
魅族大数据之流平台设计部署实践
魅族大数据的流平台系统拥有自设计的采集SDK,自设计支持多种数据源采集的Agent组件,还结合了Flume、Spark、Metaq、Storm、Kafka、Hadoop等技术组件,本文就魅族流平台对大量数据的采集、实时计算、系统分析方法,全球多机房数据采集等问题进行介绍。原创 2017-07-27 16:50:30 · 1161 阅读 · 0 评论