个推技术学院

#女生节#快乐呀，Girls！在互联网世界，有这样一群宝藏女孩，她们被亲切地称为“程序媛”。她们写得好代码，玩得转美妆，工作上进，学习努力~今天，个推君就带大家认识一下个推的女程序员们，一起走进#个推程序媛的一天#Hello, World！Hello, SHE！这个#女生节，走进#个推程序媛的一天，带你认识下个推的宝藏小姐姐们！...

作为一家数据智能企业，个推在服务垂直行业客户的过程中，会涉及到很多数据实时计算和分析的场景，比如在服务开发者时，需要对App消息推送的下发数、到达数、打开率等后效数据进行实时统计；在服务政府单位时，需要对区域内实时人口进行统计和画像分析。为了更好地支撑大数据业务发展，个推也建设了自己的实时数仓。相比Storm、Spark等实时处理框架，Flink不仅具有高吞吐、低延迟等特性，同时还支持精确一次语义（exactly once）、状态存储等特性，拥有很好的容错机制，且使用门槛低、易上手、开发难度小。因此，个推主

前言随着大数据时代的快速发展，企业每天需要存储、计算、分析数以万亿的数据，同时还要确保分析的数据具备及时性、准确性和完整性。面对如此庞大的数据体系，ETL工程师（数据分析师）如何能高效、准确地进行计算并供业务方使用，就成了一个难题。作为一家数据智能公司，个推在大数据计算领域沉淀了丰富的经验。本篇文章将对大数据离线计算过程中出现的任务缓慢和任务中断这两大痛点问题提出解决思路，期望读者能够有所收获。一、任务缓慢“任务执行缓慢”通常是指任务的执行时间超过10个小时，且不能满足数据使用方对数据.

回首过去十年，我们见证了大数据从概念诞生到行业落地，逐渐发展到基于数据中台驱动决策的数据智能时代。作为后互联网时代的产物，数据智能必将是未来很长一个发展阶段的核心所在。每日互动（个推）作为数据智能行业的代表企业之一，于今年迎来了第一个十年。在这十年间，个推以消息推送起家，借助技术力量拓宽以数据智能为核心的业务范畴，现已成长为一家在A股上市的数据智能企业。但“数据智能”这个词，对于大众来说仍然相对比较陌生。数据行业资深从业者如何定义“数据智能”？过去的十年间，个推经历了怎么样的发展历程...

“互动十年，每日鲸彩”。2020年12月7日，是每日互动（个推）成立十周年的日子。从2010年到2020年，个推从一家创业公司成长为A股上市企业，从深耕消息推送技术到为各垂直行业提供专业的数据智能服务。走过10年的我们，依然秉持 “每日生活 科技改变” 的初心，带着 “数据让产业更智能” 的使命，继续踏浪前行，创造别样鲸彩！值个推十周年之际我们特推出感恩特惠活动以回馈广大开发者和行业客户十年有礼，狂欢开启爆款SDK，免费用1年热门大数据产品，...

前言如何在有限的生命里，突破自己，活出更多的精彩？当我们还在犹豫不前的时候，有的人已经踏上了新的生命征程。这是一个探索世界、重建自我的故事。清华大学毕业的Wilson，曾在国内4艘主力战舰服役，驾驶战舰走遍了中国海疆的每一个角落，也见证了中国海军的日益强大。突然有一天，他意识到人的一生不能只有一面，他想起大学时写代码的快乐。于是，十年没碰代码，已过而立之年的他决定开启代码人生。作者| 个推数据分析建模工程师 WilsonPart 1...

提到“用户增长”，很多人都会想到AARRR模型。AARRR以“Acquisition（用户获取）”“Activation（激活）”“Retention（留存）”“Revenue（收入）”“Refer（自传播）”五个单词，概括了App用户生命周期的5个重要阶段，能够帮助我们更好地理解获客和维护用户的原理。过去的很长一段时间里，AARRR模型在众多App的运营实践中都发挥了积极作用。然而，随着流量红利逐渐消失，App获取新用户越来越难，推广成本也在水涨船高。App亟需一套新的增长模型作为指导以完成存量竞争时.

作者 个推高级数据研发工程师 糖炒栗子前言：近年来，移动互联网、物联网、云计算的快速发展，催生了海量的数据。在大数据处理方面，不同技术栈所具备的性能也有所不同。如何快速有效地处理这些体量庞大的数据，令不少开发者为之苦恼。随着Greenplum的异军突起，以往大数据仓库所存在的很多问题都得到了有效解决，Greenplum也成为新一代数据库的典型代表。本文对个推（每日互动）在处理庞大的数据量时，如何选择有效的技术栈进行了深入研究，并结合自身业务场景，详细分析了Greenplum在个推中的...

个推资深数据分析师 远见在数据智能时代，对企业而言，“数据驱动业务”或者“数据即是业务”的理念逐渐成为业界的一种共识。然而，数据孤岛、数据标准不统一等问题在一定程度上阻碍了数据资产价值的最大化体现。个推作为专业的数据智能服务商，在数据治理方面有着丰富的实践，旨在帮助提升效率、节省成本、获取数据资产价值。本文将从三部分讲述个推数据治理：数据治理概念解析、数据实践、常见问题分析。01什么是数据治理讲具体概念前，我们先看一个生活中的例子。大家去超市...

6月22日，数据智能领域的行业盛会——“西溪论数”数据智能高峰论坛在杭州西溪隆重召开。会上，每日互动（个推）董事长方毅和CTO叶新江重磅发布了新一代数据中台产品——“数盘”。方毅表示，数盘的发布，其意义不止于中台。数盘更关注数据在行业场景中的应用落地，将致力于对数据价值进行最大化挖掘，驱动业务向上。01数盘直击数据中台建设痛点个推董事长方毅介绍数据中台的前世今生数据中台已经从一个技术词汇,逐渐成为不少企业发展的战略核心之一。数据中台的出现，能够很好地解决数据...

“西溪，且留下；数治，最杭州”。近日，国内专业数据智能A股上市公司每日互动（个推）在“西溪论数·2020数据智能高峰论坛”上举行了“西湖数据智能研究院”的发布与授牌仪式。该研究院将为构建新时代数据智能创新大生态，加快数字经济与实体经济融合打造“超级大脑”。杭州市经济和信息化局副局长杨柳春为研究院授牌，并发表讲话。西湖数据智能研究院执行院长姚建明等出席活动。西湖数据智能研究院由杭州市科技局和杭州市经济和信息化局联合指导，每日互动（个推）发起成立，旨在融合数据、技术与资本的力量，不断实现技术创新..

用户画像最初的意义，在于帮助企业找寻目标用户，明确出他们的喜好与厌恶，从而优化产品功能与服务，最终创造出更多的商业与社会价值。用户画像发展至今，可用性得到进一步提升。当然，其根基仍然是用户标签，不过在大数据加成之下，很多企业得以从海量数据中提炼更多的用户基础特征与行为特征来丰富用户标签，这就让用户画像变得更为立体与真实了。基础特征，指的是用户的基础信息，即用户的属性信息，比如年龄段、性别、消...

个小验：个推四大开发者服务（消息推送、用户画像、应用统计、一键认证）之一，提供先进的登录验证解决方案，帮助APP解决虚假注册等问题。黑小产：网络黑产的小头目，为利益不择手段，威胁着公众、企业、社会的资产安全。平静了多少年的互联网江湖最近因为社会人黑小产的活跃而不再平静一时间，九阴风云叠起，江湖暗潮涌动。第一回合：个小验VS 羊毛党黑小产发现不少羊脱毛，就往下薅羊毛。自此，踏上了羊...

背景消息报表主要用于统计消息任务的下发情况。比如，单条推送消息下发APP用户总量有多少，成功推送到手机的数量有多少，又有多少APP用户点击了弹窗通知并打开APP等。通过消息报表，我们可以很直观地看到消息推送的流转情况、消息下发到达成功率、用户对消息的点击情况等。个推在提供消息推送服务时，为了更好地了解每天的推送情况，会从不同的维度进行数据统计，生成消息报表。个推每天下...

二十一世纪，互联网新科技层出不穷。伴随着大数据、云技术以及整个算力的发展，人工智能技术的研究及应用也迅速壮大，在语音、图像和自然语言方面取得了卓越的成绩。更为重要的是，政府也在大力发展数字经济，包括党的十九届四中全会首次增列了“数据”作为生产要素，这也进一步反映了随着经济活动数字化转型的加快，数据对提高生产效率的乘数作用凸显，成为最具时代特征新生产要素的重要变化。个推作为专业的数据智能服务商，于2...

前言个推作为国内第三方推送市场的早期进入者，专注于为开发者提供高效稳定的服务，在保证稳定的情况下，我们的网络数据交互也达到了一个很高的级别，今天给大家分享的是网络数据安全的常用方法简介TCP/IP作为互联网使用的标准协议集，在设计之初就是建立在接入主机互相信任的前提下，缺乏对安全方面的考虑，并且为了保证网络的开放性，TCP/IP协议的内容是完全公开的。因此，只使用TCP/IP协议在互联网上传...

一、引言Codis是一个分布式 Redis 解决方案，可以管理数量巨大的Redis节点。个推作为专业的第三方推送服务商，多年来专注于为开发者提供高效稳定的消息推送服务。每天通过个推平台下发的消息数量可达百亿级别。基于个推推送业务对数据量、并发量以及速度的要求非常高，实践发现，单个Redis节点性能容易出现瓶颈，综合考虑各方面因素后，我们选择了Codis来更好地管理和使用Redis。...

作者：个推高级数据工程师 晓骏众所周知，金融是数据化程度最高的行业之一，也是人工智能和大数据技术重要的应用领域。随着大数据收集、存储、分析和模型技术日益成熟，大数据技术逐渐应用到金融风控的各个环节。个推作为专业的数据智能服务商，拥有海量数据资源，在智慧金融领域也推出了相应的数据解决方案-个真，为金融客户提供智能反欺诈、多维信贷风险评估和高意愿用户智能筛选等全流程的数据服务，助力各金融机构全面提...

安森，个推CTO毕业于浙江大学，现全面负责个推技术选型、研发创新、运维管理等工作，已带领团队开发出针对移动互联网、金融风控等行业的多项前沿数据智能解决方案。曾任MSN中国首席架构师，拥有十余年资深技术开发与项目管理经验，在大数据处理系统、大规模并发平台、分布搜索系统、手机应用开发、无线通信领域和智慧金融系统等领域拥有丰富实践经验。引言中国移动互联网的发展见证了中国大数据行...

版权声明：本文为博主原创文章，遵循 CC 4.0 by-sa 版权协议，转载请附上原文出处链接和本声明。 ...

引言前文回顾：《数据智能时代来临：本质及技术体系要求》作为本系列的第一篇文章，概括性地阐述了对于数据智能的理解以及推出了对应的核心技术体系要求：数据智能就是以数据作为生产资料，通过结合大规模数据处理、数据挖掘、机器学习、人机交互、可视化等多种技术，从大量的数据中提炼、发掘、获取知识，为人们在基于数据制定决策时提供有效的智能支持，减少或者消除不确定性。从对数据智能的定义...

随着互联网在各行各业的影响不断深入，数据规模越来越大，各企业也越来越重视数据的价值。作为一家专业的数据智能公司，个推从消息推送服务起家，经过多年的持续耕耘，积累沉淀了海量数据，在数据可视化领域也开展了深入的探索和实践。个推的数据可视化探索和应用由需求出发，从基于开源平台到结合个性化需求进行定制化开发，打造出个推实时消息推送下发图，人群分布热力图等优秀数据可视化作品。这一过程中，个推积累沉淀了大...

作者 | 个推大数据运维工程师 行者升级背景个推作为专业的数据智能服务商，在业务开展过程中存在海量的数据存储与查询的需求，为此个推选用了高可靠、高性能、面向列、可伸缩的分布式数据存储系统——HBase。然而，运行HBase老集群（使用HBase1.0版本）多年后，遇到了两大问题：各节点基础环境不一致；该集群的服务器运行多年已过保。而且随着个推业务量增长，性...

作者 | 个推数据库工程师 嘉木个推作为国内第三方推送市场的早期进入者，专注于为开发者提供高效稳定的推送服务，经过9年的积累和发展，服务了包括新浪、滴滴在内的数十万APP。由于我们推送业务对并发量、速度要求很高，为此，我们选择了高性能的内存数据库Redis。然而，在实际业务场景中我们也遇到了一些Redis大key造成的服务阻塞问题，因此积累了一些应对经验。本文将对大key的发现、解决大k...

作者：个推数据研发工程师 学长1 业务背景随着大数据的快速发展，业务场景越来越复杂，离线式的批处理框架MapReduce已经不能满足业务，大量的场景需要实时的数据处理结果来进行分析、决策。Spark Streaming是一种分布式的大数据实时计算框架，他提供了动态的，高吞吐量的，可容错的流式数据处理，不仅可以实现用户行为分析，还能在金融、舆情分析、网络监控等方面发挥作用。个推开发者服务——...