从2019谷歌开发者大会，看大数据发展的4个趋势

9月10日-11日，2019谷歌开发者大会(Google Developer Day)在上海世博中心成功举办，大会围绕热门技术、工具和开发者进行了一场深入的交流。本次大会的主题是“更高的赋能开发者”，和易观“让数据能力平民化”的使命一样，都旨在更好地服务用户和开发者。

从大会主题内容可以看到，5G时代来临，在拥抱新技术的同时，开始更加注重对用户隐私的保护。易观SDK架构师薛永富参加了此次开发者大会，在这里和大家分享大会的4点趋势和感想。

趋势1：拥抱5G

随着5G商用牌照的发放，网络成本进一步下降，相应的人工智能的应用场景更加普及，GDD（Google Developer Day缩写，以下不再赘述）也推荐了TensorFlow、VR等高传输网络下的基础技术。

前几天谷歌推出了Android 10的版本，改变了一贯用甜点命名的习惯，也开始做出了更多的改变。Android 10版本自带5G支持功能，提供是否支持高速网络、是否为收费网络等接口，更好的地帮助开发者利用5G技术推动应用创新。此外，Android 10版本也提供了官方深色主题,和arm、高通等合作，在移动设备上增加更多的机器学习功能，包括语音识别生成视频字幕、利用本地机器模型生成推荐信息等。

5G也会为大数据带来巨大的改变，智能的IOT设备也会运用在更多的场景下，边缘计算将取代流式和批量式成为新一代的大计算架构。在这点上，GDD和去年易观提出的大数据IOTA架构也非常一致。

趋势2：高效跨平台开发 语言更加简洁

GDD发布了跨平台开发框架Flutter1.9和开发语言Dart2.5版本，支持web和移动端统一，现在的Flutter更多的是UI框架，未来可能会增加更多多端统一的基础库。Kotlin号称是这几年来普及最快的语言之一，android系统的Kotlin语言进一步优化，可以编译成Java字节码，也可以编译成JavaScript, 更好的构建发展平台。

Java和Kotlin对比

趋势3：机器学习

近年，数据使用率不停增加，机器学习框架越来越多。Tensorflow 是谷歌开源的一个机器学习平台，会上发布了TenserFlow2.0，重点优化 Keras 和 Eager Execution 的能力，简化开发流程。

此外，谷歌还发布了更多支持场景，如用户微信小程序的TensorFlow.js ，能有效的降低用户的使用门槛，支持更多用户使用。

趋势4：更加注重用户隐私

5G时代来临后，数据就像流动的大河。但其中有一个很严重的问题：对数据隐私的保护。

本地机器学习(如TensorFlow.js)也是一种隐私性能的保护的方式。不管是人脸识别关键点数据，还是用户的语音都是如此。

Android4.4之后引入SELinux机制，一直基于健壮性进行优化，提升数据安全性。

根据我们总结，主要从以下几个方面进行：

1. 虚拟机改造，基于运行容器和工作机制改造，提升运行的速度；

2. 废弃部分的敏感信息获取接口；

3. 权限更加严格优化；

4. 文件夹访问权限的增强。

从Android10开始，在外部存储设备中为每个应用提供了一个“隔离存储沙盒”（例如 /sdcard），任何其他应用都无法直接访问应用的沙盒文件。 在这个背景下，用户的画像业务也会受到不同的影响。当然大家希望能确定一个设备，怎么办呢？

这里简单的分享下易观的经验，要注意三点：

1、遵守GDPR(General Data Protection Regulation)

GDPR（一般资料保护规范）主要目标是取回公民以及住民对于个人资料的控制。是后端提供去除对应用户的所有数据的接口，让用户的部分信息及时清除。

2、拒绝采集用户敏感性信息

采集范围包含设备基本信息和开发者预埋点的信息，坚决不自动采集用户的设备sim卡相关和其他的敏感信息。

3、使用算法生成唯一的ID

• 通过设备型号+特定值，生成唯一的ID，存储在跨app能访问的区域，这样多个app可以获取 统一设备标志，不管如何重装、卸载等都可以确保唯一

• 高版本约束跨app访问的区域后，可以通过后台机器学习，来计算真正的设备用户

• 在易观方舟里，我们使用用户定义的标志，可以使用硬件标志，也可以使用不同场景下唯一性标志。

“君子爱数，取之有道”，合理合情地取得数据是SDK的根本。

彩蛋

本次谷歌开发者大会除了谷歌分享谷歌最新技术，现场还隐藏了很多“彩蛋”。比如谷歌艺术和文化推出 的"观妙中国"，让艺术爱好者足不出户就可欣赏到高清艺术藏品。

“智舞窑变”即根据动作识别，变成最像你的古董，像这样↓↓↓