
大数据
文章平均质量分 80
云上马可君
谷歌云亚太区高级合作伙伴
展开
-
实操手册:Dataproc 可选组件已支持 Apache Flink 和 Docker
Google Cloud 的 Dataproc 让您能够以更简便、更经济的方式来基于 Google Cloud 运行原生 Apache Spark 和 Hadoop 集群。在本文中,我们将介绍在 Dataproc 的 Component Exchange 中提供的最新可选组件:Docker 和 Apache Flink。Dataproc 中的 Docker 容器Docker 是一种广泛使用的容器技术。由于它现在是 Dataproc 可选组件,所以Docker 守护进程 (daemon) 现在可被..转载 2021-08-10 09:54:59 · 387 阅读 · 0 评论 -
Youtube 都在用的 Cloud Spanner 到底是“何方神圣”
图片数据库是应用程序运行过程中至关重要的一部分,Cloud Spanner 作为唯一一个企业级、全球分布和强一致性的企业级数据库服务,将关系数据库结构的优点与非关系型数据库的规模完美结合。更独特的是,Spanner 通常将事务、SQL 查询和关系结构与非关系或 NoSQL 数据库的可伸缩性相结合。图片(图 1)Cloud Spanner 是如何工作的?在图1中,可以看到一个四节点区域云 Spanner 实例,该实例托管两个数据库。节点是 Cloud Spanner 计算的量度标准。节点服务器提供读原创 2021-06-09 15:15:48 · 573 阅读 · 0 评论 -
5月27日Google Cloud携手Intel 重磅开讲!探索Smart Analytics的最佳实践!
在刚刚结束不久的 Google I/O 2021线上大会上,我们可以看到人工智能将不断地从各个方面改善人们的生活方式,从实时地图到线上购物再到 AI ”问诊“。而人工智能的应用,使得数据规模与复杂度,远超以往任何时候。对于企业来说,如何充分利用现有数据,不断提高实时洞察力和数据决策能力,成为数据化转型的重中之重。而利用 Google Cloud 智能分析平台(Smart Analytics)中的最新技术,您可以剔除多云环境中的复杂性,高效顺畅的分析数据、获取价值,并将结果转化成驱动业务增...原创 2021-05-25 14:58:51 · 240 阅读 · 0 评论 -
这是免费能看的Part么?高级云架构师关于电商上云的“亿”点建议
emarketer 相关数据显示,预计2021年全球在线零售市场规模将达4.1万亿美元,占全球零售市场规模约17.5%。得益于海外消费者购物习惯的转变及中国完整而稳定的供应链体系,中国跨境电商正迎来新的增长机会。我们邀请到了 WebEye 高级云架构师 Candice 和 Tim 带来 Google Cloud AI 赋能电商零售技术解决方案。由于分享内容非常丰富,我们对其进行了分块整理,以下为第一趴—— Google Cloud AI 产品全览& Vision AI 场景使用。...原创 2021-05-14 14:16:05 · 156 阅读 · 0 评论 -
利用 Looker 实现进阶资料分析与视觉呈现(1)【内附精彩活动】
在数据量持续增长的当下,数据分析、预测能力对于企业的成长至关重要,在使用到传统的 BI 工具时,企业常常面临一些挑战。例如在使用 tableau 时,前端会连接一个 data warehouse ,在 tableau client 端的工具跟 data warehouse 之间会建立一个 cube server,即根据用户常用的一些维度或查询 cache 在 cube server 中。这就意味着 BI 工具不是直接去 data warehouse 中获取信息,而是要经过cube server。这...原创 2021-04-23 11:12:21 · 1221 阅读 · 0 评论 -
实操手册:使用 GCP SQL 创建与 Active Directory 集成的 SQL Server实例
目前,Google Cloud SQL 中的 SQL 实例已经可以与 Microsoft Active Directory(AD)进行集成,且正在内测中。这篇文章会详细介绍使用此新功能创建 SQL Server 实例所需的基本步骤,如果您想要了解更多信息,可以阅读官方文档。官方文档:https://cloud.google.com/sql/docs/sqlserver/ad使用代管式 Microsoft AD 托管服务创建域 第一步便是使用代管式 Microsoft AD 的托...翻译 2021-04-16 16:10:36 · 381 阅读 · 0 评论 -
多角度探讨灵活可扩缩的云上游戏解决方案
在上周的 Cloud 干货中我们从谷歌的基础架构入手,分析了其在游戏场景中的几大独特优势:优质层级的网络服务、全球 VPC、负载均衡等(点此复习)那我们今天的文章继续来聊聊如何借助 Google Cloud来打造灵活可扩缩的游戏解决方案,简单来说主要分为三个层面:游戏接入层、服务器、数据库的扩展方案。下面我们逐一展开.....游戏接入层的扩展正式开始之前我们先来看一个短视频:视频链接:https://mp.weixin.qq.com/s/NxdwY8rmUJ2JxMya...原创 2021-04-06 16:26:41 · 374 阅读 · 0 评论 -
电商专场:Google Cloud 深度赋能电商零售,安全出海不翻船
根据 Shopify Plus 的《2021年电子商务报告》,当前电子商务正处于历史最高水平,新冠疫情迫使消费者网上购物,在大流行的高峰期,仅用了90天就达到过去10年的电子商务增量。emarketer相关数据显示,预计2021年全球在线零售市场规模将达4.1万亿美元,占全球零售市场规模约17.5%。中国跨境电商依托制造业优势正在全球快速发展,乘风而上。在受访者中,75%的用户表示在居家隔离期间开始尝试不同的网络品牌,60%的受访者表示在疫情之后会继续支持这些品牌。在电子商务繁荣的同...原创 2021-03-30 19:33:44 · 240 阅读 · 0 评论 -
全方位解析谷歌云的基础架构在游戏场景中的独特优势
根据 Sensor Tower 商店情报平台数据显示,2021年2月中国手游发行商在全球 App Store 和 Google Play 的收入排名中,共34个中国厂商入围全球手游发行商收入榜TOP100,合计吸金超过22.4亿美元,占全球 TOP 100手游发行商收入的40.2%,战绩彪炳。那么,如何借助谷歌云强大的产品生态在海外市场搭建更好的游戏环境呢?今天我们先来看一下谷歌云的基础产品与架构在游戏场景中的一些独特优势。谷歌在游戏场景下的通用业务架构...原创 2021-03-29 11:31:01 · 822 阅读 · 0 评论 -
五分钟了解 BigQuery ML 支持的数据模型及模型创建与评估
在之前的文章中,我们使用公共数据集向大家演示了如何通过 BigQuery & DataStudio 进行数据分析与可视化(点此复习),今天我们还是要把“灯光”给到 BigQuery 。大家都知道 BigQuery 作为 Google Cloud Platform 重要的数仓产品,主要聚焦于数据分析,技术来源于 Google 的 Dremel 、无索引、Severless 技术,支持动态调整计算与调整资源。此外,BigQuery 的存储按照非压缩数据量、查询使用量计算,非常易于使用,且无需..原创 2021-03-19 16:30:08 · 634 阅读 · 0 评论 -
代码实例 | 使用 Cloud Run & BigQuery 进行库存管理
编译自:Inventory management with BigQuery and Cloud Run很多人将 Cloud Run 作为一种网站托管的方式, Cloud Run 确实是托管的绝佳工具,但是我们可以利用 Cloud Run 做更多的事情,那么我们今天就来探索一下如何使用 Cloud Run & BigQuery 来创建一个库存管理系统。下面,我会使用爱荷华州酒类控制板数据集的一个子集为我们的虚拟商店创建一个较小的库存文件。批量导入新库存在这个库存管理方案中,我们将一个 C翻译 2021-03-15 15:55:17 · 240 阅读 · 0 评论 -
使用 CloudRun & BigQuery 进行库存管理
编译自:Inventory management with BigQuery and Cloud Run很多人将 Cloud Run 作为一种网站托管的方式, Cloud Run 确实是托管的绝佳工具,但是我们可以利用 Cloud Run 做更多的事情,那么我们今天就来探索一下如何使用 Cloud Run & BigQuery 来创建一个库存管理系统。下面,我会使用爱荷华州酒类控制板数据集的一个子集为我们的虚拟商店创建一个较小的库存文件。批量导入新库存在这个库存管理方案中,我们将一个 C翻译 2021-03-05 17:16:20 · 298 阅读 · 0 评论 -
20分钟学会如何进行数据分析与可视化
在上次的分享中,我们介绍了 Google Cloud 中免费且实用的明星产品 Firebase,看过这篇文章(点此复习)的小伙伴应该注意到,我们在里面提到,当数据量非常之大时,我们还需要借助另一款数据分析工具才能进行进一步的分析,这款产品就是 BigQuery。那么,BigQuery到底是一款什么样的产品呢,它的功能究竟有多强大,在我们的生产实践过程中可以发挥怎样的作用呢?下面我们进入今天分享的正题:BigQuery 的最佳实践。以游戏客户为例,在工作生产的过程中,通常会遇到以下问题:我们.原创 2021-03-01 16:03:01 · 1715 阅读 · 0 评论 -
Firebase 神奇功能在哪里——解密 A/B Test & GA
在速看!没有比这更全面的 Firebase 介绍!中,我们提到 Firebase A/B Test 在提升用户质量的进程中扮演着非常重要的角色。关于如何正确使用这个功能,这次我们会详细介绍,此外还会介绍 Firebase 在提高用户基数当中非常重要的亮点功能 —— GA(Google Analytics)。设置 A/B Test下图直观的展示了 Firebase 中设置 A/B Test 的几大具体步骤,主要分为四步,根据步骤进行设置即可。Firebase支持多种平台,在第二个步骤中,...原创 2021-02-07 11:27:49 · 953 阅读 · 0 评论 -
速看!没有比这更全面的 Firebase 介绍!
说到 Firebase,这是一个很长的“故事”。所以我们打算分多次来讲(并不是因为懒)在正式开始之前,先来看一下本次分享主要有哪些内容。第一个当然是要先搞懂到底什么是 Firebase?然后看一下 Firebase 到底有哪些特性?本文会列一些主要的特性,在 Firebase 如何帮助我们开发应用、提高应用质量以及扩大用户基础这三个维度中挑一些主要的功能进行讲解。最后我们会着重强调 Firebase 的一个核心亮点功能 —— Analytics,这是一个免费的功能,且非常强大,深受广..原创 2021-02-01 11:09:50 · 4314 阅读 · 0 评论 -
借助 Autoscaler 轻松扩展云数据库实例大小
借助 Cloud Spanner,您可以轻松地获得一个高度可用、可大规模扩展的关系型数据库。帮助 Google Cloud 的客户可以在应用程序方面有所创新,而不必担心数据库后端是否能够扩展到满足他们的需求。Spanner 还可以让用户根据使用情况优化成本。为了更轻松地使用 Spanner 进行构建,谷歌发布了 Autoscaler 工具。Autoscaler 是 Spanner 的一个开源工具,可以观察关键的利用率指标,并根据这些指标按需添加或删除节点。要想快速进入,请访问下文????的 GitH..翻译 2021-01-08 14:31:26 · 237 阅读 · 0 评论 -
GCP&Qlik:加速并简化 BigQuery 上SAP数据的交付
作者:Danielle Brannon, Partner Technical Lead for SAP Strategy & Architecture在SAP的客户中,大约有52%的客户都面临着一个分析难点:数据集成,如果您恰好也是这52%中的一员,那么 Google Cloud 或许可以帮助到您。通过与 Qlik 等合作伙伴的共同努力,谷歌云正在扩展集成选项,并将 SAP 的实时复制能力引入 BigQuery 。集成数据,加速洞察BigQuery 是谷歌云全面管理的企业...翻译 2020-12-31 15:44:14 · 326 阅读 · 0 评论 -
利用Dialogflow构建聊天机器人
作者:Priyanka Vergadia, Developer Advocate, Google Anu Srivastava, Developer Advocate, AI/ML在如今的办公环境下,在线协同工作至关重要,保持生产力也是关键,聊天机器人在协同工作中也发挥着至关重要的作用。为什么要使用聊天机器人?工作中我们经常需要将来自外部资源的信息整合到我们的沟通中,而聊天机器人可以帮助我们在一个地方找到全部的所需信息。在下面的内容中,我们将带领您了解一个机器人,而它的...翻译 2020-12-24 16:18:18 · 1577 阅读 · 1 评论 -
BigQuery ML 功能更新:非线性模型类型及模型导出
作者:Abhishek Kashyap,Product Manager在2018年,我们发布了 BigQuery ML,用作训练和使用线性模型的 SQL 接口,它是 Google Cloud BigQuery 数据仓库的集成部分。许多在 BigQuery 中拥有大量数据的客户开始使用 BigQuery ML 来转移对数据 ETL 的需求,因为它直接将 ML 带到了他们存储的数据中。由于易于解释,因此线性模型对我们的许多客户都适用。但是,正如许多 Kaggle 机器学习竞赛所示,一些非线性模型类...翻译 2020-12-04 15:47:46 · 249 阅读 · 0 评论