- 博客(43)
- 收藏
- 关注
RSS订阅原创 F1 Query: Declarative Querying at Scale
距离 Google 的上一篇 F1 论文，也就是 F1: A Distributed SQL Database That Scales 已经 5 年过去了，Google 在今年的 VLDB 上终于发布了 F1 的新版本 F1 Query: Declarative Querying at Scale，我们今天就来看一下这篇论文。2013 年的 F1 是基于 Spanner，主要提供 OLTP 服...
2020-01-14 13:26:37
2555
原创 如何将数据仓库从 AWS Redshift 迁移到阿里云 AnalyticDB for PostgreSQL
阿里云AnalyticDB for PostgreSQL（以下简称 ADB PG，即原HybridDB for PostgreSQL）为基于PostgreSQL内核的MPP架构的实时数据仓库服务，可以支持复杂ETL任务，也支持高性能在线查询，同阿里云生态紧密结合。AWS 的Redshift同样为基于PostgreSQL内核引擎的MPP数据仓库服务器，在AWS被广泛作为数据仓库使用。ADB PG和R...
2020-01-14 12:30:07
3054
原创 支付宝移动端 Hybrid 解决方案探索与实践
目前 mPaaS H5 容器 Demo 源码已发布至 GitHub，全新的接入方式让你可以一键集成 mPaaS 环境并快速接入 H5 容器，体验统一的容器和内核，获取媲美原生的 Hybrid 方案及完美的动态能力。支付宝 Hybrid 方案建设与演进目前支付宝有 2 套 Hybrid 方案： HTML5 容器与小程序。小程序是最近几年才出来，H5 容器已经有了很长时间的历史，所以我们就先从...
2020-01-14 11:53:28
3324
原创 Tablestore入门手册-UpdateRow接口详解
表格存储Tablestore入门手册系列主要介绍表格存储的各个功能接口和适用场景，帮助客户了解和使用表格存储Tablestore。本文对表格存储Tablestore的UpdateRow接口进行介绍，包括其参数、功能示例、使用场景等。接口概述UpdateRow接口是表格存储Tablestore提供的基础读写接口之一，用于对某一行进行更新操作，若指定行不存在，UpdateRow也可以用于新...
2020-01-14 11:03:01
3220
原创 突破边界局限，阿里云神龙负责人张献涛分享15年虚拟化之路
2020年1月8日，弹性计算服务技术总负责人张献涛受邀出席“面对面 见未来”的沙龙分享活动，现场听众主要是银行、保险、证券等金融行业的CTO、CIO等。演讲开始前，听众们了解神龙云服务器的并不多。在听完张献涛的介绍后，他们对神龙兴趣大增，在分享结束后纷纷与张献涛交流讨论，意犹未尽。15年虚拟化技术之路虚拟化是如今云计算行业的基础，然而虚拟化最早并不是针对云设计的。张献涛回忆，他...
2020-01-13 12:39:31
3818
原创 如何成为一个很厉害的工程师
有很多人，包括我也困惑的一个问题，就是如何成为一个很厉害的工程师。类似的问题也有很多，如何成为一个很厉害的运营，如何成为一个很厉害的产品，或者跨行业的，如何成为一个很厉害的医生，如何成为一个很厉害的作家等等。如何成为一个很厉害的工程师，我想是我的毕生追求，至少目前是。榜样的力量一个很好的方式，就是以业界成功或者知名的人来作为目标。从阿里来说，就有很多很厉害的人物，比如多隆，“他从阿里的...
2020-01-13 12:00:24
2968
2
原创 让机器读懂视频：亿级淘宝视频背后的多模态AI算法揭秘
背景随着4G的普及和5G的推出，内容消费的诉求越来越受到人们的重视。2019年互联网趋势报告指出在移动互联网行业整体增速放缓的大背景下，短视频行业异军突起，成为“行业黑洞”抢夺用户时间，尽管移动互联网人口红利见顶，新的增长点难以寻觅，但中国短视频人均使用时长及头部短视频平台日均活跃用户均持续增常(如图1所示)。图一在淘宝，短视频业务一直以来都是非常重要的业务，是淘宝app从单一...
2020-01-13 11:29:56
3685
2
原创 阿里巴巴大规模应用Flink的踩坑经验：如何大幅降低 HDFS 压力？
众所周知 Flink 是当前广泛使用的计算引擎，Flink 使用 checkpoint 机制进行容错处理[1]，Flink 的 checkpoint 会将状态快照备份到分布式存储系统，供后续恢复使用。在 Alibaba 内部我们使用的存储主要是 HDFS，当同一个集群的 Job 到达一定数量后，会对 HDFS 造成非常大的压力，本文将介绍一种大幅度降低 HDFS 压力的方法 -- 小文件合并。...
2020-01-13 11:00:28
2399
原创 如何打造“智能助理”？阿里对话开发平台这样做
阿里妹导读：一个合格的智能助理能够帮你预约开会时间，处理日常办公需求，还能打电话提醒你要还信用卡了，作为用户或者消费者，我们已经越来越习惯对话机器人提供的各色服务。但对于企业来讲，搭建提供这些服务的对话机器人是一件门槛及成本都很高的事情。阿里巴巴达摩院小蜜Conversational AI团队的高级算法专家李永彬（水德）为我们带来了分享——小蜜智能对话开发平台，围绕平台来源、设计理念、...
2020-01-13 10:30:30
2704
原创 Serverless Kubernetes 入门：对 Kubernetes 做减法
导读：Serverless Kubernetes 是阿里云容器服务团队对未来 Kubernetes 演进方向的一种探索，通过对 Kubernetes 做减法，降低运维管理负担，简化集群管理，让 Kubernetes 从复杂到简单。背景Kubernetes 作为通用的容器编排系统，承载了广泛的应用和场景，包括 CI／CD，数据计算，在线应用，AI 等，然而由于其通用性和复杂性，管理一个 ...
2020-01-10 17:20:03
2658
原创 智能用户增长神器QuickAudience开启公共云公测，助力企业业务增长
摘要：日前，由阿里数据打造的智能用户增长QuickAudience，重磅上线阿里云-公共云，开启公测！该产品旨在围绕着品牌消费资产，通过丰富的用户洞察模型和便捷的策略配置，完成消费者多维洞察分析和多渠道触达，助力企业实现用户增长。智能用户增长神器Quick Audience开启公共云公测阿里云数据中台产品矩阵日前又添新成员，智能用户增长Quick Audience（以下简称Quick Aud...
2020-01-10 15:27:37
3260
原创 首次曝光 | 阿里数万名开发者都在使用的数据库开发工具到底长什么样？
除了基础的数据查询开发功能，DMS还内置SQL审核、性能诊断优化、测试数据自动生成、多环境数据对比同步、数据库日志追踪回滚、不锁表变更、访问控制、敏感数据脱敏、安全审计等高端功能。1、丰富的数据源????丰富的数据库类型支持（当前已超过25种，还在不断扩展中）MySQL、SQL Server、PostgreSQL、POLARDB等关系型数据库 DRDS等OLTP数据库 AnalyticD...
2020-01-10 14:10:31
5109
1
原创 跟我学-域名解析故障排查技巧
天苍苍，野茫茫，网站一瘫，唯有泪两行！！客户跳，老板叫，解析故障，心惊又肉跳！！对企业网站来说，很怕出现网站打不开的情况，一旦发生，准会发现公司技术部呈现一片哀嚎景象。为了让运维的难兄难弟们做个精致的小白领，小编特别为你们总结了一套《域名解析故障排查技巧实操全网最全手册》，并分为“初阶版”“进阶版”，跟我学完保您在排查解析故障方面，脑回路神清晰，分分钟就能定位问题。为了助您减少客户不可用...
2020-01-10 13:35:36
3503
原创 秒级启动万个容器，探秘阿里云容器镜像加速黑科技
阿里云容器与存储团队展开合作，利用DADI加速器支持镜像按需读取和P2P分发，实现3.01秒启动10000个容器，完美杜绝容器冷启动的数分钟漫长等待，以及镜像仓库大规模并行分发场景下的网络拥堵。年关将至，各种年货节、秒杀商品、倒计时直播即将纷至沓来。这些业务的共同点都是流量瞬间暴增，必须在立刻筹备大量的服务器，并在极短时间内扩容容器承接线上流量，避免系统崩溃。除了需要集群节点的快速扩容，也对应...
2020-01-09 12:59:48
2813
原创 自建Hive数据仓库跨版本迁移到阿里云E-MapReduce
最佳实践概述应用场景客户在IDC或者公有云环境自建Hadoop集群，数据集中保存在HDFS文件系统，同时借助Hive进行常见的ETL任务。客户在决策上云之后，会将自建Hadoop集群的数据迁移到阿里云自建Hadoop或者EMR。技术架构本实践方案基于如下图所示的技术架构和主要流程编写操作步骤。方案优势易用性 您可以简单选择所需ECS机型（CPU、内存）与磁盘，并选...
2020-01-09 12:37:01
2394
原创 2019年全球最受欢迎数据库新鲜出炉，你猜中了吗？
全球知名的数据库流行度排行榜网站DB-Engines 宣布，在过去的一年里，MySQL在 DB-Engines排名中比其他350个受监测数据库管理系统的任何一个更受欢迎。因此，MySQL为2019年的年度DBMS。DB-Engines 2019：MySQL 获得“年度数据库”称号计算结果基于当前最新的分数(2020年1月)和2019年1月的分数差值获得。最终的结果代表了一个产...
2020-01-09 11:48:42
4742
原创 从零开始入门 K8s | 调度器的调度流程和算法介绍
导读：Kubernetes 作为当下最流行的容器自动化运维平台，以声明式实现了灵活的容器编排，本文以 v1.16 版本为基础详细介绍了 K8s 的基本调度框架、流程，以及主要的过滤器、Score 算法实现等，并介绍了两种方式用于实现自定义调度能力。调度流程调度流程概览Kubernetes 作为当下最主流的容器自动化运维平台，作为 K8s 的容器编排的核心组件 kube-schedu...
2020-01-09 10:52:32
2694
原创 Serverless 解惑——函数计算如何访问 MySQL 数据库
函数计算（Function Compute）：函数计算是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码。函数计算为您准备好计算资源，弹性地可靠地运行任务，并提供日志查询、性能监控和报警等功能。借助函数计算，您可以快速构建任何类型的应用和服务，并且只需为任务实际消耗的资源付费。访问 MySQL 数据库是指在函数计算中通过编写代码调用数据库驱动库通过 ...
2020-01-08 13:21:13
3170
原创 端计算Walle：2235亿次运算，为了无法计算的端智能价值
本文知识点提炼：1、端计算在移动设备上的应用探索2、技术方案与核心模块设计3、总结与展望背景传统的云计算，使用的是端侧采集数据，云端处理消费，再反馈给端侧的模式。而伴随着数字化转型的浪潮、万物互联时代的到来，5G、大数据、人工智能等信息技术的快速发展，云计算已经无法特定场景对低延迟的高要求。此时基于路由器、交换机、基站等计算节点的边缘计算因运而生，其具有低延时、低成本、数据安全...
2020-01-08 12:48:04
2908
原创 机器学习在高德用户反馈信息处理中的实践
1.背景作为国内领先的出行大数据公司，高德地图拥有众多的用户和合作厂商，这为高德带来了海量的出行数据，同时通过各个渠道，这些用户也在主动地为我们提供大量的反馈信息，这些信息是需要我们深入挖掘并作用于产品的，是高德地图不断进步和持续提升服务质量的重要手段。本文将主要介绍针对用户反馈的文本情报，如何利用机器学习的方法来提高大量用户数据的处理效率、尽可能实现自动化的解题思路。先来解释一下重点...
2020-01-08 12:04:59
2204
原创 基于Flutter+FaaS的业务框架思考与实践
闲鱼将使用Flutter和FaaS来建设未来的技术开发体系，这是一项长期的规划，新的技术在现在看来犹如雾里看花，需要我们不断的思考，探索，实践才能渐渐描绘出它的轮廓。本文对此提供一种思考角度，对未来基于FaaS+Flutter之上的编程形态做思考，并介绍自己的初步实践。Flutter, FaaS, 与闲鱼的一体化闲鱼长期在做技术一体化的探索与实践：我们希望使用一门语言，一套技术栈，能让开发...
2020-01-08 11:32:55
2060
原创 阿里云正式推出内容平台“云栖号”：全面助力企业和个人上云决策
1月7日，阿里云官网正式推出“云栖号”（https://yqh.aliyun.com/），旨在为大家提供第一手的上云资讯，云产品快速入门，来自不同行业精选的企业上云案例，基于众多成功案例萃取而成的最佳实践，助力你进行上云决策，0门槛更轻松的上云。目前，云栖号分为6大版块，分别为热点上云资讯、快速入门、热门案例及最佳实践、热门活动，直播。下面带大家详细了解一下这6大版块内容。一、热点资讯：...
2020-01-08 10:58:35
2849
原创 阿里产品专家：高情商的技术人，如何做沟通？
不愿沟通是固执，不会沟通是傻瓜，不敢沟通是奴隶。 ——德拉蒙德工作中，你是否经常看到别人在会上谈笑风生、纵横捭阖，但自己却唯唯诺诺，不敢表达观点？即便鼓起勇气发言却不被重视，经常被人打断？生活中，你提出个很好的家庭规划，却没人支持你？规劝自己的亲友却被误会，最后以吵架收场？当你的朋友指出你的问题可能在“沟通”能力上时，你却轻蔑一笑：“沟通这么简单事情，我会不懂？”要知道许多大师花了...
2020-01-08 10:28:30
2414
原创 一小时快速搭建基于阿里云容器服务-Kubernetes的Web应用
本文面向的读者如果您是一个Kubernetes的初学者，本文可以帮助你快速在云上搭建一个可实际使用的集群环境，并发布自己的第一个应用。你无须提前准备任何的硬件资源或者下载任何的软件包。如果您已经有一个自建的Kubernetes集群，想要尝试阿里云上的托管集群，本文可以帮助你快速完成上手操作，而无需详细阅读阿里云的帮助文档，从而节省您的时间。您可以在有了端到端的初体验之后，再有选择的阅读容器...
2020-01-07 13:44:15
2313
原创 稳定性专题 | Spring Boot 常见错误及解决方法
导读『StabilityGuide』是阿里多位阿里技术工程师共同发起的稳定性领域的知识库开源项目，涵盖性能压测、故障演练、JVM、应用容器、服务框架、流量调度、监控、诊断等多个技术领域，以更结构化的方式来打造稳定性领域的知识库。Spring Boot 作为 Java 生态中最流行的开发框架，意味着被数以万计的开发者所使用。下面根据我们自身遇到的问题，加上用户提供的一些反馈，来大致梳理下 S...
2020-01-07 13:18:20
3159
原创 eBay邓明：dubbo-go 中 metrics 的设计
最近因为要在 Apache/dubbo-go（以下简称 dubbo-go ）里面实现类似的这个 metrics 功能，于是花了很多时间去了解现在 Dubbo 里面的 metrics 是怎么实现的。该部分，实际上是被放在一个独立的项目里面，即metrics。总体上来说，Dubbo 的 metrics 是一个从设计到实现都非常优秀的模块，理论上来说，大部分的 Java 项目是可以直接使用 me...
2020-01-07 12:52:29
1942
原创 阿里巴巴向全社会开放黑科技：“泡在水里”的服务器
为了让数据中心更绿色，阿里工程曾将服务器“泡在水里”进行散热，节能超70%，今天这项黑科技的神秘面纱被揭开。2020年1月6日，阿里巴巴宣布将“浸没式液冷数据中心技术规范”向全社会开放。这项规范旨在用一套标准流程为下一代绿色基地型数据中心的建设提供设计依据，通过液冷技术的普及，降低全社会的能耗水平。初步估算，如果全国的数据中心都采用液冷技术，一年可节省上千亿度电。2009年到2019年...
2020-01-07 12:34:01
2378
原创 不用 H5，闲鱼 Flutter 如何玩转小游戏？
阿里妹导读：最近APP游戏化成为了一个新的风口，把在游戏中一些好玩的、能吸引用户的娱乐方式或场景应用在应用当中，以达到增加用户粘性，提升DAU的效果，成本较低。同时在一些需要对用户有引导性的场景，游戏化还可以使用户更易于接受并完成引导性任务，并通过激励的形式鼓励用户持续沉浸在任务当中，形成良性循环。基于这个思路，闲鱼开发了互动引擎Candy。什么是Candy引擎？Candy 是闲鱼...
2020-01-07 12:21:20
2143
原创 MongoDB 4.2 内核解析 - Change Stream
MongoDB 从3.6版本开始支持了 Change Stream 能力（4.0、4.2 版本在能力上做了很多增强），用于订阅 MongoDB 内部的修改操作，change stream 可用于 MongoDB 之间的增量数据迁移、同步，也可以将 MongoDB 的增量订阅应用到其他的关联系统；比如电商场景里，MongoDB 里存储新的订单信息，业务需要根据新增的订单信息去通知库存管理系统发货。...
2020-01-06 13:34:48
2603
原创 阿里云杜欢：云上Serverless开发能力将成为前端的“金手指”
云 + 端模式成为当前前端开发的新风向，由此而来的 Serverless 正帮助前端工程师提升开发能力和效率。InfoQ 记者在近日有幸在 2019ArchSummit 全球架构师峰会北京站采访到了阿里高级前端技术专家杜欢（风驰），他为我们详细梳理了阿里这两年在前端工程化的过程中，使用云 + 端的 Serverless 来探索前端演进过程的经验和体会。InfoQ：杜老师，您好！请您介绍一下...
2020-01-06 12:42:56
2281
原创 何为真正的 FaaS ？阿里舜天平台做了四大创新
导读：数据中心和云计算的超高增速，AI、视频、基因测序等应用对于算力的无尽渴求和摩尔定律发展事实上已经停滞的现实，均给异构加速带来了巨大的应用潜力和商机。但 Faas 解决方案仍有较高的门槛，今天，我们一起了解 Faas 的难度在哪里？以及在阿里，我们如何做到真正的 Faas？一、 前言近几年，DC 和云计算领域风起云涌，发展地如火如荼。中外厂家纷纷发布 “DC First”、“All i...
2020-01-06 12:20:42
2270
1
原创 混合云存储阵列与云存储网关的协同解决方案
前言混合云存储阵列（CSA）于2017年云栖大会发布，上市2年多，已经被基因测序，医疗PACS，影视制作，非编，广电，视频监控等行业和场景的客户广泛采用。混合云存储阵列承载了用户的业务负载的同时，以缓存模式（90%的用户场景）将用户的数据上传到公共云OSS中。云存储网关（CSG）于2019年6月商业化后，在线上和线下（95%是线上客户），也被众多基因测序，传媒影视制作和互联网客户所采用。...
2020-01-06 11:57:04
2547
原创 为什么 APP 纷纷开发“暗黑模式”？优酷最佳实践总结
一、缘起随着iOS 13和Android 10的正式发布，一个名词"暗黑模式(Dark Mode)"逐渐走入了大家的视野。各大APP都将暗黑模式的适配列入了开发日程，舆情上用户们对暗黑模式支持的呼声也非常的高。优酷主客也顺应时势，启动了相应的技术预研。从2019年11月开始，优酷主客Android端和iOS端使用了两个版本的时间，推动各业务方基本完成了主要使用路径上数十个页面的改造...
2020-01-06 11:27:05
3281
原创 轻松搭建基于 SpringBoot + Vue 的 Web 商城应用
首先介绍下在本文出现的几个比较重要的概念：函数计算（Function Compute）: 函数计算是一个事件驱动的服务，通过函数计算，用户无需管理服务器等运行情况，只需编写代码并上传。函数计算准备计算资源，并以弹性伸缩的方式运行用户代码，而用户只需根据实际代码运行所消耗的资源进行付费。Fun: Fun 是一个用于支持 Serverless 应用部署的工具，能帮助您便捷地管理函数计算、API ...
2020-01-03 12:40:08
72166
13
原创 美团点评基于 Flink 的实时数仓平台实践
一、美团点评实时计算演进美团点评实时计算演进历程在 2016 年，美团点评就已经基于 Storm 实时计算引擎实现了初步的平台化。2017 年初，我们引入了 Spark Streaming 用于特定场景的支持，主要是在数据同步场景方面的尝试。在 2017 年底，美团点评实时计算平台引入了 Flink。相比于 Storm 和 Spark Streaming，Flink 在很多方面都具有优势。...
2020-01-03 11:59:58
3438
原创 瓜子二手车在 Dubbo 版本升级、多机房方案方面的思考和实践
前言随着瓜子业务的不断发展，系统规模在逐渐扩大，目前在瓜子的私有云上已经运行着数百个 Dubbo 应用，上千个 Dubbo 实例。瓜子各部门业务迅速发展，版本没有来得及统一，各个部门都有自己的用法。随着第二机房的建设，Dubbo 版本统一的需求变得越发迫切。几个月前，公司发生了一次与 Dubbo 相关的生产事故，成为了公司 基于社区 Dubbo 2.7.3 版本升级的诱因。接下来，我会从这...
2020-01-03 11:32:06
2210
原创 小蜜团队万字长文 | 讲透对话管理模型最新研究进展
对话管理模型背景从人工智能研究的初期开始，人们就致力于开发高度智能化的人机对话系统。艾伦·图灵（Alan Turing）在1950年提出图灵测试[1]，认为如果人类无法区分和他对话交谈的是机器还是人类，那么就可以说机器通过了图灵测试，拥有高度的智能。第一代对话系统主要是基于规则的对话系统，例如1966年MIT开发的ELIZA系统[2]是一个利用模版匹配方法的心理医疗聊天机器人，再如1970年代...
2020-01-03 11:07:53
2991
原创 Knative 驾驭篇：带你 '纵横驰骋' Knative 自动扩缩容实现
Knative 中提供了自动扩缩容灵活的实现机制，本文从三横两纵的维度带你深入了解 KPA 自动扩缩容的实现机制。让你轻松驾驭 Knative 自动扩缩容。注：本文基于最新 Knative v0.11.0 版本代码解读KPA 实现流程图在 Knative 中，创建一个 Revision 会相应的创建 PodAutoScaler 资源。在KPA中通过操作 PodAutoScaler...
2020-01-03 10:32:22
2216
原创 上去很美的 Serverless 在中国落地的怎么样了？
说起当前最火的技术，不得不提的一个概念就是 Serverless。2019 年几乎所有人都在说 Serverless，实际落地 Serverless 的有多少？Serverless 作为一种新型的互联网架构，直接或间接推动了云计算的发展，从 AWS Lambda 到阿里云函数计算，Serverless 一路高歌，同时基于 Serverless 的轻量计算开始登录云计算的舞台。传统的 IT 架构...
2020-01-02 13:13:17
2585
原创 日志服务（SLS）集成 Spark 流计算实战
前言日志服务作为一站式的日志的采集与分析平台，提供了各种用户场景的日志采集能力，通过日志服务提供的各种与·与SDK，采集客户端（Logtail），Producer，用户可以非常容易的把各种数据源中的数据采集到日志服务的Logstore中。同时为了便于用户对日志进行处理，提供了各种支持流式消费的SDK，如各种语言的消费组，与 Spark，Flink，Storm 等各种流计算技术无缝对接的Conn...
2020-01-02 11:58:20
2439
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人