• 博客(82)
  • 收藏
  • 关注

原创 网易云音乐音视频算法的 Serverless 探索之路

简介:基于音视频算法服务化的经验,网易云音乐曲库团队与音视频算法团队一起协作,一起共建了网易云音乐音视频算法处理平台,为整个云音乐提供统一的音视频算法处理平台。本文将分享我们如何通过 Serverless 技术去优化我们整个音视频处理平台。作者 | 廖祥俐网易云音乐最初的音视频技术大多都应用在曲库的数据处理上,基于音视频算法服务化的经验,云音乐曲库团队与音视频算法团队一起协作,一起共建了网易云音乐音视频算法处理平台,为整个云音乐提供统一的音视频算法处理平台。本文将分享我们如何通过 Serverle.

2021-10-31 14:05:43 843

原创 【ESSD技术解读-04】ESSD Auto PL规格,引领IO性能弹性新方向

简介:阿里云 ESSD 为云服务器 ECS 提供低时延、持久性和高可靠的块存储服务,成为云厂商全闪块存储的业界标杆。存储团队推出了 ESSD Auto PL 新的云盘规格,把性能与容量解耦,提供 IO 性能按需供给两大关键特性。AutoPL 具备的灵活性和弹性能力降低了 IT 规模规划难度和因规划不当带来的风险,本文详细介绍了Auto PL 新产品特性、揭秘背后的技术原理。前言作为 IaaS 最重要的核心组件之一,阿里云 ESSD 为云服务器 ECS 提供低时延、持久性和高可靠的块存储服务,成为云.

2021-10-31 12:22:11 885

原创 【ESSD技术解读-03】阿里云块存储企业级特性之异步复制

简介:在大数据时代,数据就是企业的核心资产,是企业的生命线。在现实世界中,灾难时有发生,当发生灾难时,容灾能力成为企业能否生存的关键。云上容灾服务,通常称为 DRaaS(灾难恢复即服务)不但能够省去自建容灾中心的开销,还能节省后续运维成本,帮助客户快速建立起跨地域的容灾方案,即买即用,随时释放的特性也为用户提供了极大的弹性。本文介绍了云上容灾产品形态,企业可结合自身特点选择合适的容灾方案,针对异步复制产品解析了传统容灾与云上容灾的技术架构。阿里云块存储也结合自身架构特点实现了块存储的异步复制产品。前言.

2021-10-31 11:24:22 861

原创 【ESSD技术解读-02】企业级利器,阿里云 NVMe 盘和共享存储

简介:当前 NVMe 云盘结合了业界最先进的软硬件技术,在云存储市场,首创性同时实现了 NVMe 协议 + 共享访问 + IO Fencing 技术。它在 ESSD 之上获得了高可靠、高可用、高性能,同时基于 NVMe 协议实现了丰富的企业特性,如多重挂载、IO Fencing、加密、离线扩容、原生快照、异步复制等功能。本文详细介绍了云上SAN和NVMe的发展历程,并做出了对未来的构想7x24 高可用是怎样炼成的?现实世界中单点故障是常态,确保故障下业务连续性是高可用系统的核心能力,那么在金融、保.

2021-10-31 10:18:58 1128

原创 【ESSD技术解读-01】 云原生时代,阿里云 ESSD 快照服务 助力企业级数据保护

简介:本文以云原生为时代背景,介绍了阿里云块存储快照服务如何基于高性能 ESSD 云盘提升快照服务性能,提供轻量、实时的用户体验及揭秘背后的技术原理。依据行业发展及云上数据保护场景,为企业用户及备份厂商提供基于快照高级特性的数据保护的技术方案,满足云上用户数据保护的迫切需求,保障云上企业业务连续性。2021年7月份,国际知名咨询公司 Gartner 发布了公有云的 IaaS(基础设施即服务)和 PaaS(平台即服务)平台的“魔力象限(Magic Quadrant)”,阿里云凭借其领先的技术能力首次成为“

2021-10-31 09:39:52 891

原创 实践分享丨企业上云后资源容量如何规划和实施

简介:企业上云后,云上的预算直接影响上云的优先级、进度、深度。预算投入的多少,与业务发展和资源需求的容量评估紧密相关。精准的容量评估,可以使企业上云的预算规划更科学,同时也更贴合业务发展阶段的需要。本文分享业务上云后企业该如何进行容量的规划和实施。本文作者:阿里云技术专家李雨前摘要随着企业数字化转型、企业IT服务云原生化快速发展,客户上云的步伐更加紧凑,随之而来云上的预算直接影响上云的优先级、上云的进度、上云的深度。预算投入的多少,与业务发展有关,另外一个关键因素就是资源需求的容量评估。.

2021-10-29 13:55:47 994

原创 阿里云日志服务SLS,打造云原生时代智能运维

2021年10月21日,阿里云针对企业运维难题,在云栖大会为大家带来了一场《智能运维论坛》的主题演讲。在会上,阿里云资深技术专家、日志服务技术负责人简志提出“云原生时代,企业业务数字化是对工程师们严峻的挑战。作为运维工程师,我们应该充分利用AIOps的技术与能力,将数据中心升级为企业的创新中心”。云原生时代,传统运维力不从心在云原生时代,数据呈爆炸式增长,企业业务也逐渐向数字化进行转型。由于传统运维工作方式的受限,工程师们常常会面对数据孤岛、运营工具碎片化、告警事件过载、缺乏预警手段等问题。尤其

2021-10-29 13:41:38 2003

原创 云上虚拟IDC(私有池)如何为客户业务的确定性、连续性保驾护航

简介:企业业务上云后,还面临特定可用区购买云上特定计算产品实例失败的困境?云上私有池pick一下Why 云上业务为什么需要资源确定性、服务连续性云计算正朝着像水电煤一样的基础设施演进,支持用户按需使用、按量付费。目前,国内外各云服务商联合生态伙伴,努力提升云产品服务的快速迭代、推广使用,然而现实很骨感:用户依然面临偶发的在特定可用区购买云上特定计算产品实例失败的困境。云服务的计算理念--随时随地弹性,怎么这个场景下就不Work了?我们来分析分析。目前,客户云上业务整个生命周期过程,需要感知算力.

2021-10-29 12:25:42 1038

原创 “预习-上课-复习”:达摩院类人学习新范式探索

简介:预习时关注重点,上课时由易到难,复习时举一反三,能否让机器也按照“预习-上课-复习”的学习范式进行学习呢? 达摩院对话智能(Conversational AI)团队对这个问题进行了研究探索,先将其用在了人机对话领域,在国际知名多轮对话数据集MultiWoz上取得了最好结果。作者 | 言枫来源 | 阿里技术公众号预习时关注重点,上课时由易到难,复习时举一反三,能否让机器也按照“预习-上课-复习”的学习范式进行学习呢?达摩院对话智能(Conversational AI)团队对这个问题进.

2021-10-29 11:34:06 802

原创 分布式系统一致性测试框架Jepsen在女娲的实践应用

简介:女娲团队在过去大半年时间里持续投入女娲2.0研发,将一致性引擎和业务状态机解耦,一致性引擎可支持Paxos、Raft、EPaxos等多种一致性协议,根据业务需求支撑不同的业务状态机。其中的一致性引擎模块是关键,研发一致性引擎时,保证一致性引擎的正确性是一大挑战,所以我们用了TLA+、Jepsen等工具保证一致性引擎的正确性。这里分享一些Jepsen应用方面的体会。作者 | 僧泉来源 | 阿里技术公众号女娲团队在过去大半年时间里持续投入女娲2.0研发,将一致性引擎和业务状态机解耦,一致性.

2021-10-29 10:10:34 934

原创 技术解读|云上企业级存储——打开存储新维度,促进用户核心业务创新

简介:将企业级存储和云的特点进行完美的融合是云上企业级存储的目标,它打开存储更多新的维度,在保障用户业务永续的同时,帮助用户更好的进行业务创新。本文属ESSD技术解读的总篇,总体介绍ESSD 云盘创新融合了云和企业级存储的特性,以服务为中心,为用户提供了更便捷、更智能的存储服务体验。前言提到企业级存储,大家印象最深的是“高稳定”、“高性能”、“丰富的企业级特性”等关键词;而说到云计算,大家会想到“大规模”、“全球部署”、“弹性”、“服务化”、“智能化”、“即时开通"、“按量付费”这些鲜明特征。如果.

2021-10-28 13:55:34 896

原创 打破 Serverless 落地边界,阿里云 SAE 发布 5 大新特性

简介:SAE 的 5 大新特性、4 大最佳实践,打破了 Serverless 落地的边界,让 All on Serverless 成为可能.微服务场景,开源自建真的最快最省最稳的?复杂性真的会成为 Kubernetes 的“致命伤”吗?企业应用容器化,一定得过 K8s 这座“独木桥”吗?Serverless 应用场景单一,多用在逻辑简单的非核心场景:小程序、ETL、定时备份等。Java 微服务真的遥遥无期了?2021 云栖大会现场,阿里巴巴研究员、阿里云智能云原生应用平台总经理丁宇(叔同)重磅发布.

2021-10-28 11:38:09 875

原创 Cloudera Manager 术语和架构

简介:本文介绍了Cloudera Manager 的常见术语和架构Cloudera Manager 术语为了有效地使用Cloudera Manager,您应该首先了解其术语。术语之间的关系如下所示,其定义如下:有时,术语服务和角色用于同时指代类型和实例,这可能会造成混淆。Cloudera Manager 和本节有时对类型和实例使用相同的术语。例如,Cloudera Manager 管理控制台的“主页” >“状态”选项卡和“集群” >“ ClusterName” 菜单列出了服.

2021-10-28 10:56:55 814

原创 OpenYurt 深度解读|开启边缘设备的云原生管理能力

简介:北京时间 9 月 27 号,OpenYurt 发布 v0.5.0 版本。新发布版本中首次提出 kubernetes-native非侵入、可扩展的边缘设备管理标准,使 Kubernetes 业务负载模型和 IOT 设备管理模型无缝融合。作者|贾燚星(VMware), 何淋波(阿里云)北京时间 9 月 27 号,OpenYurt 发布 v0.5.0 版本。新发布版本中首次提出 kubernetes-native非侵入、可扩展的边缘设备管理标准,使 Kubernetes 业务负载模型和 IOT 设.

2021-10-28 10:26:53 807

原创 400倍加速, PolarDB HTAP实时数据分析技术解密

简介:PolarDB MySQL是因云而生的一个数据库系统, 除了云上OLTP场景,大量客户也对PolarDB提出了实时数据分析的性能需求。对此PolarDB技术团队提出了In-Memory Column Index(IMCI)的技术方案,在复杂分析查询场景获得的数百倍的加速效果。本文阐述了IMCI背后技术路线的思考和具体方案的取舍。作者 | 北楼来源 | 阿里技术公众号前言最近分析型数据库在资本市场和技术社区都非常的火热,各种创业公司的创新型产品如雨后春笋般出现。这一方面是因为当前阶段.

2021-10-28 09:45:42 2043

原创 CDP 平台简介

简介:EDC 建立在 Cloudera Data Platform(CDP) 之上,该产品结合了 Cloudera Enterprise Data Hub 和 Hortonworks Data Platform Enterprise 的优点,并在技术堆栈中增加了新功能和对已有技术提供了增强功能。这种统一的发行是一个可扩展且可自定义的平台,您可以在其中安全地运行多种类型的工作负载。企业数据云概述企业对大数据解决方案的要求:只要有必要,就可以在一个地方以原始的保真度来获取和合并任何数量或类型的数据,并.

2021-10-27 14:02:20 1466

原创 基于Delta lake、Hudi格式的湖仓一体方案

简介:Delta Lake 和 Hudi 是流行的开放格式的存储层,为数据湖同时提供流式和批处理的操作,这允许我们在数据湖上直接运行 BI 等应用,让数据分析师可以即时查询新的实时数据,从而对您的业务产生即时的洞察。MaxCompute 在湖仓一体架构中,通过支持 Delta Lake 和 Hudi 在数据湖中提供数据仓库性能。本文作者 孟硕 阿里云智能 产品专家直播视频请点击 直播观看一、最佳实践背景整个最佳实践是基于MaxCompute的湖仓一体架构,模拟公司使用场景。比如公司 A 使.

2021-10-27 13:53:09 1064

原创 先行一步,7大技术创新和突破,阿里云把 Serverless 领域的这些难题都给解了

简介:函数计算 FC 首创 GPU 实例、业内首发实例级别可观测和调试、率先提供端云联调和多环境部署能力、GB 级别镜像启动时间优化至秒级、VPC 网络建连优化至200ms,Serverless 应用引擎 SAE 支持微服务框架无缝迁移、无需容器化改造、业内首创混合弹性策略,这些创新和突破,将 Serverless 领域的技术难题给解了,彻底跨越了影响 Serverless 进一步落地企业核心生产场景的绊脚石。“即使云计算已经兴起,但是大家的工作仍然是围绕服务器,不过,这个不会持续太久,云应用正在朝着.

2021-10-27 11:28:16 823

原创 一图看懂云栖大会「云原生」发布

简介:在云原生带来的云计算未来趋势下,容器已经成为用户使用云的新界面。阿里云容器产品发布近 7 年以来,已成长发展为企业的云原生操作系统,技术和服务能力日趋成熟,但创新从未止步。日前,阿里云研究员 & 云原生团队负责人丁宇在阿里云计算峰会上宣布容器服务 ACK 全面升级 ACK Anywhere,这一重要升级意味着 ACK 有能力在企业任何需要云的地方,提供统一的容器基础设施能力。2021 年 10 月 21 日,在云栖大会·云原生峰会现场,阿里云资深技术专家、容器服务负责人易立深度分享了.

2021-10-27 10:38:18 874

原创 云栖发布|企业级互联网架构全新升级 ,助力数字创新

简介:云原生产品家族全面升级,让业务技术团队有了更多选择,通过简单、丰富、开放和低成本的 PaaS 服务,帮助企业客户更简单、更高效的进行在云上创新,搭建更符合业务需要和团队情况的技术体系。作者|白玙在 2021 杭州·云栖大会现场,阿里云智能云原生应用平台产品负责人李国强以《企业互联网架构转型之道 - 阿里云中间件升级发布》为主题,全面解读阿里云云原生产品创新实践。过去一年中,为应对愈发激烈的行业竞争,重构应用架构已成为大势所趋,据权威机构数据显示,80% 以上的用户已使用或计划使用微服务,超过.

2021-10-26 16:49:58 841

原创 阿里云重磅发布业务中台产品 BizWorks,中台发展进入下一个阶段

简介:业务中台产品BizWorks重磅发布,这可以看作是阿里云在 “做厚中台” 战略上继 “云钉一体”之后的又一个新动作!10 月 19 日,2021 云栖大会正式开幕,连续举办多年的云栖大会俨然已经成为了国内科技产业展示前沿科技成果,行业精英交流前沿科技想法的饕餮盛会。今年的大会以“前沿·探索·想象力”为主题,包含了 100+ 场前沿科技论坛,450+ 国内外顶尖科研机构与数智产业厂商积聚,在 40000 平米“云栖数字谷”,各个领域的专家共创数字时代新思想,大家从不同角度,从各种科技实践来阐述各自.

2021-10-26 16:37:54 2947

原创 形式化验证工具TLA+:程序员视角的入门之道

简介:女娲是飞天分布式系统中提供分布式协同的基础服务,支撑着阿里云的计算、网络、存储等几乎所有云产品。在女娲分布式协同服务中,一致性引擎是核心基础模块,支持了Paxos,Raft,EPaxos等多种一致性协议,根据业务需求支撑不同业务状态机。如何保证一致性库的正确性是一个很大挑战,我们引入了TLA+、Jepsen等工具保证一致性库的正确性。本文即从程序员视角介绍形式化验证工具TLA+。作者 | 祥光来源 | 阿里技术公众号一 引言女娲是飞天分布式系统中提供分布式协同的基础服务,支撑着阿里.

2021-10-26 12:30:00 1258

原创 基层数字化治理困境如何破局?

简介:10月20日,2021云栖大会低代码分论坛如约举行。在这场低代码行业的盛会上,兰溪市大数据发展中心党组书记、主任芦建洪分享的内容获得了在场观众的热烈反响,兰溪市使用钉钉宜搭低代码破解基层数字化治理困境的成功经验也为全国树立了典范。芦建洪在发言中表示,浙江省在2021年年初提出:数字化改革的目标是打造全球数字化高地,打造“重要窗口”重大标志性成果。浙江之所以提出一个很高的标准和目标,“是因为浙江省在数字时代已经领跑全国,从2017年的“最多跑一次”到2018年开始的“政府数字化转型”,再到20.

2021-10-26 10:32:23 847

原创 钉钉宜搭3.0发布!易连接、酷数据、更安全

简介:10月20日,在2021云栖大会低代码分论坛上,阿里巴巴资深技术专家叶周全(花名骁勇)发布钉钉宜搭3.0版本。10月20日,在2021云栖大会低代码分论坛上,阿里巴巴资深技术专家叶周全(花名骁勇)发布钉钉宜搭3.0版本,重磅发布3大连接能力套件,让业务互联互通;发布更低门槛的数据BI能力,一键生成酷炫数字大屏;发布全局水印、独立域名等安全能力,为用户提供国密级专属安全。叶周全认为,低代码作为一种新生产力工具,正在不断激发个人的创新力,全面加速企业的数字化转型。这是宜搭在今年1月亮相钉钉6.0.

2021-10-26 09:45:06 1020

原创 技术干货 | 闲鱼:一个优秀的 Push 平台,需要经历怎样的前世今生

简介:mPaaS 消息推送服务,快速集成多家厂商 Push 通道,有效提高用户留存率,提升用户体验。编者荐语:点击这里,了解 mPaaS 消息推送服务,快速集成多家厂商 Push 通道,有效提高用户留存率,提升用户体验。以下文章来源于闲鱼技术,作者剑辛对闲鱼用户来说,因为闲鱼商品库存只有一件,商品的时效性很强,因此当用户关注的卖家上新、浏览的商品发生降价或者平台为用户找到一批高性价比商品时,用户期望尽快被通知。Push已经成为用户与闲鱼平台联系的重要纽带。本文将以技术同学视角,介绍闲..

2021-10-25 14:12:50 999

原创 聚焦2021云栖大会,边缘云专场畅谈技术应用创新

简介:本届大会以“前沿 探索 想象力”为主题,与业界同仁、合作伙伴共同打造一场数字时代的云上相聚。其中,边缘计算技术领域因5G快速发展而备受关注,阿里云边缘云专场吸引了数百位参会嘉宾驻足。于10月21日上午举办的“边缘云应用升级与技术创新论坛”中,阿里云携手华数传媒控股股份有限公司、深圳市瑞驰信息技术有限公司、中国信息通信研究院、英特尔等产业伙伴,分别从边缘云产品技术能力、客户应用及价值,探讨边缘云在不同场景下的应用实践和挑战。一、阿里云边缘云ENS产品全面升级阿里云资深技术专家杨敬宇重磅.

2021-10-25 13:49:07 978

原创 阿里云边缘云ENS再升级 四大场景应用加速产业数字化落地

简介:云栖大会 | 于10月21日上午举办的边缘云应用升级与技术创新论坛中,阿里云边缘云ENS产品全面升级,从边缘云产品、技术、行业应用等维度全面阐述阿里云在边缘计算领域的技术积累、产品&解决方案沉淀、商业实践。一年一度科技圈盛事——云栖大会如期开幕,本届大会以“前沿 探索 想象力”为主题,与业界同仁、合作伙伴共同打造一场数字时代的云上相聚。阿里云将云计算的能力从中心向边缘延伸,满足不同行业客户对低延时、高带宽、本地快速处理的业务需求。于10月21日上午举办的边缘云应用升级与技术创新论坛中,阿.

2021-10-25 11:30:00 1007

原创 ArrayList源码浅析

简介:`ArrayList`作为我们开发中最常用的集合,作为极高频次使用的类,我们不妨阅读源码一谈究竟。前言ArrayList作为我们开发中最常用的集合,作为极高频次使用的类,我们不妨阅读源码一谈究竟。介绍ArrayList继承关系如下AaaryList主要实现了List接口,同时标记为可以序列化Serializable、可复制CloneAble、支持随机访问RandomAccess。几个重要的成员变量 /** * 默认容量 */ pri.

2021-10-22 14:55:47 810

原创 阿里云混合云Apsara Stack 2.0发布 加速政企数智创新

简介:2021年10月21日,杭州 – 今日,阿里云于云栖大会正式发布Apsara Stack 2.0,从面向单一私有云场景,升级为服务大型集团云&行业云场景。新一代Apsara Stack不仅可以为政企定制稳定、安全、开放、智能的数字底座,实现智能管理和自动化运维,并可构建成为自主运营的“行业专有公共云”,更面向产业互联网时代提供了云边一体完整方案,做好政企数智创新的同行者。2021年10月21日,杭州 – 今日,阿里云于云栖大会正式发布Apsara Stack 2.0,从面向单一私有云场景.

2021-10-22 11:02:32 1092

原创 2021云栖大会丨阿里云发布第四代神龙架构,提供业界首个大规模弹性RDMA加速能力

简介:10月20日,2021年杭州栖大云会上,阿里云发布第四代神龙架构,升级至全新的eRMDA网络架构,是业界首个大规模弹性RDMA加速能力。10月20日,2021年杭州栖大云会上,阿里云发布第四代神龙架构。相比上一代,第四代神龙架构基础性能全面提升,存储IOPS提升300%、网络PPS提升100%、网络延迟降低80%,同时升级至全新的eRMDA网络架构,是业界首个大规模弹性RDMA加速能力,再次实现了性能的跃升。存储IOPS高达300万、网络PPS达到5000万、网络延时最低5微秒,阿里云第.

2021-10-22 10:17:21 1211

原创 Spring注解开发

简介:Spring注解开发1. Spring原始注解Spring是轻代码而重配置的框架,配置比较繁重,影响开发效率,所以注解开发是一种趋势,注解代替xml配置文件可以简化配置,提高开发效率。 Spring原始注解主要是替代<Bean>的配置注意:使用注解进行开发时,需要在applicationContext.xml中配置组件扫描,作用是指定哪个包及其子包下的Bean需要进行扫描以便识别使用注解配置的类、字段和方法。<!--注解的组件扫描--><con.

2021-10-21 14:34:57 828

原创 一文搞懂物联网Modbus通讯协议

简介:一般来说,常见的物联网通讯协议众多,如蓝牙、Zigbee、WiFi、ModBus、PROFINET、EtherCAT、蜂窝等。而在众多的物联网通讯协议中,Modbus是当前非常流行的一种通讯协议。它一种串行通信协议,是Modicon公司于1979年为使用可编程逻辑控制器(PLC)通信而制定的,可以说,它已经成为工业领域通信协议的业界标准。1 概述随着IT技术的快速发展,当前已经步入了智能化时代,其中的物联网技术将在未来占据越来越重要的地位。根据百度百科的定义,物联网(Internet of .

2021-10-21 13:50:44 2604

原创 GRPC: 如何实现分布式日志跟踪?

简介:本文将介绍如何在 gRPC 分布式场景中,实现 API 的日志跟踪。介绍本文将介绍如何在 gRPC 分布式场景中,实现 API 的日志追踪。什么是 API 日志追踪?一个 API 请求会跨多个微服务,我们希望通过一个唯一的 ID 检索到整个链路的日志。我们将会使用rk-boot来启动 gRPC 服务。请访问如下地址获取完整教程:https://rkdev.info/cn RK 文档(备用)安装go get github.com/rookie-ni...

2021-10-21 11:20:46 949

原创 GRPC: 如何优雅关闭进程(graceful shutdown)

简介:本文将介绍优雅关闭 gRPC 微服务。在进程收到关闭信号时,我们需要关闭后台运行的逻辑,比如,MySQL 连接等等。介绍本文将介绍优雅关闭 gRPC 微服务。什么是优雅关闭?在进程收到关闭信号时,我们需要关闭后台运行的逻辑,比如,MySQL 连接等等。我们将会使用rk-boot来启动 gRPC 服务。请访问如下地址获取完整教程:https://rkdev.info/cn RK 文档(备用)安装go get github.com/rookie-ninj...

2021-10-21 10:27:45 1697

原创 重大技术突破首次发布!十问解密云栖大会!

简介:2021年10月19日,杭州,云栖大会正式开幕。大会上,阿里巴巴正式发布自研云芯片倚天710,这是阿里云推进“一云多芯”策略的重要一步,也是阿里第一颗为云而生的CPU芯片,将在阿里云数据中心部署应用。来源 |阿里技术公众号2021年10月19日,杭州,云栖大会正式开幕。大会上,阿里巴巴正式发布自研云芯片倚天710,这是阿里云推进“一云多芯”策略的重要一步,也是阿里第一颗为云而生的CPU芯片,将在阿里云数据中心部署应用。会上,阿里云还推出了面向云原生时代的“磐久”自研服务器系列,..

2021-10-21 09:53:49 1361

原创 全网首发|阿里资深技术专家数仓调优经验分享(上)

简介:本篇文章总结了AnalyticDB表的设计的最佳经验、数据写入的最佳经验、高效查询的最佳实践,以及一些常见的问题。随着云原生数据仓库AnalyticDB for MySQL(下文统一简称:AnalyticDB)在阿里集团各个业务线、社会上各行各业的推广应用,我们沉淀了一些最佳实践,现在笔者整理在这里,供大家参考,希望对大家有帮助。本篇文章总结了AnalyticDB表的设计的最佳经验、数据写入的最佳经验、高效查询的最佳实践,以及一些常见的问题。说明:1.在读这篇文章之前,请先了解Analy.

2021-10-20 13:57:46 825

原创 MySQL深潜|剖析Performance Schema内存管理

简介:本文主要是通过对PFS引擎的内存管理源码的阅读,解读PFS内存分配及释放原理,深入剖析其中存在的一些问题,以及一些改进思路。一 引言MySQL Performance schema(PFS)是MySQL提供的强大的性能监控诊断工具,提供了一种能够在运行时检查server内部执行情况的特方法。PFS通过监视server内部已注册的事件来收集信息,一个事件理论上可以是server内部任何一个执行行为或资源占用,比如一个函数调用、一个系统调用wait、SQL查询中的解析或排序状态,或者是内存资源..

2021-10-20 11:06:31 912

原创 带你体验云原生场景下 Serverless 应用编程模型

简介:阿里云 Knative 基于 ASK 之上,在完全兼容社区 Knaitve 的同时对 FC、ECI 工作负载进行统一应用编排,支持事件驱动、自动弹性,为您提供统一的 Serverless 应用编程模型。背景阿里云 Serverless Kubernetes(ASK) 是阿里云推出的无服务器 Kubernetes 容器服务,底层基于 ECI(Elastic Container Instance)让您无需购买 ECS 节点就能直接创建安全隔离的容器应用。 ASK 通过了 Kubernetes 的.

2021-10-20 10:49:37 839

原创 ACMMM2021|在多模态训练中融入“知识+图谱”:方法及电商应用实践

简介:随着人工智能技术的不断发展,知识图谱作为人工智能领域的知识支柱,以其强大的知识表示和推理能力受到学术界和产业界的广泛关注。近年来,知识图谱在语义搜索、问答、知识管理等领域得到了广泛的应用。作者 | 朱渝珊来源 | 阿里技术公众号一 背景1 多模态知识图谱随着人工智能技术的不断发展,知识图谱作为人工智能领域的知识支柱,以其强大的知识表示和推理能力受到学术界和产业界的广泛关注。近年来,知识图谱在语义搜索、问答、知识管理等领域得到了广泛的应用。多模态知识图谱与传统知识图谱的主要区别是.

2021-10-20 09:44:15 2000 1

原创 庖丁解牛|图解 MySQL 8.0 优化器查询转换篇

简介:本篇介绍子查询、分析表和JOIN的复杂转换过程一 背景和架构在《庖丁解牛-图解MySQL 8.0优化器查询解析篇》一文中我们重点介绍了MySQL最新版本8.0.25关于SQL基本元素表、列、函数、聚合、分组、排序等元素的解析、设置和转换过程,本篇我们继续来介绍更为复杂的子查询、分区表和JOIN的复杂转换过程,大纲如下:Transformationremove_redundant_subquery_clause :Permanently remove redundant parts ..

2021-10-19 14:30:25 1062

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除