- 博客(41)
- 收藏
- 关注
RSS订阅原创 MaxCompute studio FAQ
1. 官方文档地址https://help.aliyun.com/document_detail/50889.html2. Show Table Detail 中文乱码原因是Intellij Appearance中使用的字符集不支持中文，需要在Appearance & Behavior -> Appearance 下使用支持中文的字符集（Microsoft YaHei）...
2018-05-31 17:11:08
91
原创 如何在MaxCompute上处理存储在OSS上的开源格式数据
0. 前言MaxCompute作为使用最广泛的大数据平台，内部存储的数据以EB量级计算。巨大的数据存储量以及大规模计算下高性能数据读写的需求，对于MaxCompute提出了各种高要求及挑战。处在大数据时代，数据的来源多种多样，开源社区经过十几年的发展，百花齐放，各种各样的数据格式不断的出现。 我们的用户也在各个场景上，通过各种计算框架，积累了各种不同格式的数据。怎样将MaxCompute强大...
2018-05-31 16:33:18
115
原创 天池平台再升级，打造产业AI知识共享、技术共享平台
在5月23日的云栖大会·武汉峰会上，天池发布“全球AI开发者计划”，打造一站式人工智能知识共享平台，计划2年内在平台上集聚30万AI工程师。同时，阿里云天池正式升级，成为从产业机会到实施交付一站式解决的产业AI众智平台。杭州魔点科技有限公司CEO肖传宝、杭州数心网络科技有限公司CEO王磊、海纳天成科技股份有限公司CEO赫时煊、华中科技大学计算机学院副教授谢夏联合发布了此次开发者计划。...
2018-05-31 15:47:11
247
原创 阿里云HPC助力新制造 | 上汽仿真计算云SSCC
随着上汽集团与阿里云的合作开展，阿里云各项技术逐步深入到上汽汽车研发领域的核心业务实现落地。其中上海汽车集团股份有限公司乘用车分公司（以下简称上汽乘用车）与阿里云共建的仿真计算混合云就是新制造产业升级的典型代表项目。 上汽乘用车作为上汽集团全资子公司，承担着上汽自主品牌汽车的研发、制造与销售，拥有荣威、MG两大品牌，上海、南京和英国三地技术研发中心，上海临港、南京浦口和英国长桥三...
2018-05-31 15:36:49
365
原创 阿里云数据库备份DBS商业化发布，数据库实时备份到OSS
数据库备份DBS已于2018年5月17日正式商业化发布。数据库备份（Database Backup，简称DBS）是为数据库提供连续数据保护、低成本的备份服务。 它可以为多种环境的数据提供强有力的保护，包括企业数据中心、其他云厂商及公共云。数据库备份提供数据备份和操作恢复的整体方案，具备实时增量备份、精确到秒级的数据恢复能力。数据库备份常见问题备份现状DBA脚本化管理，集成...
2018-05-30 17:27:40
295
原创 一张图读懂数据库备份
摘要： 数据库备份DBS已于5月17日正式商业化，DBS旨在提供高性价比的数据库实时备份服务，更多详情查看：https://promotion.aliyun.com/ntms/act/dbs.html 本文作者：lyrewu...
2018-05-30 16:57:06
452
原创 数据库智能管理助手-CloudDBA
摘要：阿里云CloudDBA主要分为离线分析和在线分析两种功能。帮助用户节省成本，定位问题，分析原因并推荐解决方法。CloudDBA可以做到实时诊断，离线诊断和SQL优化。并且通过MySQL的参数调优，检测参数的不合理或者准备的延迟的情况。 演讲嘉宾简介：勋臣，阿里云RDS内核团队技术专家，目前阿里云CloudDBA专家系统开发。有着丰富的数据库开发管理和优化的经验。 本次...
2018-05-30 16:35:12
127
原创 重新定义数据库的时刻，阿里云数据库专家带你了解POLARDB
摘要：POLARDB是阿里云ApsaraDB数据库团队研发的基于云计算架构的下一代关系型数据库，其最大的特色是计算节点与存储节点分离，借助优秀的RDMA网络以及最新的块存储技术。POLARDB不但满足了公有云计算环境下用户业务快速弹性扩展的刚性需求，同时也满足了互联网环境下用户对数据库服务器高可用的需求。本文就带领大家了解什么是“云原生数据库”，云原生数据库的标准是什么，如何定义以及为何如此定...
2018-05-30 16:07:06
140
原创 时间序列数据的处理
演讲嘉宾简介：钟宇（悠你） 阿里巴巴 数据库高级专家，时间序列数据库HiTSDB的研发负责人。在数据库、操作系统、函数式编程等方面有丰富的经验。 本次直播视频PPT，戳这里！ http://click.aliyun.com/m/51142/本次分享主要分为以下几个方面：1. 时序数据库的应用场景2. 面向分析的时序数据存储3. 时序数据库的时序计算...
2018-05-30 15:46:07
1820
原创 【大量干货】史上最完整的Tengine HTTPS原理解析、实践与调试
本文邀请阿里云CDN HTTPS技术专家金九，分享Tengine的一些HTTPS实践经验。内容主要有四个方面：HTTPS趋势、HTTPS基础、HTTPS实践、HTTPS调试。一、HTTPS趋势这一章节主要介绍近几年和未来HTTPS的趋势，包括两大浏览器chrome和firefix对HTTPS的态度，以及淘宝天猫和阿里云CDN的HTTPS实践情况。上图是 chrome 统计的HTTPS...
2018-05-29 16:27:00
271
原创 ECS主动运维事件--让你HOLD住全场 （二）
背景数月前，我们推出了新的功能：ECS主动运维事件--让你HOLD住全场 https://yq.aliyun.com/articles/573782?spm=a2c4e.11155435.0.0.72fb331234N97s 。有了这个功能，当您的云服务器所在的物理机硬件可能存在安全风险需要迁移的时候，您可以自己去决定解决问题的时间，让您感受到的是掌控情况的踏实。而今，这个功能增强啦，让您对...
2018-05-29 15:57:21
173
原创 大数据时代数据库-云HBase架构&生态&实践
2018第九届中国数据库技术大会，阿里云高级技术专家、架构师封神（曹龙）带来题为大数据时代数据库-云HBase架构&生态&实践的演讲。主要内容有三个方面：首先介绍了业务挑战带来的架构演进，其次分析了ApsaraDB HBase及生态，最后分享了大数据数据库的实际案例。直播视频回顾PPT下载请点击以下是精彩视频内容整理：业务的挑战存储量量/并发计算增大 现如今大...
2018-05-29 15:52:10
110
原创 阿里HBase的数据管道设施实践与演进
摘要：第九届中国数据库技术大会，阿里巴巴技术专家孟庆义对阿里HBase的数据管道设施实践与演进进行了讲解。主要从数据导入场景、 HBase Bulkload功能、HImporter系统、数据导出场景、HExporter系统这些部分进行了讲述。直播视频请点击PPT下载请点击精彩视频整理：数据导入场景生意参谋生意参谋是一种为商家服务，帮助商家进行决策和运营的数据产品。如在淘宝或天猫上开一...
2018-05-29 15:30:40
118
原创 阿里云如何打破Oracle迁移上云的壁垒
2018第九届中国数据库技术大会，阿里云数据库产品专家萧少聪带来以阿里云如何打破Oracle迁移上云的壁垒为题的演讲。Oracle是指“数据库管理系统”，面对Oracle迁移上云的壁垒，阿里云如何能够打破它呢？本文提出了Oracle 到云数据库PPAS迁移的方案，这种迁移方案为什么比Oracle到 MySQL系列的迁移容易推动呢？答案即将揭晓。直播视频回顾PPT下载请点击以下是精彩视频内容整理...
2018-05-29 14:52:29
121
原创 第三代DRDS分布式SQL引擎全新发布
DRDS （阿里云分布式关系型数据库服务，https://www.aliyun.com/product/drds）于 4 月 30 号发布了 5.3 版本，这是一个年度大更新。主要带来了以下特性：性能提升。在大多数场景下（拆分键上的等值查询、读写分离等），同规格的吞吐量（最大 QPS）可以提升到之前的300%。原生分布式事务。无需额外付费或者开通，不依赖第三方组件，即可执行分布式事...
2018-05-28 17:38:13
121
原创 玩转MaxCompute studio SQL编辑器
SQL因其简单易学的特点，是用户与MaxCompute服务交互的主要手段。如何帮助用户高效愉快的编写SQL是MaxCompute studio的核心使命，下面就让我们来一探究竟：忘记语法相信大家都有过忘记SQL怎么写的时候，一旦忘记，恐怕只能到处去找文档和代码示例，被迫离开全神贯注的SQL editor，十分影响效率。在studio中，我们集成了大量的MaxCompute SQL语法模板...
2018-05-28 17:18:25
140
原创 再次升级！阿里云Kubernetes日志解决方案
背景针对K8S日志采集存在的采集目标多、弹性伸缩难、运维成本大、侵入性高、采集性能低等问题，在18年2月份日志服务和容器服务团队一起发布了阿里云Kubernetes日志解决方案。1分钟内即可完成整个集群部署，实现该节点上宿主机日志、容器日志、容器stdout等所有数据源的一站式采集。并且后续集群动态伸缩无需对采集做任何二次部署。今天阿里云Kubernetes日志解决方案再次升级，为您带来...
2018-05-28 16:33:00
318
原创 阿里云E-HPC联合安世亚太、联科集团共建云超算生态
5月23日，2018云栖大会武汉峰会，阿里云高级技术专家刘峥和张维，对弹性计算最新上线的 serverless （无服务器化）计算技术Bazaar及基于该技术的容器服务产品 Severless Kubernetes 进行了解析。并就满足 serverless 用户在不管理底层基础设施的情况下，如何简化用户业务部署流程，更快部署、交付用户业务，降低用户使用费用，提供更细资源粒度等方面进行了精彩的分...
2018-05-28 15:52:35
164
原创 阿里云弹性裸金属服务器-神龙架构（X-Dragon）揭秘
在5月16日的飞天技术会新品直播中，特别邀请了业界知名大咖狒哥以及阿里云虚拟化资深专家旭卿作为现场直播的嘉宾。本次直播主要从产品背景到“X-Dragon架构”，从硬件设备到软件应用来深度的剖析“X-Dragon架构”为弹性计算裸金属服务器提供的极致计算能力。直播视频请点击以下为精彩视频内容整理：产品背景这几年越来越多的大客户把自己的业务搬到云上来，一方面是因为云可以在成本、效率、性能方面...
2018-05-25 15:07:27
377
原创 从保障淘宝到全球市场“第一阵营”，阿里云的DDoS防护之路走了多远？
2年前，不少技术圈的朋友，读过论坛里的一篇解读文章：DDoS，阿里为什么要走自己的一条路（https://bbs.aliyun.com/read/271764.html?pos=13），文章讲述了阿里巴巴为什么决定研发自己的DDoS清洗系统，阿里云DDoS防护业务的诞生，以及阿里云Anti-DDoS产品团队在云上DDoS检测、防御的一些思考。2年后，Forrester发布Now Tech: ...
2018-05-25 13:27:27
139
原创 阿里云Kubernetes服务 - Service Broker快速入门指南
4月底阿里云容器服务上线了基于Kubernetes集群的服务目录功能。阿里云的容器的服务目录遵循Open Service Broker API标准，提供了一系列的服务代理组件，实现了对主流开源服务如MySQL、MariaDB、Spark、RabbitMQ等的完美支持，同时提供了管理阿里云RDS服务的RDS broker功能。通过控制台，用户可以浏览到各种服务的broker，通过简单地界面操作，就...
2018-05-25 11:49:50
452
原创 一探究竟：善用 MaxCompute Studio 分析 SQL 作业
头疼的问题MaxCompute 用户一个常见的问题是：同一个周期任务，为什么最近几天比之前慢了很多？或者为什么之前都能按时产出的作业最近经常破线？通常来说，引起作业执行变慢的原因有：quota 组资源不足、输入数据量变动、数据分布情况变动、平台硬件故障引发重跑等。本文主要针对数据变动引起的作业慢问题，介绍用户如何通过 MaxCompute Studio 的作业执行图及作业详情功能来自助定...
2018-05-25 10:48:49
99
原创 MaxCompute Studio 使用入门
MaxCompute Studio 是MaxCompute 平台提供的安装在开发者客户端的大数据集成开发环境工具，是一套基于流行的集成开发平台 IntelliJ IDEA 的开发插件，可以帮助您方便地进行数据开发。下面我们一起来看一看Studio的简单用法。用户登录Studio提供用户登录功能。常规登录入口在Intellij toolbar中右上角的Sign In。登录完成后可直接使用答...
2018-05-24 14:07:55
182
原创 AI 一体机，满足新时代的新需求
AI 变革带来哪些 IT 的新要求？深度学习的突破和硬件的突飞猛进，使得人工智能“第n春”焕发蓬勃生机。这是历史上第一次，机器可以在如人脸识别等‘人类’工作上做得比我们人类更好。人工神经网络有许多‘隐藏’或计算层，实现深度学习要对特定人工神经网络架构进行一系列的特定配置，可以提供数据让系统自我训练（training）或推断（inference），最终从输出神经元层读取数值结果。A...
2018-05-24 13:05:19
115
原创 OSS重磅推出OSS Select——使用SQL选取文件的内容
对象存储OSS（Object Storage Service）具有海量、可靠、安全、高性能、低成本的特点。OSS提供标准、低频、归档类型，覆盖多种数据从热到冷的存储需求，单个文件的大小从1字节到48.8TB，可以存储的文件个数无限制。OSS已成为互联网、企业级数据应用的基础设施。通常，获取对象存储数据的通方式为：获取整个对象，或按指定的字节范围来获取数据。今天，我们重磅推出OSS Select，...
2018-05-24 11:04:43
275
原创 如何将DynamoDB的数据增量迁移到表格存储
Amazon DynamoDB是一个完全托管的NoSQL数据库服务，可以提供快速的、可预期的性能，并且可以实现无缝扩展。由于DynamoDB并可以根据实际需求对表进行扩展和收缩，这个过程既不需要停止对外服务，也不会降低服务性能，一经推出就收到了广大AWS用户的欢迎。同样，表格存储是构建在阿里云飞天分布式系统之上的分布式NoSQL数据库服务。作为同 DynamoDB 非常相似的 __云NoSQ...
2018-05-24 10:55:27
103
原创 多隆：淘宝第一行代码撰写者的程序世界
他2000年加入阿里巴巴，是淘宝的创始人之一，是阿里内部公认的技术大牛，在阿里内网上他被贴得最多的标签就是“神”。在第二届研发效能嘉年华中他将在“向代码致敬，寻找83行代码”活动颁奖盛典中华丽现身，他就是“码神”多隆，原名蔡景现，一位安安静静的摆渡人。多隆何许人也？ 多隆是谁？不是金庸笔下的人物，而是阿里巴巴上市前最后一次实质性更新招股书中那三个新增的合伙人之一。这个声名不显的人...
2018-05-22 16:33:29
227
原创 饿了么CTO张雪峰：允许90后的技术人员“浮躁“一点
编者按：今年4月，饿了么正式加入了阿里新零售战队，进一步加速其在本地生活市场的扩张速度。在创业9年的时间中，饿了么在外卖领域经历了真正的“从0到1”，尤其是在外卖平台的技术升级方面，越过了一个又一个的无人区。因此，早在去年，云栖社区就对饿了么的技术进化之路做过深入的介绍（见《饿了么四次技术进化的曲折路，记访谈张雪峰》），并且受到了技术圈的广泛关注。*今年，我们再次邀请到饿了么CTO张雪峰，并...
2018-05-22 16:24:26
128
原创 专访阿里巴巴量子实验室：最强量子电路模拟器“太章”到底强在哪？
本月早些时候，阿里巴巴量子实验室成功研制当前世界最强的量子电路模拟器“太章”的消息引起了一阵热议，有关量子霸权争夺战的言论不绝于耳。根据官方信息，基于阿里巴巴集团计算平台在线集群的超强算力，“太章”在全球范围内率先成功模拟了81（9x9）比特40层的作为基准的谷歌随机量子电路，之前达到这个层数的模拟器只能处理49比特。关于“太章”本身，此前已经有不少媒体有报道，我们就不再赘述了。那么最强...
2018-05-22 16:23:46
149
原创 108天南京银行完成不可能完成的新金融DevOps转型
在2018云栖大会南京峰会企业研发云专场，由南京银行研发管理负责人吴攀带来了“云效助力新金融DevOps转型——南京银行实践之路”的主题分享。首先对南京银行的研发规模与成长做了介绍，对“鑫云+”的诞生和其架构应用做了详细的讲解。（云效公有云周年折扣活动进行中红，包年55折优惠中！）以下为精彩视频内容整理：南京银行研发规模概况 简单给大家介绍一下南京银行现在的规模，南京银行...
2018-05-22 16:11:43
210
原创 100个容器周边项目，点亮你的容器集群技能树
大规模的容器技术运用从来不是一项独立工程，而是一个汇集虚拟化技术、容器编排、任务调度、操作系统、容器仓库、跨节点网络、分布式存储、动态扩缩、负载均衡、日志监控、故障自恢复等系统性难题的复杂有机体。随着Docker的诞生和Google等互联网公司的推波助澜，这个领域出现了一大批优秀的开源项目，它们在简化容器技术使用成本的同时，也经常使得刚刚接触容器时间不太长的开发者和企业用户感到不知所措。将知...
2018-05-22 15:57:33
107
转载 论云时代最经济的APM工具的姿势
阿里云于大概两月前商业化了一款APM产品 ARMS ，正式填补了 APM 上的云上监控的空白。那么作为阿里云官方 APM 工具，ARMS 和其他传统厂商的 APM 服务相比有什么特点呢？ 通过和国内其他 APM 类产品对比，结合其自身各类功能，一个显著的特点是能非常明显地帮助用户降低云上的应用监控使用成本，从而间接提高用户在阿里云上的体验和粘性。以下从五个方面来为大家详细解说。随需而动的按量付费定...
2018-05-21 18:03:02
430
转载 “弹性裸金属服务器”到底有那些特性？
在这里我们定义的“弹性裸金属服务器”是一个“新物种”，它强调的是“弹性”，也就是通过技术创新，使得传统裸金属服务能够做到和虚拟机一致的使用体验和业务敏捷。所以，“弹性裸金属服务器”应该具备如下八个关键特征： 特征一：分钟级交付云服务快速弹性伸缩，是IaaS云服务的核心特征。一般来说，虚拟机服务可以做到分钟级业务弹性伸缩。2017年10月鹿晗关晓彤恋情引发微博瘫痪，此类业务特征是：业务流量瞬时暴涨...
2018-05-21 17:48:13
3825
转载 弹性裸金属服务器服务于市场的技术概要分析
混合云和第三方虚拟化软件部署伴随着公有云的高速发展，混合云打通客户线下专有云和线上公有云资源的需求日趋强烈。Open stack和VMware等IaaS stack在公有云部署，同时管理客户线上和线下IaaS资源。可以看到，VMware cloud on AWS就属于此种混合云业务应用场景而Open stack和VMware cloud等IaaS stack在公有云部署，最为关键就是要求公有云暴露...
2018-05-21 17:25:55
360
转载 FPGA资源平民化的新晋-F3 技术解析
FPGA (现场可编程门阵列)由于其硬件并行加速能力和可编程特性，在传统通信领域和IC设计领域大放异彩。一路走来，FPGA并非一个新兴的硬件器件，由于其开发门槛过高，硬件加速算法的发布和部署保护要求非常高，FPGA的使用一直是高冷的美人，没有走入平常百姓家。也就导致FPGA的计算潜力还没有得到深入的挖掘。阿里云虚拟化团队异构计算和高性能计算团队一直致力于将计算资源"平民化"；高性能计算团队在做的E...
2018-05-21 17:05:41
236
转载 FPGA设计中遇到的奇葩问题之“芯片也要看出身”
FPGA设计中遇到的奇葩问题之“芯片也要看出身”（一）昨夜西风凋碧树。独上高楼，望尽天涯路2000年的时候，做设计基本都是使用Xilinx公司的Virtex和Virtex-E系列芯片。那时候Altera技术实力还比较弱，基于Altera的芯片做设计是要被大家diss的。某天晚上大概十点多了吧，我正如痴如醉的沉浸在编码的快感当中。主管悄无声息的站到了我身后，我从显示器中看到了隐约的影子，转头一看果然...
2018-05-21 16:11:19
412
转载 让机器“读懂”放射学报告
在Qure，我们建立了深度学习模型来检测放射影像中的异常。这些模型需要大量的标记数据来学习诊断异常。因此，我们从医院和门诊放射中心收集了一个大型数据集。这些数据集包含相关的临床放射学报告。目前，当我们训练深度学习算法以识别放射学图像的异常情况时，我们使用放射科的医师报告作为最佳标准。这是目前最好的方式，因为这可以提供以百万计的图像以实现高精度的分类算法。这些报告通常以自由格式文本而不是结构化格式编...
2018-05-07 17:07:06
381
转载 智能手机跑大规模神经网络的主要策略
计算机具有高储量的硬盘和强大的CPU和GPU。但是智能手机却没有，为了弥补这个缺陷，我们需要技巧来让智能手机高效地运行深度学习应用程序。 介绍深度学习是一个令人难以置信的灵活且强大的技术，但运行的神经网络可以在计算方面需要非常大的电力，且对磁盘空间也有要求。这通常不是云空间能够解决的问题，一般都需要大硬盘服务器上运行驱动器和多个GPU模块。不幸的是，在移动设备上运行神经网络并不容易。事实上，即使智...
2018-05-07 16:37:22
1267
转载 机器学习能诊断病情，还能预测患者出院后的情况？
随着数据量以及计算机性能的不断提升，机器学习技术正逐渐渗透于各行各业中。计算机视觉、自然语言处理、机器人等领域基本上已经被机器学习算法垄断，正逐步向教育、银行、医疗等传统行业扩张。关于机器学习如何改变传统教育模式，可以参见博主的这篇文章《使用AR、AI以及大数据改革教育体系——为每位学生打造自己的私人定制学习路线》。银行业目前对人工智能炒作成分居多，大多数银行持观望态度，短时间不会利用人工智能取代...
2018-05-07 16:11:11
1109
2
转载 向代码致敬，寻找你的第83行
4月18日在阿里巴巴内网发起了一场“向代码致敬，寻找你的第83行代码”活动，有几万阿里人围观，近五百多位技术极客纷纷晒代码、秀肌肉，甚至包括阿里巴巴的首席技术官行癫，也晒出写过的COOKIE框架、CACHE的框架代码，鲁肃也秀了一把自己当年加入支付——淘宝项目，PHP+mysql向JavaEE架构转型的过程时的代码原型。为什么是83行呢？4月初在阿里的一个“小黑屋”会议室里，5名对代码有着极致追求...
2018-05-07 15:41:57
515
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人