- 博客(80)
- 收藏
- 关注
原创 项目owner看这里,MaxCompute全表扫描新功能,给你“失误”的机会
摘要: MaxCompute发布了“ALIAS 命令”,提供了在不修改代码的前提下,在MapReduce或自定义函数(UDF) 代码中,通过某个固定的资源名读取不同资源(数据)的需求。随着社会数据收集手段的不断丰富及完善,越来越多的行业数据被积累下来。数据规模已经增长到了传统软件行业无法承载的海量数据,达到百GB、TB乃至PB级别。在分析海量数据场景下,由于单台服务器的处理能力限制,数据分析者通常...
2018-06-28 16:34:37 607
原创 云上拍客梨视频 基于阿里云的技术实践分享
摘要: 梨视频大部分的业务都选择了阿里云,其中一个主要原因是阿里云提供基于钉钉群构建的24贴身技术支持,刘隽表示,这种服务模式可以更充分、高效的对接需求,快速得到反馈,这也让梨视频的同学有信心去尝试一些新的方案。在上海云栖大会视频专场中,梨视频CTO刘隽先生分享了梨视频拍客生产全流程及其背后的技术,同时作为业务使用方,向现场嘉宾阿里云产品的使用实践。云上拍客梨视频梨视频是全球第一资讯短视频内容生产...
2018-06-28 16:15:17 1114
原创 扫盲人工智能的计算力基石--异构计算
摘要: 本文将带领入门读者了解CPU,GPU,FPGA,ASIC和异构计算的一些基本概念和优缺点,希望帮助入门者和爱好者建立基本的芯片概念人工智能有三要素:算法,计算力,数据。我们今天主要来讲讲计算力。计算力归根结底由底层芯片提供。按照计算芯片的组成方式,可以分成:同构计算:使用相同类型指令集和体系架构的计算单元组成系统的计算方式。异构计算:使用不同类型指令集和体系架构的计算单元组成系统的计算方式...
2018-06-28 15:57:07 2510 1
原创 当我们谈论企业级存储市场时,我们谈论(做)了什么
摘要: APSARA Block Storage是阿里云弹性计算块存储团队推出的一款企业级分布式块存储产品,为企业级市场头部客户量身打造,构建高性能、弹性、可靠的大规模横向扩展云存储服务平台。可对接多种类型的计算平台,包括阿里云ECS、ZStack、OpenStack、Kubernetes以及物理服务器等不同类型,帮助客户轻松应对云时代下海量存储资源的敏捷存取需求,适用于政府、金融、运营商和大型制...
2018-06-28 15:40:28 1625
原创 聊聊微服务的服务注册与发现
摘要: 一个好的服务注册发现中间件,应该是能完整地满足服务开发和治理的基础功能,然后才是性能和高可用。如果没有想清楚前面的功能,再高的可用性和性能都是浮云。最后,安全也同样重要。下面将从 服务注册、服务发现、容灾和高可用三个大方面来回答这些问题的主流做法。引言聊起微服务的服务注册与发现,很多人立马就会脱口而出 zk、etcd、consul、eureka 这些组件,进而聊到 CAP 如何取舍,性能如...
2018-06-27 17:32:49 1133
原创 AutoScaling 生命周期挂钩功能
摘要: AutoScaling 伸缩组实例管理功能全面升级,新上线生命周期挂钩(LifecycleHook)功能,方便用户更加灵活地管理伸缩组内实例。使用生命周期挂钩可以在伸缩组发生伸缩活动时将伸缩活动挂起,执行自定义操作。使用 LifecycleHook 功能,可以更加灵活地管理控制伸缩组内 ECS 实例的生命周期,灵活地控制伸缩组内实例的创建和移出过程。当伸缩组发生伸缩活动,触发生命周期挂钩时...
2018-06-27 17:16:13 1109
原创 一张表看懂ECS云服务器规格的升降配
摘要: 阿里云ECS规格种类丰富,可以升降配到底有什么规格?购买实例后,您可以通过升降配功能重新升级或降级资源的配置,但是到底那些是可以变更,哪些又不支持呢?一张表看懂ECS云服务器规格的升降配,清晰,简洁。背景 阿里云ECS规格种类丰富,可以升降配到底有什么规格?购买实例后,您可以通过升降配功能重新升级或降级资源的配置,但是到底那些是可以变更,可以变更到什么?哪些又不支持呢?如何操作...
2018-06-27 16:48:49 2205
原创 重磅!MaxCompute助力阿里开源自研语音识别模型DFSMN,准确率高达96.04%
摘要: 阿里开源语音识别模型DFSMN 在近期举行的云栖大会武汉峰会上,装有DFSMN语音识别模型的“AI收银员”在与真人店员的PK中,在嘈杂环境下准确识别了用户的语音点单,在短短49秒内点了34杯咖啡。此外,装备这一语音识别技术的自动售票机也已在上海地铁“上岗”。阿里开源语音识别模型DFSMN在近期举行的云栖大会武汉峰会上,装有DFSMN语音识别模型的“AI收银员”在与真人店员的PK中,在嘈杂环...
2018-06-27 16:29:40 388
原创 Why Redis 4.0?
摘要: 社区最新GA版本Redis 4.0推出已近一年,阿里云数据库Redis 4.0版也上线近半年,之前关于Redis 4.0的系列文章从源码实现来分析这些新功能,本文旨在从用户角度出发,让Redis的用户能够快速了解并使用Redis 4.0带来的福利。前言Redis作为时下最火爆的NoSQL数据库以性能强悍、数据结构丰富著称,同时其成长的脚步也从未停止,自诞生伊始已经历多次蜕变不断推出新功能。...
2018-06-27 15:57:16 130
原创 使用 Dubbo 对遗留单体系统进行微服务改造
摘要: 在 2016 年 11 月份的《技术雷达》中,ThoughtWorks 给予了微服务很高的评价。同时,也有越来越多的组织将实施微服务作为架构演进的一个必选方向。只不过在拥有众多遗留系统的组织内,将曾经的单体系统拆分为微服务并不是一件容易的事情。Credit: Justin Kenneth Rowley. You can find the original photo at flickr.T...
2018-06-26 18:23:45 692
原创 Scala入门到精通——第三十节 Scala脚本编程与结束语
摘要: 本节主要内容 REPL命令行高级使用 使用Scala进行Linux脚本编程 结束语 1. REPL命令行高级使用 在使用REPL命令行时,有时候我们需要粘贴的代码比较大,而普通的粘贴可能会些一些问题,比如中文粘贴会出现乱码、多行代码粘贴时会出错,此时需要用到REPL的高级功能。在日常开发过程中,我们粘贴多行代码的时候会遇到下列问题: //本意是要粘贴下面两行代码本节主要内容REPL命令行高...
2018-06-26 17:45:29 249
原创 Redis Stream应用案例
摘要: Redis Stream Redis最新的大版本5.0已经RC1了,其中最重要的Feature莫过于Redis Stream了,关于Redis Stream的基本使用介绍和设计理念可以看我之前的一篇文章(Redis Stream简介)。Redis StreamRedis最新的大版本5.0已经RC1了,其中最重要的Feature莫过于Redis Stream了,关于Redis Stream的...
2018-06-26 17:16:54 7273 1
原创 MongoShake——基于MongoDB的跨数据中心的数据复制平台
摘要: MongoShake是基于MongoDB的通用型平台服务,作为数据连通的桥梁,打通各个闭环节点的通道。通过MongoShake的订阅消费,可以灵活对接以适应不同场景,例如日志订阅、数据中心同步、监控审计等。其中,集群数据同步作为核心应用场景,能够灵活实现灾备和多活的业务场景。背景在当前的数据库系统生态中,大部分系统都支持多个节点实例间的数据同步机制,如Mysql Master/Slave主...
2018-06-26 16:59:38 1114
原创 打造人才“云”梯,阿里云联合各高校开展云计算进校园系列活动
摘要: 为了深入推进校企联合培养,激发学生参与云计算的兴趣,未来可以更好地投身于云计算产业,阿里云联合多个高校在5月开展了《云计算的前世今生——从阿里看云计算》主题系列讲座,潜移默化的培养更加适应当前云计算产业需求,深刻理解云计算的优秀人才。随着云计算产品的市场规模的快速增长、云计算企业核心技术的投入、新市场、新应用、新业务的不断出现,适应行业发展需要的高层次人才需求量与日俱增。为了深入推进校企联...
2018-06-26 15:18:10 259
原创 从方法论到零售客户实践 解码阿里巴巴数据中台——2018上海云栖大会
摘要: 一、数据中台之道 6月8日,上海云栖大会进入了第二天的议程,数据中台专场论坛座无虚席,数据中台总架构师邓中华女士向在场的观众介绍了数据中台的衍生发展之道。 基于OneID、OneData、OneService的方法论,在阿里巴巴大数据平台上云过程中,提出了云上大数据解决方案——数据中台业务模式,孵化输出Dataphin和Quick BI两款大数据平台型产品。一、数据中台之道6月8日,上海云...
2018-06-25 16:04:42 1768
原创 阿里云云效功能升级,支持快速创建多个应用的独立测试环境
摘要: 作为测试人员来说,搭建测试环境是测试实施的一个重要阶段,测试环境适合与否会严重影响测试结果的真实性和正确性。为了更好地服务用户,近日,阿里云研发协同平台-云效宣布功能升级,支持快速创建多个应用的独立测试环境,对于企业开发人员和测试人员来说,又是一大福音。作为测试人员来说,搭建测试环境是测试实施的一个重要阶段,测试环境适合与否会严重影响测试结果的真实性和正确性。为了更好地服务用户,近日,阿里...
2018-06-25 15:46:31 232
原创 最好用的工兵铲—MaxCompute Studio,来了解下!
摘要: 在大数据计算北京高端峰会上,阿里云计算平台高级专家薛明深入介绍了阿里巴巴大数据计算平台开发利器—MaxCompute Studio。一站式的 IDE,可以快速完成数据浏览和管理、进行基于 SQL 和 UDF 的数据开发,更具备完善的作业分析和优化辅助等功能。本文带领大家自浅入深了解MaxCompute Studio。演讲嘉宾简介:薛明,MaxCompute高级技术专家。以下内容根据演讲嘉宾...
2018-06-25 15:08:59 2641
原创 日志服务支持Shard自动分裂
摘要: 日志服务提供Shard自动分裂功能,实时监控Shard流量,自动进行shard分裂以应对流量上涨,解决流量估算不准、随时可能上涨又难以及时处理的问题,保障数据完整。日志服务的数据模型中,使用Shard来控制Logstore的写入、读取吞吐能力,每个Shard提供5MB/sec写入、10MB/sec读取,通常情况下,shard越多,Logstore的吞吐越大。在创建Logstore时,可以根...
2018-06-25 14:46:13 645
原创 SQL老司机,在SQL中计算 array & map & json数据
摘要: 场景 通常,我们处理数据,一列数据类型要么是字符串,要么是数字,这些都是primitive类型的数据。场景通常,我们处理数据,一列数据类型要么是字符串,要么是数字,这些都是primitive类型的数据。在某些比较复杂的业务场景下,我们会在一列中使用复杂的格式,例如数组array, 对象(map),json等格式来表示复杂的数据,例如:array_column 是数组类型。假如,我们希望统计...
2018-06-22 17:30:37 2211
原创 看东方明珠新媒体如何基于阿里视频云,构建完整的视频OTT平台SaaS服务
摘要: 东方明珠新媒体如何基于阿里云,搭建了面向第三方的视频SaaS服务?6月8日,上海云栖大会视频专场中,东方明珠新媒体股份有限公司云计算中心的副总周少毅带来了《东方明珠视频云》为题的精彩演讲,介绍了东方明珠视频云的搭建过程。东方明珠新媒体如何基于阿里云,搭建了面向第三方的视频SaaS服务?6月8日,上海云栖大会视频专场中,东方明珠新媒体股份有限公司云计算中心的副总周少毅带来了《东方明珠视频云》...
2018-06-22 17:02:24 560
原创 从10亿到百亿规模大促,用云效玩转项目管理
摘要: 一个大的商业项目,如何能做到如期完工并准时交付,是有一套标准化的流程和体系来支撑的。项目管理并不是一个陌生的话题,就像《人月神话》里面提到的阿波罗计划、曼哈顿工程都是非常经典的案例。对于很多新同学来讲,对项目管理没太大感觉,认为总是在沟通和确认一些细节,对风险的识别有太多体感。其实对于一个大的商业项目,如何能做到如期完工并准时交付,是有一套标准化的流程和体系来支撑的。项目管理是一项综合素质...
2018-06-22 16:43:23 144
原创 视频云资深技术专家李彬:传统企业如何进行多媒体数字化转型?
摘要: 2018年云栖大会的主题为:驱动数字中国。那么,传统企业为什么践行数字化转型呢?在数字化转型中,阿里云又可以在多媒体这个垂直领域提供什么样的帮助呢?在6月8日的上海云栖视频专场中,阿里云视频云资深技术专家李彬围绕大会主题,展开了一场关于传统企业数字化转型与多媒体创新的演讲, 首先,李彬认为:数字化转型不是目的,是为了加速创新。2018年云栖大会的主题为:驱动数字中国。那么,传统企业为什么践...
2018-06-22 16:18:20 372
原创 三分钟学会如何在函数计算中使用 puppeteer
摘要: 使用 puppeteer 结合函数计算,可以快速的构建弹性的服务完成各种功能,包括:生成网页截图或者 PDF、高级爬虫,可以爬取大量异步渲染内容的网页、模拟键盘输入、表单自动提交、登录网页等,实现 UI 自动化测试和捕获站点的时间线,以便追踪你的网站,帮助分析网站性能问题简介使用 puppeteer 结合函数计算,可以快速的构建弹性的服务完成各种功能,包括:生成网页截图或者 PDF高级爬虫...
2018-06-21 17:49:46 991
原创 上海云栖:金融政企行业的CDN最佳实践
摘要: 在刚刚结束的上海云栖大会飞天技术汇分论坛上,阿里云视频云产品架构师罗小飞进行了《阿里云CDN——面向金融政企的CDN最佳实践》主题分享,为上海的嘉宾介绍CDN的解决方案与技术服务体系。在刚刚结束的上海云栖大会飞天技术汇分论坛上,阿里云视频云产品架构师罗小飞进行了《阿里云CDN——面向金融政企的CDN最佳实践》主题分享,为上海的嘉宾介绍CDN的解决方案与技术服务体系。在分享的最初,罗小飞与现...
2018-06-21 17:31:51 453
原创 ofo在MaxCompute的大数据开发之路
摘要:2017年,ofo向市场投入了一千多万辆单车,这些单车的投放、运营和调度需要大量数据的支持。本文将从ofo选择MaxCompute的理由以及数据完整性、任务调度、Proxy服务三个方面的实战应用,分享ofo 在MaxCompute的大数据开发之路。演讲嘉宾简介:龙利民,ofo大数据,大数据副总监。PPT材料下载地址:http://click.aliyun.com/m/1000003067/视...
2018-06-21 17:06:44 213
原创 MaxCompute产品最新进展 -- 从马力到计算力
摘要:本文从马力作为功率衡量标准为切入点,介绍了大数据领域的计算力衡量标准TPCBB以及MaxCompute2.0在Big Bench上的卓越表现。同时详细地分享了取得优异成绩背后的产品在最新有哪些进展,帮助大家全面的了解MaxCumpute2.0。另外,对于共有云用户非常关注的-数据安全话题,阿里巴巴通过逻辑隔离/资源隔离/运行隔离机制,保障了数据安全,同时实现了安全的数据交换与共享。演讲嘉宾简...
2018-06-21 16:31:05 601
原创 2018上海云栖大会workshop-日志数据采集与分析对接
摘要: 日志数据采集与分析对接 课程描述 通过日志服务采集用户、数据库、业务等访问数据。演示对于业务日志分析与处理,程序日志查询与监控,打通日志与数据仓库对接案例。 日志种类 网站访问日志准备步骤 & 依赖 ECS虚拟机(测试账号默认包含,并且访问日志产生) OSSBucket 用做数据仓库,存储日志服.日志数据采集与分析对接课程描述通过日志服务采集用户、数据库、业务等访问数据。演示对于业...
2018-06-20 16:47:35 295
原创 Severless SQL on OSS 实验(DataLakeAnalytics on OSS)
摘要: 数据存储在OSS后,可以有多种方式查询分析OSS数据,如自建Spark/Presto/Impala(阿里云EMR以及Hadoop社区官方已支持OSS), 使用MaxCompute、DataLakeAnalytics等。基于OSS的数据查询分析数据存储在OSS后,有多种查询分析的方法,包括阿里云MaxCompute、DataLakeAnalytics产品等Severless查询分析服务,也可...
2018-06-20 16:25:15 171
原创 【新功能】企业级Maven私有仓库服务结束公测,全面开放使用
摘要: 目前云效上线了企业级Maven私有仓库服务。用户可以一键开通Maven私有仓库服务,零配置实现私有二方库的上传和下载。经过半个月的公测,云效中的企业级Maven私有仓库服务正式上线,全面开放使用。用户可以一键开通Maven私有仓库服务,零配置实现私有二方库的上传和下载。企业级Maven私有仓库核心功能点一键开通,自动生成release和snapshot两个仓库;高效上传和下载,后端存储使用...
2018-06-20 15:52:47 719
原创 MaxCompute读取分析OSS非结构化数据的实践经验总结
摘要: 本文背景 很多行业的信息系统中,例如金融行业的信息系统,相当多的数据交互工作是通过传统的文本文件进行交互的。此外,很多系统的业务日志和系统日志由于各种原因并没有进入ELK之类的日志分析系统,也是以文本文件的形式存在的。1. 本文背景很多行业的信息系统中,例如金融行业的信息系统,相当多的数据交互工作是通过传统的文本文件进行交互的。此外,很多系统的业务日志和系统日志由于各种原因并没有进入ELK...
2018-06-20 15:04:15 816
原创 代码快速“检”“修”不是梦,阿里云MaxCompute Studio 2.9.0 新版本发布
摘要: 阿里云MaxCompute Studio 2.9.0 新版本发布,此次发布的新版本,在原有功能的基础上增加了新功能,分别是支持代码检查和快速修复;支持graph开发及调试。近日,阿里云大数据计算服务 MaxCompute动作频频,在美国东部1(弗吉尼亚)节点开服售卖,用户可在国际站、中文站、日本站购买美东节点资源,在控制台按需求开通project。除此之外,对于使用MaxCompute的开...
2018-06-20 14:44:46 93
原创 阿里云发布企业数字化及上云外包平台服务:阿里云众包平台
摘要: 阿里云正式发布旗下众包平台业务(网址:https://zhongbao.aliyun.com/),支持包括:网站定制开发,APP、电商系统等软件开发,商标、商品LOGO、VI、产品包装设计、营销推广、大数据人工智能等各类企业上云、数字化转型服务。阿里云正式发布旗下众包平台业务(网址:https://zhongbao.aliyun.com/),支持包括:网站定制开发,APP、电商系统等软件开...
2018-06-19 18:04:53 498
原创 兑吧:从自建HBase迁移到阿里云HBase实战经验
摘要: 业务介绍 兑吧集团包含兑吧网络和推啊网络,兑吧网络是一家致力于帮助互联网企业提升运营效率的用户运营服务平台,提供积分商城和媒体运营服务。推啊网络是一家互动式广告平台,经过多年的探索与实践,首创了全新的移动广告模式,实现了广告主、媒体、用户多方共赢。业务介绍兑吧集团包含兑吧网络和推啊网络,兑吧网络是一家致力于帮助互联网企业提升运营效率的用户运营服务平台,提供积分商城和媒体运营服务。推啊网络是...
2018-06-19 17:34:30 221
原创 ARMS: 原来实时计算可以这么简单!
摘要: 业务实时监控服务( ARMS)是一款阿里云应用性能管理(APM)类监控产品。借助本产品,您可以基于前端、应用、业务自定义等服务,迅速便捷地为企业构建秒级响应的业务监控能力。业务实时监控服务( ARMS)是一款阿里云应用性能管理(APM)类监控产品。借助本产品,您可以基于前端、应用、业务自定义等服务,迅速便捷地为企业构建秒级响应的业务监控能力。其中自定义监控作为该产品的时序计算和存储的基础,...
2018-06-19 17:20:54 907
原创 HiSDP —— 高效的C++软件开发平台
目前阿里集团每天有近1000PB的数据是通过LogAgent采集的,为了让LogAgent做到资源占用节省和高效采集,背后是基于HiSDP去构建的。缘由当决定采用C++编程语言去开发一个软件时,紧接着所面临的问题是软件库、平台与框架的选择。当然,选择的范围估计很大程度来自开源软件。进一步地,无外乎两种思路:根据所开发软件的需要选择各种合适的开源软件,然后将这些开源软件组合到一起去完成软件开发工作。...
2018-06-19 16:34:45 550
原创 阿里云宣布与国内规模最大的汽车企业上汽集团合作
摘要: 云栖大会·上海峰会,6月7日,阿里云宣布与国内规模最大的汽车企业上汽集团合作,上线业内首个混合云汽车研发仿真计算服务平台——上汽仿真计算云SSCC(SAIC Simulation Computing Cloud)。 云栖大会·上海峰会,6月7日,阿里云宣布与国内规模最大的汽车企业上汽集团合作,上线业内首个混合云汽车研发仿真计算服务平台——上汽仿真计算云SSCC(SAIC Sim...
2018-06-19 16:07:51 1609
原创 阿里云Apsara Block Storage企业级分布式块存储产品,轻松应对云时代下海量数据的敏捷存取需求
摘要: Apsara Block Storage是阿里云推出的一款企业级分布式块存储产品,帮助企业市场头部客户构建高性能、弹性、可靠的大规模横向扩展云存储服务平台。可对接各种类型计算平台,包括阿里云ECS,ZStack,Openstack, Kubernetes以及物理服务器等不同类型,帮助客户轻松应对云时代下海量存储资源的敏捷存取需求。Apsara Block Storage横空出世什么是Aps...
2018-06-19 15:23:31 250
原创 阿里巴巴发布智能运维故障管理AI+生态计划
摘要: 为响应马老师“家国情怀,世界担当”的号召,开放“AI+”生态计划,将让集团内部服务过程中积累下的技术与经验更好地回馈社会,任何企业或合作伙伴均可以简单方便的接入阿里巴巴智能故障管理平台,通过对接入数据的训练学习实时提供异常检测、关联分析、根因定位的能力,使原有的IT管理模型瞬间实现低成本的智能化升级,为IT同行们更便捷的提升工作效率、降低人力成本尽一份绵薄之力。 6月7日,20...
2018-06-14 17:36:24 984
原创 阿里云弹性计算Apsara Block Storage正式发布 构建企业级分布式块存储服务平台
摘要: 6月13日,阿里云宣布弹性计算Apsara Block Storage产品正式发布,为企业级客户量身打造,构建高性能、弹性、可靠的大规模分布式块存储服务平台。 Apsara Block Storage可兼容多种类型的计算平台,包括阿里云ECS、ZStack、OpenStack、Kubernetes以及物理服务器等不同类型,帮助客户轻松应对云时代下海量存储资源的敏捷存取需求,适用于政府、金融...
2018-06-14 17:13:12 351
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人