- 博客(68)
- 收藏
- 关注
RSS订阅
原创 Quick BI功能篇之（一）：20分钟入门
Quick BI功能篇之<一>20分钟入门前言： 最近小编帮助隔壁团队一个小姐姐解决了个大难题：给老板汇报业绩分析，频次提高、效率提升，还得保证团队中的小伙伴们都得有点大数据时代的基本数据能力。小编觉得这么好的经验可以分享给更多志同道合的朋友们，所以决定加班加点，推出Quick BI的功能、场景及技巧分享系列，为大数据时代舔砖加瓦！ Quick BI是阿里云上面...
2018-12-27 15:16:46
16862
原创 微服务配置中心实战：Spring + MyBatis + Druid + Nacos
在结合场景谈服务发现和配置中我们讲述了 Nacos 配置中心的三个典型的应用场景，包括如何在 Spring Boot 中使用 Nacos 配置中心将数据库连接信息管控起来，而在“原生”的 Spring 中可以怎么使用 Nacos 配置中心呢？很多基于 Spring MVC 框架的 Web 开发中，Spring + MyBatis + Druid 是一个黄金组合，在此基础上融入 Nacos 配置中心...
2018-12-29 15:46:52
249
原创 弹性网卡支持私网多IP
分配私网多IP目前私网多IP功能只支持IPv4且白名单开放，白名单申请请提交工单。 您需要一台支持私网多IP的ECS。支持私网多IP的ECS规格可通过接口DescribeInstanceTypes查询。 为ECS的主网卡或辅助网卡分配私网多IP。分配私网多IP接口AssignPrivateIpAddresses。查询分配的IP地址接口DescribeNetworkInterfaces。 ...
2018-12-29 15:45:08
864
原创 微服务浪潮中，程序猿如何让自己 Be Cloud Native
前言CNCF 与 Cloud Native 这两个技术词汇最近频频走进了程序员的视野，一切和他能搭上边的软件意味着标准、开放、时尚，也更能俘获技术哥哥们的心；这篇文章不想去带大家重温这个词汇后面的软件体系，笔者觉得单凭用到了这些开源软件，不等于我们自己的软件就已经是 Cloud Native，在使用哑铃和成为肌肉男之间还隔着科学使用和自律锻炼两道工序；在此，笔者想根跟大家聊聊让我们的应用真正变...
2018-12-29 15:43:54
122
原创 Nacos v0.7.0：对接CMDB，实现基于标签的服务发现能力
Nacos近期发布了0.7.0版本，该版本支持对接第三方CMDB获取CMDB数据、使用Selector机制来配置服务的路由类型、支持单机模式使用MySQL数据库、上线Node.js客户端，并修复了一些bug。-> “阿里巴巴中间件”微信公众号后台发送 “Nacos”，了解更多项目信息。对接CMDB实现就近访问在服务进行多机房或者多地域部署时，跨地域的服务访问往往延迟较高，...
2018-12-28 15:29:42
341
原创 如何更高效的管理原生微服务应用
阿里云分布式应用服务EDAS 最近发布了支持原生Dubbo和Spring Cloud应用功能的新版本，此功能是以非侵入方式支持的，且几乎不需要修改任何代码。在此我们体验了一下如何在EDAS上部署原生Dubbo和Spring Cloud应用。原生Dubbo应用自从阿里重启Dubbo维护以来，其热度迅速蹿升，Github上的星标数已经达到了2.2万个之多，可谓中国开源软件界的明星产品。但是作为...
2018-12-28 15:27:43
188
原创 如何在 Intellij IDEA 更高效地将应用部署到容器服务 Kubernetes
前言在之前的一篇文章中，我们介绍了 如何将一个本地的 Java 应用程序直接部署到阿里云 ECS ，有不少读者反馈，如果目前已经在使用阿里云容器服务 Kubernetes 了，那该如何配合这个插件部署应用呢？在本文中，我们来介绍 部署应用程序到阿里云容器服务 Kubernetes 。关于容器服务 Kubernetes容器服务 Kubernetes 版提供高性能可伸缩的容器应用管理能...
2018-12-28 15:26:29
1126
原创 阿里巴巴AI夺肝结节诊断两项世界冠军，至今无人超越
在澳门用人工智能预测流感趋势后，阿里巴巴还在继续探索如何用科技保障人类健康，这一次是更准确地测量肝结节。12月28日消息，在全球LiTS(Liver Tumor Segmentation Challenge，肝脏肿瘤病灶区CT图像分割挑战)上，阿里巴巴从近百支科学家队伍中脱颖而出，已获得两项第一，至今无人超越。肝病是困扰人类的重大公共卫生威胁，考古显示4500年前的人类骨骼中甚至就有最...
2018-12-28 15:24:17
386
原创 Quick BI 支持多种数据源进行多维分析
Quick BI 支持多种数据源进行多维分析 一、摘要随着互联网的高速发展，数据量爆发式增长的同时，数据的存储形式也开始呈现出多样性，有结构化存储，如 Mysql, Oracle, SQLServer 等，半结构化甚至非结构化存储，如HBase，OSS 等。那么从事数据分析的人员就面临着从多种多样的数据存储形式中提取数据而后进行多维分析，这将是一件非常具有挑战的事情。而Quick BI...
2018-12-27 15:14:24
510
原创 DataWorks2.0的“业务流程”与1.0的“工作流”的对比
DatwWorks终于升级2.0了，心情万分激动之余，又有一丝担忧。因为，没法再创建新的旧版工作流了。。。新版抛弃了“工作流”这个概念，引入了“业务流程”和“解决方案”两个新的概念。于是，作为团队Leader，我花了很大的精力去钻研这两个概念到底该如何应用在我的实际业务中。1.目的能尽快应用DataWorks2.0的诸多给力新功能；尽快解决掉由于无法新建旧版工作流引起的不便；2.旧...
2018-12-27 15:11:20
440
原创 MaxCompute小文件问题优化方案
小文件背景知识小文件定义分布式文件系统按块Block存放，文件大小比块大小小的文件（默认块大小为64M），叫做小文件。如何判断存在小文件数量多的问题查看文件数量desc extended + 表名判断小文件数量多的标准1、非分区表，表文件数达到1000个，文件平均大小小于64M2、分区表: a) 单个分区文件数达到1000个，文件平均大小小于64M， ...
2018-12-27 15:10:37
554
原创 MaxCompute/DataWorks权限问题排查建议
MaxCompute/DataWorks权限问题排查建议__前提：__MaxCompute与DataWorks为两个产品，在权限体系上既有交集又要一定的差别。在权限问题之前需了解两个产品独特的权限体系。MaxCompute：计算引擎MaxCompute底层计算引擎有自己的安全权限体系，包括ACL、Policy授权体系。具体可以了解：https://help.aliyun.com/d...
2018-12-27 15:09:30
322
原创 sysbench的框架实现介绍
sysbench是一个非常经典的综合性能测试工具，它支持CPU，IO，内存，尤其是数据库的性能测试。那它是怎么做到通用性的呢，总结一句话是大量运用了重载的方法。sysbench总体架构sysbench是一个总体框架，它用来操作各个测性能的计算，那各个部门只需要做的一件事情是声明需要的实现。只要理解了这三个struct就可以了：/* 某个测试用例的整体结构 */typedef str...
2018-12-26 15:34:42
209
原创 最佳实践：阿里云VPC、ECS支持IPv6啦！
12月6日，阿里云宣布为企业提供全栈IPv6解决方案。阿里云专有网络VPC、云服务器ECS，作为阿里云的核心产品，也于2018年11月底上线双栈VPC、双栈ECS，目前正在对外公测中。那么如何在阿里云拥有IPv4/IPv6双栈VPC、双栈ECS呢，请看下文详解。操作概览操作详情（一）VPC开通IPv6前提：您已经获取阿里云IPv6使用资格，点我申请公测资格1.1、登...
2018-12-26 15:32:54
5469
原创 一张图看懂阿里云网络产品【十五】IPv6 解决方案
快速链接：【申请IPv4/IPv6双栈VPC公测资格】【申请IPv6 解决方案专家咨询】【IPv6 解决方案官网详情页】【IPv6 转换服务官网详情页】 原文链接本文为云栖社区原创内容，未经允许不得转载。...
2018-12-26 15:19:38
301
原创 阿里云POLARDB如何帮助百胜软件应对数据库的“巅峰时刻”
POLARDB是阿里云自研的下一代关系型云数据库，100%兼容MySQL，存储容量最高可达100TB，性能最高提升至MySQL的6倍，适用于企业多样化的数据库应用场景。POLARDB采用存储和计算分离的架构，所有计算节点共享一份数据，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务。本文就介绍了百胜软件的阿里云数据库最佳实践，为大家分享POLARDB如何帮助百胜应对数...
2018-12-26 15:17:20
274
原创 2018年阿里云NoSQL数据库大事盘点
NoSQL一词最早出现在1998年。2009年Last.fm的Johan Oskarsson发起了一次关于分布式开源数据库的讨论，来自Rackspace的Eric Evans再次提出了NoSQL概念，这时的NoSQL主要是指非关系型、分布式、不提供数据库设计模式。从2009年开始，NoSQL开始逐渐兴起和发展。回望历史应该说NoSQL数据库的兴起，完全是十年来伴随互联网技术，大数据数据的兴起和...
2018-12-26 15:13:15
511
原创 如何打造7*24h持续交付通道？阿里高级技术专家的5点思考
云效鼓励师导读：打造7*24小时的持续交付通道是很多技术团队梦寐以求的事情，那么如何才能实现呢？阿里高级技术专家施翔带来了他的思考。此外，文末我们还为大家首次推出了阿里敏捷教练团队倾心打造的提升研发效能36计课程之“看板+站会”相关内容课程，欢迎报名。 我们对于研发效能的讨论，本质上是提高整个技术生态中的协同效率。如果仅从研发角度出发，技术团队要实现的终极目标是7*24小时的灵活发布窗...
2018-12-25 15:22:47
388
原创 全球银行网站成黑客主攻目标 阿里云提供安全防御应急方案
近日，阿里云监控发现，匿名者（Anonymous）组织成员正在发起针对全球中央银行网站的攻击行动，截止目前，国内有超过2家以上的重要网站被攻击，攻击特征主要为DDoS攻击和CC攻击。此次事件中，阿里云通过威胁情报发现，该攻击的主要特征是DDoS和CC攻击，目前，攻击已经造成多家网站不间断的无法访问，阿里云安全专家分析本次攻击有5大特征：攻击时间范围在2018年11月12日凌晨6点13分...
2018-12-25 15:19:06
161
原创 ThinkPHP v5 新漏洞攻击案例首曝光，阿里云已可告警并拦截
2018年12月10日，ThinkPHP v5系列发布安全更新，修复了一处可导致远程代码执行的严重漏洞。阿里云态势感知已捕获多起基于该漏洞的真实攻击，并对该漏洞原理以及漏洞利用方式进行分析。现在，对于云上未及时进行系统更新的用户，阿里云态势感知已提供攻击告警，WAF产品支持同步拦截，目前云上客户基本未受到影响。此次漏洞由ThinkPHP v5框架代码问题引起，其覆盖面广，且可直接远程执行任何代...
2018-12-25 15:17:23
388
原创 阿里云—Gartner 2018 亚太区WAF魔力象限唯一云WAF提供商
近日，Gartner发布亚太区2018年度Web应用防火墙(简称“WAF”)魔力象限报告，阿里云WAF凭借成熟的产品能力和完善的服务体系成功入围，且是唯一一家进入该魔力象限的云WAF提供商。报告指出，“从长期来看，Gartner预计云WAF将获得更大的发展势头，因为亚太地区越来越多的企业看到了云WAF服务自动弹性扩容以及快速与其他Web应用防护服务集成的能力优势。”目前，阿里云WAF服务节...
2018-12-25 15:14:29
366
原创 阿里毕玄：阿里十年，从分布式到云时代的架构演进之路
这是一篇来自鲲鹏会的文章，其内容是毕玄在TGO 鲲鹏会杭州分会活动现场分享的《云时代的软件架构》的整理。特别转载到云栖社区，让更多开发者深入了解阿里架构的变迁和对云技术的一些新的想法。2018 年 12 月 15 日，TGO 鲲鹏会杭州分会拉开了 TGO 特有的技术人年会「E 家宴」的帷幕，60+CTO/ 技术 VP 相聚在杭州殊胜龙井酒店。其中，阿里巴巴系统软件、中间件、研发效能负责人毕玄，...
2018-12-24 15:19:25
4223
原创 阿里云HBase推出全新X-Pack服务 定义HBase云服务新标准
2018年12月13日，第八届中国云计算标准和应用大会在京召开，会上阿里云HBase宣布推出全新X-Pack服务，支持SQL、时序、时空、图、全文检索能力、复杂分析，从处理到分析全栈式数据库，客户开箱即用，可以满足客户对数据库更丰富的业务处理，以及更易用的需求。同时，全新的云HBase服务具备多项独家企业级能力，包括无感知冷热分离、百TB级备份恢复，跨region双活、企业级安全，解决客户成本...
2018-12-24 15:09:59
265
原创 阿里云成为Hyperledger超级账本全球会员，发力区块链生态建设
2018年12月12日在瑞士巴塞尔的2018Hyperledger全球峰会上，阿里云正式加入Hyperledger超级账本项目并成为标准会员。阿里云将会与Hyperledger社区共同推进全球区块链技术和商业生态在多行业领域的建设。Hyperledger超级账本是一个由Linux基金会主持的,旨在推动跨行业区块链技术的开源合作社区，包含了11款商业化区块链和分布式账本技术子项目，如Hype...
2018-12-24 15:08:30
192
原创 阿里云重磅推出物联网设备身份认证Link ID²
2018年12月19日，阿里云宣布推出新版物联网设备身份认证Link ID²及物联网安全运营中心Link SOC，护航万物智联。 随着越来越多的设备连接到网络中，随之而来的安全问题越来越突出。关键基础设施首当其冲 2015~2016年年底，乌克兰电网遭到攻击造成大规模停电!DDoS流量达到T级 2016年美国大规模断网事件，40万路由器故障。物理隔绝也绝非世外桃源 20...
2018-12-24 15:07:02
373
原创 阿里云重磅推出物联网安全运营中心Link SOC
阿里云IoT自主研发了新一代物联网安全平台Link Security，面向IoT设备全生命周期构建了一整套全链路多层次的安全防御体系，IoT物联网平台的业务在不同层面可以按需集成安全能力。1、首先在设备开发阶段，提供了三种安全等级，五类安全载体的可信根，通过安全计算环境来防止物联网设备上应用程序的核心运算逻辑、核心敏感数据不被攻击者窃取。2、在设备生产阶段，提供了产线安全烧录方案，结合统一...
2018-12-24 15:06:09
561
原创 Alibaba Cluster Data 开放下载：270GB 数据揭秘你不知道的阿里巴巴数据中心
打开一篇篇 IT 技术文章，你总能够看到“大规模”、“海量请求”这些字眼。如今，这些功能强大的互联网应用，都运行在大规模数据中心上，然而，对于大规模数据中心，你又了解多少呢？实际上，除了阅读一些科技文章之外，你很难得到更多关于数据中心的信息。数据中心每个机器的运行情况如何？这些机器上运行着什么样的应用？这些应用有有什么特点？对于这些问题，除了少数资深从业者之外，普通学生和企业的研究者很难了解其中细...
2018-12-24 15:05:06
183
原创 视频质量评测标准——VMAF
阿里云视频云直播转码每天都会处理大量的不同场景、不同编码格式的直播流。为了保证高画质，团队借助VMAF标准来对每路转码的效果做质量评估，然后进行反馈、调优、迭代。这么做的原因在于，像动作片、纪录片、动画片、体育赛事这些场景，影响画质的因素各不相同，基于VMAF的视频质量反馈机制，可以在保证画质的前提下，对不同的场景做针对性优化，达到画质最优、成本最低的效果。本文由阿里云视频云高级开发工程师杨洋撰写...
2018-12-21 16:00:00
970
原创 净化网络环境！可信数字内容版权服务解决方案发布
数字时代来临，但盗版的毒瘤深埋其中，全球网络盗版造成的损失也在逐年增加。据行业分析报告研究表明，网络盗版损失从2010年67亿美元，已经飙升至去年的近318亿美元，2022年将达到520亿美元。在创作领域，版权保护是永恒的话题，也是创新的原动力。随着多媒体形态的演进，知识产权相关法律体系在不断完善，新技术也不断涌现。在12月12日的第八届中国云计算与应用大会上，阿里云正式对外发布可信数字内容版...
2018-12-21 15:58:07
335
原创 如何用sysbench做好IO性能测试
sysbench 是一个非常经典的综合性能测试工具，通常都用它来做数据库的性能压测，但也可以用来做CPU，IO的性能测试。而对于IO测试，不是很推荐sysbench，倒不是说它有错误，工具本身没有任何问题，它的测试方法导致测试的数据会让人有些困惑：性能数据到底是不是这样呢，跟云厂商承诺的性能有关系嘛。一般我们都用FIO来进行性能测试，云厂商都推荐用FIO进行性能测试，通过FIO性能测试，都能轻易达...
2018-12-21 15:56:11
230
原创 作为互联网流量入口，CDN日志大数据你该怎么玩？
CDN是非常重要的互联网基础设施，用户可以通过CDN，快速的访问网络中各种图片，视频等资源。在访问过程中，CDN会产生大量的日志数据，而随着如今越来越复杂的网络环境变化，和业务的迅速增长，日志数据变得更大量、更多维度，同时其稳定性和报警监控的要求越来越高。这些数据通常都与用户的下一步业务决策息息相关。通过对CDN访问日志的分析，可以挖掘出大量有用的信息作为监控、报警、渠道分析、运营分析的数据来...
2018-12-21 15:54:19
370
原创 CRI 与 ShimV2：一种 Kubernetes 集成容器运行时的新思路
Kubernetes 项目目前的重点发展方向，是为开发者和使用者暴露更多的接口和可扩展机制，将更多的用户需求下放到社区来完成。其中，发展最为成熟也最为重要的一个接口就是 CRI。2018 年，由 containerd 社区主导的 shimv2 API 的出现，在 CRI 的基础上，为用户集成自己的容器运行时带来了更加成熟和方便的实践方法。本次演讲分享了关于 Kubernetes 接口化设计、C...
2018-12-20 14:39:45
1145
原创 阿里巴巴持续投入，etcd 正式加入 CNCF
2018 年 12 月 11 日，在 KubeCon + CloudNativeCon 北美峰会上，etcd 项目正式加入云原生计算基金会（CNCF）。CNCF 是一个厂商中立的基金会、云原生技术推广和普及的领导者。 etcd 在 2013 年由李响，Brandon Philips, Alex Polvi 发起。etcd 帮助分布式系统存储关键性的元信息和协调分不同组件的行为。在过去的 5 年...
2018-12-20 14:35:04
316
原创 阿里系统软件迎战“双11”超高流量峰值全纪录
刚刚过去的 2018 年天猫“双11”，创下了全天 2135 亿 GMV 的数字奇迹，零点交易峰值比往年提升 50%，各项指标均创下历史新高。2018 年是“双11”的第十年，也是阿里系统软件事业部参与的第二个“双11”，系统软件是介于业务应用和 IDC、网络、服务器之间的核心关键层，为阿里巴巴集团在线业务提供基础的操作系统、资源调度、SRE、JVM 等领域重要的基础设施。经过两年“双11...
2018-12-20 14:33:45
522
原创 从SQL Server CloudDBA 看云数据库智能化
最近阿里云数据库SQL Server在控制台推出了CloudDBA服务，重点解决数据库性能优化领域问题，帮助客户更好的使用好RDS数据库，这是继MySQL之后第二个关系型数据库提供类似的服务。数据库可认为是系统运行的关键，因为它存储数据，确保事务一致性，是企业的核心资产。一般大型企业都有专职的数据库管理员（DBA）来负责数据库的日常运维管理，这些管理工作的好坏其实非常依赖于DBA的经验。一个好...
2018-12-20 14:31:32
215
原创 2018年终盘点：阿里云数据库RDS核心能力演进
云计算已经进入普及期，不少企业开始从自建数据中心转向云计算。在云计算资源的使用上，从最开始只是使用IaaS层基础资源，转向使用包括云数据库在内的各类PaaS资源。数据库是企业IT架构的核心部分，RDS关系型数据库服务已经成为企业重度依赖的云服务。过去7年的持续发展，2018年阿里云首次进入Gartner的数据库魔力象限，能够入选Gartner，这是中国数据库厂商的一次突破。阿里云入围Gar...
2018-12-20 14:29:41
497
原创 云栖专辑| 阿里毕玄：程序员的成长路线
2018年12月20日，云栖社区3周岁生日。阿里巴巴常说“晴天修屋顶”，所以我们特别策划了这个专辑——分享给开发者们20个阿里故事，50本书籍。第一位是林昊（毕玄）。在这篇《程序员的成长路线》里，阿里基础设施负责人毕玄结合自己的经历跟大家讲述了他在各个角色上成长的感受。在他的职业经历中，在成长方面经历了技术能力的成长、架构能力的成长，以及现在作为一个在修炼中的技术 Leader 的成长。其中技...
2018-12-20 09:50:29
166
原创 阿里巴巴在内蒙古旱区试水物联网灌溉技术，一年省出1.5个西湖
阿里巴巴正用物联网技术解决干旱地区的灌溉问题，通过搭建农业物联网平台，全面监测农作物的生长状态，从而匹配最节约的灌溉方案。12月19日试验区研究人员得出预测结果：一年可以省出1.5个西湖的水。一直以来干旱是困扰人类的重要环境问题，2000年前曾导致玛雅文明的毁灭。在现代中国，干旱问题依然存在，数据显示2017年全国3亿亩耕地就受干旱威胁。导致无水可浇的不只是自然原因，更多是人为导致。在...
2018-12-19 15:23:38
6802
10
原创 MaxCompute表设计最佳实践
MaxCompute表设计最佳实践产生大量小文件的操作MaxCompute表的小文件会影响存储和计算性能，因此我们先介绍下什么样的操作会产生大量小文件，从 而在做表设计的时候考虑避开此类操作。使用MaxCompute Tunnel SDK上传数据，上传过程中，每commit一次就会产生一个文件。这时每 个文件过小(比如几K)，并且频繁上传(比如5秒上传)一次，则一小时就会产生720个小...
2018-12-19 15:10:04
194
原创 零距离接触阿里云时序时空数据库TSDB
概述最近，Amazon新推出了完全托管的时间序列数据库Timestream，可见，各大厂商对未来时间序列数据库的重视与日俱增。阿里云TSDB是阿里巴巴集团数据库事业部研发的一款高性能分布式时序时空数据库，在即将过去的2018年，我们对TSDB进行了多次的系统架构改进，引入了倒排索引、无限时间线支持、时序数据高压缩比算法、内存缓存、数据预处理、分布式并行聚合、GPU加速等多项核心技术，并且引入...
2018-12-19 15:08:54
3274
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人