存储
阿里开发者
阿里巴巴官方技术号,关于阿里的技术创新均呈现于此。
展开
-
新冠病毒药物研发分秒必争,阿里高性能计算如何出力?
简介: 新冠状病毒疫情发生后,为了帮助抗攻击疫情,阿里云免费向全球公共科研机构提供高性能计算、SCC超级计算集群和CPU/GPU机器、云超算及AI等技术。 近期,不少研究机构和高校在阿里云上E-HPC云超算上进行药物研发相关的数值计算,阿里云超算团队提供了技术支持与跟进。 本文主要介绍药物筛选阶段,E-HPC云超算如何帮助研发人员实现大量小分子库的快速并发处理。同时,介绍全球健康药物研发中心GH...原创 2020-03-10 10:54:53 · 3737 阅读 · 0 评论 -
企业云上安全事件突发,这五个问题值得运维大佬们日常自查!
简介:近日媒体报道,某SaaS公司由于内部员工恶意删库,导致业务停摆、市值蒸发超10亿。如何避免类似事件发生,是值得技术和企业管理人员共同关注的问题。引言近日媒体报道,某SaaS公司由于内部员工恶意删库,导致业务停摆、市值蒸发超10亿。如何避免类似事件发生,是值得技术和企业管理人员共同关注的问题。从技术上看,核心数据库的高风险操作保护可以用类似阿里云DMS这样的产品来管理。但是从企业...原创 2020-03-02 10:44:33 · 3369 阅读 · 0 评论 -
阿里高级技术专家:整洁的应用架构“长”什么样?
简介:作者张建飞是阿里巴巴高级技术专家,入司6年,他创建了COLA。希望可以探索一套切实可行的应用架构规范,这个规范不是高高在上的纸上谈兵,而是可以复制、可以理解、可以落地、可以控制复杂性的指导和约束。本文详述了他对COLA的升级迭代。作者 | 张建飞 很多同学不止一次和我反馈,我们的系统很混乱,主要表现在:应用的层次结构混乱:不知道应用应该如何分层、应该包含哪些组件、组件之...原创 2020-01-22 13:09:33 · 8149 阅读 · 4 评论 -
打造更适合IoT场景的消息队列实践
简介: 随着接触客户越来越多,也越来越颠覆了我对“传统队列”(kafka、rocketmq、rabbitmq...)的看法。 当然本文不是说“传统队列”做得不好, 这些队列系统经过多年打磨,在高性能、海量堆积、消息可靠性等诸多方面都已经做得非常极致了,都做得非常的优秀。 但今天我觉得大家在设计方案时动不动任何一个异步、系统解耦等就来选用队列,然后线上又频繁出一些问题,这些问题的背后我们得看看到底什...原创 2020-01-21 11:25:45 · 8028 阅读 · 0 评论 -
FastGPU + Cloud Shell 极速部署人工智能计算
简介:作者 | 李冬萌 阿里云开放平台高级开发工程师,主要负责阿里云 Cloud Shell,致力于开发者服务,为开发者提供方便、易用、安全的云上运维管理工具FastGPU + Cloud Shell 极速部署人工智能计算Cloud Shell正式集成FastGPU,您可以在Cloud Shell中随时随地在线FastGPU,将您的人工智能算法计算一键构建在阿里云的 IAAS 资源...原创 2020-01-21 11:21:38 · 7054 阅读 · 0 评论 -
百万TPS高吞吐、秒级低延迟,阿里搜索离线平台如何实现?
简介: 作者 | 鸿历 作者简介:王伟骏,花名鸿历,阿里巴巴搜索推荐事业部高级开发工程师。2016年硕士毕业于南京邮电大学。Apache Hadoop && Flink && Eagle Contributor。目前负责阿里巴巴搜索离线平台Runtime层相关工作。 另外,陈华曦(昆仑)给了本文很多建议,文中部分图由李国鼎(石及)贡献。阿里主搜(淘宝天猫搜索)是...原创 2020-01-20 13:21:44 · 7518 阅读 · 0 评论 -
阿里巴巴大规模应用Flink的踩坑经验:如何大幅降低 HDFS 压力?
简介: 众所周知 Flink 是当前广泛使用的计算引擎,Flink 使用 checkpoint 机制进行容错处理[1],Flink 的 checkpoint 会将状态快照备份到分布式存储系统,供后续恢复使用。在 Alibaba 内部我们使用的存储主要是 HDFS,当同一个集群的 Job 到达一定数量后,会对 HDFS 造成非常大的压力,本文将介绍一种大幅度降低 HDFS 压力的方法 -- 小文件...原创 2020-01-10 20:32:08 · 6217 阅读 · 0 评论 -
AliGraph:一个工业级的图神经网络平台
简介: 2019年12月8日,神经网络和深度学习领域的顶会NeurIPS 在加拿大温哥华召开,阿里巴巴计算平台PAI团队和达摩院智能计算实验室开发的Aligraph在Expo Day 现场进行展示。为什么专注于GNN在大数据的背景下,利用高速计算机去发现数据中的规律似乎是最有效的手段。为了让机器计算的有目的性,需要将人的知识作为输入。我们先后经历了专家系统、经典机...原创 2020-01-10 15:44:41 · 8076 阅读 · 0 评论 -
Kubernetes 会不会“杀死” DevOps?
作者丨孙健波(天元) 阿里巴巴技术专家导读:DevOps 这个概念最早是在 2007 年提出的,那时云计算基础设施的概念也才刚刚提出没多久,而随着互联网的逐渐普及,应用软件的需求爆发式增长,软件开发的理念也逐渐从瀑布模型(waterfall)转向敏捷开发(agile)。传统的软件交付模式(应用开发人员专注于软件开发、IT 运维人员负责将软件部署到服务器运行),再也无法满足互联网...原创 2020-01-09 17:14:07 · 4088 阅读 · 0 评论 -
Serverless 实战 —— Funcraft + OSS + ROS 进行 CI/CD
简介: 本文打算以一个简单的函数计算项目为例,在此基础上编写测试用例,进行配置,让其支持 CI/CD 工作流程。实现如下四个小目标:1. CI 被 git commit 提交触发;2. 执行测试(单元、集成和端对端);3. 函数打包上传到 OSS;4. 通过 ROS 部署函数到 Staging 环境。前言首先介绍下在本文出现的几个比较重要的概念:函数计算(Function Compu...原创 2020-01-03 11:38:38 · 3953 阅读 · 0 评论 -
解读容器 2019:把“以应用为中心”进行到底
在下一个十年交替之际,你是否知道,这个看似波澜不惊的云原生技术生态,又在孕育和经历着哪些全新的变革呢?作者| 张磊阿里云高级技术专家、CNCF官方大使,Kubernetes项目资深成员和联合维护者前言在这一年,这个生态具有标志性意义的 KubeCon,史无前例的吸引到了一万两千人涌入圣地亚哥,整个会议的赞助商列表,多到一张十余米长的巨幅海报才堪堪放下。 在...原创 2019-12-31 13:45:09 · 7326 阅读 · 1 评论 -
从零开始入门 K8s:深入剖析 Linux 容器
Linux 容器是一种轻量级的虚拟化技术,在共享内核的基础上,基于 namespace 和 cgroup 技术做到进程的资源隔离和限制。本文将会以 docker 为例,介绍容器镜像和容器引擎的基本知识。容器容器是一种轻量级的虚拟化技术,因为它跟虚拟机比起来,它少了一层 hypervisor 层。先看一下下面这张图,这张图简单描述了一个容器的启动过程。最下面是一个磁盘,容器的镜像...原创 2019-12-30 10:44:04 · 3788 阅读 · 0 评论