机器学习
阿里云技术
阿里云官网内容平台
展开
-
全方位事件监控管理,阿里云日志服务Kubernetes事件中心正式上线
2020年2月21日,阿里云日志服务Kubernetes事件中心正式上线,为Kubernetes事件提供集中化采集、存储、分析、可视化、告警等能力,帮助Kubernetes使用者快速构建准实时、高可靠、全方位的事件监控管理。据介绍,Kubernetes事件中心能够实时将系统中产生的事件采集到中心化的存储系统中,事件中心内置多种可视化报表,通过报表中的各类统计图表,可以迅速了解集群中发生的异常情况...转载 2020-03-06 15:11:49 · 268 阅读 · 0 评论 -
远程办公安全威胁升级,疫情下企业如何自保?
行业趋势本次2019-nCoV病毒的爆发,加速了办公上云和移动的演变过程。无数企业今年的开工都转到了线上,几万人的直播,这种临时性的波峰需求能良好的适配非云莫属。这场突如其来的变故,也催熟了移动办公的需求。员工都在家里,通过自己的移动设备来参与工作。传统企业远程办公即使没有这些,IDaaS专注的密码技术的安全挑战在过去也是与日俱增的。如果说通过对称算法的账户密码方式容易被撞库,今天,即使用...转载 2020-03-06 15:01:24 · 557 阅读 · 0 评论 -
阿里云数据库产品有奖调研
背景:随着云计算的普及和发展,越来越多的用户开始关注并使用云数据库产品,云数据库也日渐成为用户上云标配。面对广大的数据库用户群体,阿里云希望能够更加真切、具体的了解到不同用户的诉求,帮助您解决业务使用场景中遇到的实际问题,助力您的业务安全稳定的发展,阿里云会根据不同用户的使用需求不断升级和迭代数据库产品,提供更安全稳定、性价比高、优质的产品及服务。因此我们希望通过【阿里云数据库产品有奖调研】这份...原创 2020-03-06 14:59:09 · 383 阅读 · 0 评论 -
从RSA2020看合规风向:基于身份的自动化隐私合规管理成趋势
美国当地时间2月24日,RSA大会2020的经典环节创新沙盒(Innovation Sandbox)评选结果出炉,专注于数据隐私保护与合规的创业公司Securiti.ai成功摘得桂冠,成为今年安全行业新风向引领者,再一次引起行业对于隐私合规产品和方案的期待。隐私合规管理从数据为中心向数据与人双中心转变自2018年5月25日GDPR生效至今,数据隐私保护已成为全球安全合规领域的焦点。全球至今有8...转载 2020-03-06 14:53:29 · 1598 阅读 · 0 评论 -
开发函数计算的正确姿势——轻松解决大依赖部署
前言首先介绍下在本文出现的几个比较重要的概念:函数计算(Function Compute): 函数计算是一个事件驱动的服务,通过函数计算,用户无需管理服务器等运行情况,只需编写代码并上传。函数计算准备计算资源,并以弹性伸缩的方式运行用户代码,而用户只需根据实际代码运行所消耗的资源进行付费。函数计算更多信息参考。[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-2G...转载 2020-03-06 14:47:52 · 353 阅读 · 0 评论 -
Serverless 解惑——AWS Lambda 迁移阿里云函数计算指南
概念比较在 AWS Lambda 中,函数是管理 AWS Lambda 的基本资源单位,用户可以在函数级别上授权、配置 CloudWatch 日志。在阿里云函数计算中,除了有函数外还有服务资源。其中,服务是管理函数计算的基本资源单位,可以在服务级别上授权、配置日志和创建函数等;函数是调度与运行的基本单位,也是一段代码的处理逻辑。在阿里云函数计算中,一个服务下可以创建多个函数,每个函数可以设置不...转载 2020-03-05 15:13:22 · 1295 阅读 · 0 评论 -
关于Kubernetes规划的灵魂n问
Kubernetes已经成为企业新一代云IT架构的重要基础设施,但是在企业部署和运维Kubernetes集群的过程中,依然充满了复杂性和困扰。阿里云容器服务自从2015年上线后,一路伴随客户和社区的成长,目前托管着上万的K8s集群来支撑全球各地的客户。我们对客户在规划集群过程中经常会遇见的问题,进行一些分析解答。试图缓解大家的“选择恐惧症”。如何选择Worker节点实例规格?裸金属还是虚拟机...转载 2020-03-05 15:02:50 · 539 阅读 · 0 评论 -
WebAssembly 与 Kubernetes双剑合璧
无处不在的WebAssembly如果评选2019年编程技术的“网红”,无论是前端圈还是后端圈 WebAssembly (WASM) 都绝对能够高票入选。然而,如果评选最被“低估”的技术,我觉得 WebAssembly 也可以轻松入围。借用伏尔泰曾评价神圣罗马帝国的句式 “既不神圣,也不罗马,更非帝国”,我们也可以说WebAssembly “既不限于Web,更不是As...转载 2020-03-05 14:50:50 · 954 阅读 · 0 评论 -
在kubernetes集群中使用虚拟节点创建1万Pod-支持在线教育业务
使用虚拟节点提升k8s集群容量和弹性在kubernetes集群中添加虚拟节点的方式已被非常多的客户普遍使用,基于虚拟节点可以极大提升集群的Pod容量和弹性,灵活动态的按需创建ECI Pod,免去集群容量规划的麻烦。目前虚拟节点已广泛应用在如下场景。在线业务的波峰波谷弹性需求:如在线教育、电商等行业有着明显的波峰波谷计算特征,使用虚拟节点可以显著减少固定资源池的维护,降低计算成本。提升集群...转载 2020-03-05 14:43:36 · 853 阅读 · 0 评论 -
实时计算与SparkSteaming的对比
实时计算概述实时计算阿里云实时计算(Alibaba Cloud Realtime Compute)是一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适应于流式数据处理、离线数据处理等场景,最重要的一点是免运维,可以为企业节省了大量的成本。产品模式阿里云的实时计算产品模式有Flink云原生版和独享模式。目前Flink云原生版支持部署于容器服务ACK提供的Kuber...转载 2020-03-04 14:17:39 · 519 阅读 · 0 评论 -
MaxCompute Spark与Spark SQL对比分析及使用注意事项
以下内容根据演讲视频以及PPT整理而成。本次分享主要围绕以下三个方面:一、功能特性二、代码开发三、DataWorks模式一、功能特性1.Spark部署模式Spark开源文档中表明部署模式支持几种部署模式,如stand alone模式、on yarn模式、on k8s模式等。但是其中并不包括Spark on MaxCompute模式。Spark on MaxCompute其实是 Max...转载 2020-03-04 14:14:20 · 1857 阅读 · 0 评论 -
MaxCompute同步数据的网络配置
MaxCompute可以通过数据集成加载不同数据源(例如:MySQL数据库等)数据,同样也可以通过数据集成把MaxCompute的数据导出到各种业务数据库。数据集成功能已经集成到DataWorks作为数据同步任务进行配置、运行。您可直接在DataWorks上配置MaxCompute数据源,再配置读取MaxCompute表或者写入MaxCompute表任务,数据的导入和导出整个过程只需在一个平台上进...转载 2020-03-04 14:04:22 · 1719 阅读 · 0 评论 -
MaxCompute 搬站的原理、实践以及常见问题
MaxCompute 是阿里巴巴自研的旗舰大数据仓库服务,与开源 Hadoop 搭建的数仓相比,一个很大的不同点是 MaxCompute 并不直接开放类似 HDFS 这样的分布式文件系统的接口,数据进出 MaxCompute 都要经由结构化数据通道 Tunnel。因此已经使用 Hadoop 建仓的用户在选择 MaxCompute 时,首先需要考虑的问题是数据怎么搬迁。搬站形式和使用场景目前其实...转载 2020-03-03 15:31:53 · 603 阅读 · 0 评论 -
函数计算如何访问 SQL Server 数据库
函数计算(Function Compute):函数计算是事件驱动的全托管计算服务。使用函数计算,您无需采购与管理服务器等基础设施,只需编写并上传代码。函数计算为您准备好计算资源,弹性地可靠地运行任务,并提供日志查询、性能监控和报警等功能。借助函数计算,您可以快速构建任何类型的应用和服务,并且只需为任务实际消耗的资源付费。访问 SQL Server 数据库是指在函数计算中通过编写代码调用数据库驱动...转载 2020-03-03 15:20:51 · 528 阅读 · 0 评论 -
架构师成长系列 | 从 2019 到 2020,Apache Dubbo 年度回顾与总结
导读:Apache Dubbo 是一款开源的 RPC 框架,其提供了简单易用、高性能的 RPC 能力、灵活可控的扩展、强大的服务治理,目前已有 Java、Go、JS、Python 等多个语言支持;并且已经悄然衍进为 Cloud Native 基础设施。这一切成就都离不开 Dubbo 社区的建设,本文将由 Apache Dubbo PMC 刘军来介绍 Dubbo 社区在过去的一年取得的成绩及未来 ...转载 2020-03-03 15:15:42 · 284 阅读 · 0 评论 -
【阿里云采购季】3月采购完,IT运维躺赢一年
阿里云2020上云采购季正式上线啦!今年的采购季可以逛些啥?采购季正式期时间:3月2日-3月31日在这段时间里,想买啥就买吧,别忘了把想买的产品加入购物车噢,特惠产品叠加购物车满减,更划算噢!每个会场都有啥福利呢?请戳下方“3月购了”海报,想去哪个会场就去哪个会场。云服务器:链接:https://www.aliyun.com/sale-season/2020/procurement-e...原创 2020-03-02 16:20:42 · 340 阅读 · 0 评论 -
架构师成长系列 | 云原生时代的 DevOps 之道
什么是云原生为了解决传统应用升级缓慢、架构臃肿、不能快速迭代、故障不能快速定位、问题无法快速解决等问题,云原生这一概念横空出世。Pivotal 是云原生应用的提出者,并推出了 Pivotal Cloud Foundry 云原生应用平台和 Spring 开源 Java 开发框架,成为云原生应用架构中先驱者和探路者。早在 2015 年 Pivotal 公司的 Matt Stine 就写了一本叫...转载 2020-03-02 15:27:15 · 434 阅读 · 0 评论 -
手机淘宝短视频业务「哇哦视频」迁移上 FaaS 笔记公开
前言2019 年,在阿里巴巴集团内部技术论坛上对于 Serverless 和 FaaS 的讨论非常火热。在看了那么多“技术原理/顶层设计/平台建设”相关的文章之后,我相信你对 FaaS 肯定产生过跃跃欲试的感觉,但也肯定存在诸多疑惑,例如:FaaS 在业务中能落地吗?FaaS 能帮助前端同学实现能力升级吗?……而这些疑惑对于刚开始接触 FaaS 的我而言,只会多不会少。恰好,我所负...转载 2020-03-02 15:22:38 · 271 阅读 · 0 评论 -
【小程序】轻松构建Serverless架构
前言自 2017 年第一批小程序上线以来,越来越多的移动端应用以小程序的形式呈现。小程序拥有触手可及、用完即走的优点,这大大降低了用户的使用负担,使小程序得到了广泛的传播。在阿里巴巴,小程序也被广泛地应用在淘宝/支付宝/钉钉/高德等平台上。[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-IGKThpub-1583133198033)(https://data-an...转载 2020-03-02 15:13:38 · 331 阅读 · 0 评论 -
Kubernetes API 编程利器:Operator 和 Operator Framework
前言本文是笔者在学习官方文档、相关博客文章和实践过程中,整理了一些知识概念和自己的思考,主要在探索 lstio 的实际应用场景, Sidecar 原理, Service Mesh 为什么出现、要解决什么问题等,帮助我们思考微服务技术架构的升级和落地的可行性。本文不是 Istio 的全部,但是希望入门仅此一篇就够。概念围绕云原生(CN)的概念,给人一种知识大爆炸的感觉,但假如你深入了解每一个...转载 2020-02-28 15:56:00 · 584 阅读 · 0 评论 -
初探 Java agent
引言在本篇文章中,我会通过几个简单的程序来说明 agent 的使用,最后在实战环节我会通过 asm 字节码框架来实现一个小工具,用于在程序运行中采集指定方法的参数和返回值。有关 asm 字节码的内容不是本文的重点,不会过多的阐述,不明白的同学可以自己 google 下。简介Java agent 提供了一种在加载字节码时,对字节码进行修改的方式。他共有两种方式执行,一种是在 main 方法执行...转载 2020-02-28 15:37:59 · 323 阅读 · 0 评论 -
微服务引擎 MSE 在阿里巴巴的技术实践
前言微服务引擎 MSE(官网地址>>) ,是阿里集团配置中心和服务注册中心的云上版本,在集团内广泛应用于分布式一致性协调,注册中心,分布式配置中心等场景。以 2019 年天猫双十一为例,由于 MSE 在稳定性和性能方面持续投入,单集群最大超过 30W 长链接,对于业务团队而言,运维成本大幅下降一倍,管控体验大幅提升。MSE 产品出色的稳定性和性能,获得了标杆客户的高度认可,交出了一份...转载 2020-02-28 15:30:21 · 1021 阅读 · 0 评论 -
Demo:基于 Flink SQL 构建流式应用
Flink 1.10.0 于近期刚发布,释放了许多令人激动的新特性。尤其是 Flink SQL 模块,发展速度非常快,因此本文特意从实践的角度出发,带领大家一起探索使用 Flink SQL 如何快速构建流式应用。本文将基于 Kafka, MySQL, Elasticsearch, Kibana,使用 Flink SQL 构建一个电商用户行为的实时分析应用。本文所有的实战演练都将在 Flink S...转载 2020-02-28 15:24:19 · 477 阅读 · 0 评论 -
微服务治理解密:EDAS 是什么?
本文是《微服务治理解密》系列篇的第一篇文章,为大家介绍 EDAS 是什么。该系列文章基于阿里云商业化产品 EDAS『产品官网 >>』 的微服务实践,如果你的团队具备较强的微服务治理能力,那么希望我们在微服务治理方面的实践和背后的思考,可以为你提供一些参考。EDAS 是什么有很多读者问我在阿里是做什么的,我一般会回答:“我在阿里主要负责 Dubbo、HSF、SpringCl...转载 2020-02-27 16:01:26 · 5881 阅读 · 1 评论 -
视觉智能开放平台通过函数计算赋能实现多人脸口罩识别!
春节期间肺炎疫情来势汹汹,虽然时至今日疫情已得到了有效地控制但是由于复工潮的临近,仍不可掉以轻心。在公共场所对于口罩佩戴的监管依然是关键的疫情防控点,因此口罩佩戴检测是一项核心工作。 疫情当前,阿里云视觉智能开放平台(vision.aliyun.com)紧急推出了基于视觉AI分析的“人脸口罩检测”算法服务,通过对接该服务可快速构建监控系统并可统计人员的口罩佩戴情况,实现疫情防控的AI化,数字化...转载 2020-02-27 15:58:01 · 362 阅读 · 0 评论 -
“热点”场景你真的能驾驭吗?从事电商的朋友必看!
做电商业务的朋友一定不会对“热点” 这个数据库的使用场景感到陌生,大卖家、热点商品、热点库存等等都会遇到,即使在阿里这样电商业务相对非常成熟的体系中“热点”也困扰了业务非常久, 原因就在于“热点”是一个对于数据库业务不太友好的场景, 粗放的利用数据库来存取“热点”业务一定会遇到问题。1、前言在标准的关系型数据库中,由于需要确保事务的ACID, 因此不同的事务在并发更新同一行记录的时候需要完...转载 2020-02-27 15:54:18 · 331 阅读 · 0 评论 -
疫情下AnalyticDB亮出社区管理的宝藏神器 !
1、背景介绍疫情肆虐,有效隔离是尽快战胜病毒的有效手段,多个地方政府都提出了严格的居民出行管理条例,例如杭州市余杭区2月3日发布了实行“十项从严”管控措施:这给社区管理带来新的挑战,传统门卫盯人存在以下几个问题:进出人员情况全凭人工记录,出现错漏,不能及时对频繁外出居民有效劝阻。缺乏全局角度对居民隔离整体情况的掌控和度量,例如有哪些人频繁出入,出入总人数.为了解决居民出入管理的上述...转载 2020-02-27 15:50:02 · 302 阅读 · 0 评论 -
102万行代码,1270 个问题,Flink 新版发布了什么?
阿里妹导读:Apache Flink 是公认的新一代开源大数据计算引擎,可以支持流处理、批处理和机器学习等多种计算形态,也是Apache 软件基金会和 GitHub 社区最为活跃的项目之一。2019 年 1 月,阿里巴巴实时计算团队宣布将经过双十一历练和集团内部业务打磨的 Blink 引擎进行开源并向 Apache Flink 贡献代码,此后的一年中,阿里巴巴实时计算团队与 Apache Fl...转载 2020-02-27 15:46:30 · 287 阅读 · 0 评论 -
为什么说 Flink + AI 值得期待?
去年 11 月的 Flink Forward Asia 2019(以下简称 FFA) 上 Flink 社区提出了未来发展的几个主要方向,其中之一就是拥抱 AI [1]。实际上,近年来 AI 持续火热,各种计算框架、模型和算法层出不穷,从某种角度上来说,这个赛道已经有些拥挤了。在这种情况下, Flink 将怎样拥抱 AI,又会为用户带来什么新的价值?Flink AI 的优劣势分别在哪里?本文将通过对...转载 2020-02-26 14:57:42 · 343 阅读 · 0 评论 -
Flink 1.10 Native Kubernetes 原理与实践
千呼万唤始出来,在 Kubernetes 如火如荼的今天,Flink 社区终于在 1.10 版本提供了对 Kubernetes 的原生支持,也就是Native Kubernetes Integration。不过还只是Beta版本,预计会在 1.11 版本里面提供完整的支持。我们知道,在 Flink 1.9 以及之前的版本里面,如果要在 Kubernetes 上运行 Flink 任务是需要事先指定...转载 2020-02-26 14:50:47 · 607 阅读 · 0 评论 -
Flink 1.10 和 Hive 3.0 性能对比
如今的大数据批计算,随着 Hive 数仓的成熟,普遍的模式是 Hive metastore + 计算引擎。常见的计算引擎有 Hive on MapReduce、Hive on Tez、Hive on Spark、Spark integrate Hive、Presto integrate Hive,还有随着 Flink 1.10 发布后生产可用的 Flink Batch SQL。Flink 作为一...转载 2020-02-26 14:34:21 · 978 阅读 · 0 评论 -
Serverless 解惑——函数计算如何访问 Redis 数据库
函数计算(Function Compute):函数计算是事件驱动的全托管计算服务。使用函数计算,您无需采购与管理服务器等基础设施,只需编写并上传代码。函数计算为您准备好计算资源,弹性地可靠地运行任务,并提供日志查询、性能监控和报警等功能。借助函数计算,您可以快速构建任何类型的应用和服务,并且只需为任务实际消耗的资源付费。访问 Redis 数据库是指在函数计算中通过编写代码调用数据库驱动库通过 T...转载 2020-02-25 15:55:27 · 682 阅读 · 0 评论 -
聊聊 Java 的几把 JVM 级锁
简介 在计算机行业有一个定律叫**“摩尔定律”**,在此定律下,计算机的性能突飞猛进,而且价格也随之越来越便宜,cpu从单核到了多核,缓存性能也得到了很大提升,尤其是多核cpu技术的到来,计算机同一时刻可以处理多个任务。在硬件层面的发展带来的效率极大提升中,软件层面的多线程编程已经成为必然趋势,然而多线程编程就会引入数据安全性问题,有矛必有盾,...转载 2020-02-24 15:42:39 · 238 阅读 · 0 评论 -
我在阿里远程办公
工作日的日常起床,坐班车到公司,用阿里邮箱处理未读邮件,打开语雀,完成当天的工作计划和日课,接着按照工作计划的优先级处理事务,通过 Aone 管理任务进度,完成代码的 CR 和部署,不定时处理钉钉消息,通过阿里郎参加线上会议或到会议室参加线下会议,这是我工作日的一天。由于日常就需要和多个园区、多个城市的同学进行沟通和交流,事实上除了和本团队的同学以外,一直都是远程办公的模式,但是真正在家远程办...转载 2020-02-24 15:35:19 · 440 阅读 · 0 评论 -
阿里云SaaS加速器 “抗疫扶持”计划启动,多项政策助力SaaS行业
各位SaaS领域的创业者们:这两天,一封由238家SaaS企业签署的公开信在网上流传。受疫情影响,交付困难、运营成本压力骤增等挑战正在冲击着每一个SaaS创业者。在这个关键时刻,阿里云愿与SaaS创业者们坚定地站在一起,从技术、资源和渠道全方位为你们加持,共渡难关。阿里云推出SaaS加速器以来,为的就是帮助伙伴更好地做SaaS和卖SaaS,加速SaaS行业发展,“让天下没有难做的SaaS”...转载 2020-02-24 15:26:30 · 576 阅读 · 0 评论 -
基于Dataphin进行主题式查询的小窍门
导读:之前给大家介绍了 Dataphin 的主题式数据查询的相关内容,今天就通过一个案例给大家带来一些基于Dataphin 提供的逻辑 SQL 进行主题式查询使用上的小窍门,希望能帮助大家更好的使用 Dataphin 进行主题式查询。背景:某企业周年庆推出了一些营销活动,老板想查看一下各个门店的在这次活动中的营销效果如何,刚刚学会使用Dataphin的小D接到了这个任务,信心满满。整个过程分为数...转载 2020-02-21 16:55:58 · 828 阅读 · 0 评论 -
Quick BI和Power BI实测比对
摘要:Quick BI和Power BI分别是阿里云和微软云上的官方BI产品,两款产品都是比较好的自助式商业智能软件,都具备云BI的优势,既能够像SaaS运行在阿里云或者Azure云上,又能快速部署到本地的服务器中运行。但是,两款产品还是有非常大的区别的;比如Power BI微软主打的是组合策略,需要Power BI Desktop、Power Query、Excel等多个产品的各自使用;Qui...转载 2020-02-21 16:10:29 · 4736 阅读 · 0 评论 -
保护网站访问安全--阿里云DNS正式支持DNSSEC
近日,云解析DNS正式发布DNSSEC(Domain Name System Security Extensions)功能。DNSSEC功能的发布,意味着云解析DNS在保护网站访问安全的方面,又前进了一大步。那到底什么是DNSSEC,这项技术的给我们带来了什么好处呢。接下来我们一一道来。DNS的工作原理在讲DNSSEC这个功能之前,让我们先来看看DNS的工作原理。我们每个用户,在进行网页浏览的...转载 2020-02-20 16:57:24 · 1388 阅读 · 0 评论 -
云服务器ECS共享标准型S6全新发布,行业内最具性价比
近日,阿里云弹性计算发布全新一代云服务ECS共享标准型S6,性能相对上一代实例提升15%以上,价格相对上一代最高降低42%,是目前国内云计算厂商更能够提供的最具性价比的云服务器产品。一些中小型网站、轻量数据库以及轻量企业应用的客户在阿里云有更多的产品选择,也是个人开发者和小企业的首选。什么是共享型云主机?共享性云主机指的是没有做主机和vCPU绑定的主机类型,该类型云主机使用的vCPU是在物理服...转载 2020-02-20 16:03:39 · 460 阅读 · 0 评论 -
非看不可!飞猪技术专家教你在家高效办公!
为响应国家号召,众多企业选择在家远程办公。然而研发团队彼此不见面, “如何快速了解每位成员的开发进度”、“如何确保研发任务高效推进”等问题困扰着软件研发团队的Leader。为此,小编特别邀请了飞猪技术团队的两位技术专家凡澍和新竹来给大家一些建议,希望可以提高远程办公的效率。本文将从团队层面、个人层面两个维度分别阐述。团队层面每个个体都在服务于“两种团队”- “项目团队”和“职能团队”。项目...转载 2020-02-20 15:59:54 · 499 阅读 · 1 评论