自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(53)
  • 收藏
  • 关注

转载 15 年工龄的资深技术专家职场历程自述

春节前的空档,正是静下来,回顾过往、畅想未来的最佳时期。去年的这个时候,我们分享过一篇《一位 70 后程序员的 26 个职场感悟》。今年,我们同样分享一篇关于职场感悟的长文。本文是阿里巴巴资深技术专家崮德在内网的一篇分享,回顾了自己在大学时代、创业时期、硬件公司、互联网公司的一些经历和思考。欢迎您在文末留言,聊聊自己或身边人的职场经历,我们将随机挑选 2 位寄出“阿里云定制台历”各一本。我认...

2020-01-20 17:14:41 543

转载 还记得那个提速 8 倍的IDEA插件吗?VS Code 版本也发布啦!

去年,阿里云发布了本地 IDE 插件 Cloud Toolkit,仅 IntelliJ IDEA 一个平台,就有 15 万以上的开发者进行了下载,体验了一键部署带来的开发便利。时隔一年的今天,阿里云正式发布了 Visual Studio Code 版本,全面覆盖前端开发者,帮助前端实现一键打包部署,让开发提速 8 倍。VSCode 版本的插件,目前能做到什么?安装插件之后,开发者可以立即体验以...

2020-01-20 16:39:09 1195

转载 阿里员工一天有26小时,怎么做到的?

据说阿里员工 1 天有 26 小时,真的吗?答案就藏着阿里同学的日常工作中。阿里人一天的工作日常,是一场办公黑科技展,更是一部“时间减史”。今天有幸来到号称“宇宙西厂”的阿里巴巴西溪园区逛逛,亲身体验下阿里人的一天,感受员工的数字化办公和生活。早晨上班,通过人脸识别直接刷脸进入办公大楼。来到工位,感觉室内温度有点高,不用再到处找开关或是打电话求助,手机直接调节。开会前在手机上收到一...

2020-01-17 16:40:42 1129

转载 小米流式平台架构演进与实践

小米业务线众多,从信息流,电商,广告到金融等覆盖了众多领域,小米流式平台为小米集团各业务提供一体化的流式数据解决方案,主要包括数据采集,数据集成和流式计算三个模块。目前每天数据量达到 1.2 万亿条,实时同步任务 1.5 万,实时计算的数据 1 万亿条。伴随着小米业务的发展,流式平台也经历三次大升级改造,满足了众多业务的各种需求。最新的一次迭代基于 Apache Flink,对于流式平台内部模块...

2020-01-17 16:03:41 327

转载 基于 Flink 构建 CEP 引擎的挑战和实践

背景及现状奇安信集团作为一家网络安全公司,专门为政府、企业,教育、金融等机构和组织提供企业级网络安全技术、产品和服务,奇安信的 NGSOC 产品的核心引擎是一个 CEP 引擎,用于实时检测网络攻击,其技术演进过程如下图所示。 2015 年开始使用基于 Esper 的 CEP 方案,但是当时遇到了很多问题,其中最显著的是性能问题,因为 Esper 对于规则条目的支持数量不多,一般情况下超过几十...

2020-01-17 15:26:12 637

转载 实时计算在贝壳的实践

摘要:Apache Flink 是一个分布式大数据处理引擎,可对有限数据流和无限数据流进行有状态计算。本文由贝壳找房的资深工程师刘力云将带来Apache Flink技术在贝壳找房业务中的应用,通过企业开发的实时计算平台案例的分享帮助用户了解Apache Flink的技术特性与应用场景。业务规模及演进下图为贝壳找房的业务场景示意图。最上层为贝壳找房公司最为主体的四大业务:二手房交易、新房交易...

2020-01-17 14:51:59 564

转载 阿里巴巴大规模应用Flink的踩坑经验:如何大幅降低 HDFS 压力?

众所周知 Flink 是当前广泛使用的计算引擎,Flink 使用 checkpoint 机制进行容错处理[1],Flink 的 checkpoint 会将状态快照备份到分布式存储系统,供后续恢复使用。在 Alibaba 内部我们使用的存储主要是 HDFS,当同一个集群的 Job 到达一定数量后,会对 HDFS 造成非常大的压力,本文将介绍一种大幅度降低 HDFS 压力的方法 -- 小文件合并。背...

2020-01-17 14:15:41 243

转载 阿里云RDS vs 自建MySQL,这篇评测终结你的选择困难症!

云,为IT基础设施的构建带来很大的便利性。数据库,作为云中非常重要的一类产品,正有越来越多的客户选择使用。但在使用云端数据库时,经常有两类做法:一是通过ECS自建数据,二是直接使用云提供的数据库产品。那么这两类做法,有什么差异?用户又该如何选择呢?下面通过在阿里云平台的一组测试,给你带来答案!1. 测试概述本测试对比了阿里云中ECS自建数据库(5.7/8.0版本)和RDS通用实例,在OL...

2020-01-16 16:28:34 451

转载 云上数据统一备份 - 混合云备份服务云存储备份功能正式商用

2019年12月,阿里云混合云备份服务HBR(Hybrid Backup Recovery, 以下简称HBR)云存储备份功能正式商业化,可备份阿里云上ECS文件/应用、OSS对象存储及NAS文件存储,客户只需使用HBR一款产品,即可保护阿里云上各种云存储,满足云上广大用户的数据安全需求。HBR产品刚刚斩获了由中国存储委员会会务组、CCF专委会提名,奖项主办方第三方存储行业媒体DOIT承办的中国存储...

2020-01-16 14:57:08 312

转载 阿里云上数据统一备份 – 混合云备份服务解析

近年来,随着越来越多的企业从传统经济向数字经济转型,云已经渐渐成为数据经济IT新常态。核心业务系统上云,云上的业务创新,这些都产生了大量的业务数据,这些数据也成为了企业最重要的资产、资源。任何数据损失都可能对业务带来严重影响,但是勒索病毒,黑客攻击,人为误操作,运维失误,乃至机房灾难的威胁随时可能带来数据损失。备份是数据保护的核心手段,更是等级保护,行业合规的硬性要求。阿里云混合云备份服务(...

2020-01-16 14:18:42 1139

转载 阿里巴巴资深技术专家崮德:8 个影响我职业生涯的重要技能

我是上个世纪, 1998 年考入浙江大学的,读的是电子工程,但是在大学期间情不自禁爱地上了计算机,当时在学校学的是汇编语言,C 和 C++ ,也钻研过微软的 VC++ 。经历过点亮第一个 8051 板子的 LED 灯而兴奋不已,虽然当时的 LED 灯珠是直接用 8051 的 GPIO 口驱动的(没有考虑驱动电流能力)。后来大三的时候,闲不住的自己,直接去外面的软件公司兼职打工,在其中一家通信设备...

2020-01-15 16:26:28 487

转载 稳定性专题 | Spring Boot 常见错误及解决方法

导读『StabilityGuide』是阿里多位阿里技术工程师共同发起的稳定性领域的知识库开源项目,涵盖性能压测、故障演练、JVM、应用容器、服务框架、流量调度、监控、诊断等多个技术领域,以更结构化的方式来打造稳定性领域的知识库,欢迎您的加入。✅ @GitHub :https://github.com/StabilityMan/StabilityGuideSpring Boot 作为 Java...

2020-01-15 15:06:51 249

转载 “云”端的语雀:用 JavaScript 全栈打造商业级应用

语雀是什么?语雀是一个专业的云端知识库,面向个人和团队,提供与众不同的知识管理,打造轻松流畅的工作协同,它提供各种格式的在线文档(富文本、表格、设计稿等)编辑能力,支持实时在线多人协同编辑,数据云端保存不丢失。而语雀与其他文档工具最大的不同是,它通过知识库来对文档进行组织,让知识创作者更好的管理知识。语雀技术架构演进原型阶段语雀诞生于 2016 年,当时蚂蚁金融云需要一个工具来承载它的文...

2020-01-15 14:34:36 562

转载 从零开始入门 K8s | GPU 管理和 Device Plugin 工作机制

本文整理自《CNCF x Alibaba 云原生技术公开课》第 20 讲。导读:2016 年,随着 AlphaGo 的走红和 TensorFlow 项目的异军突起,一场名为 AI 的技术革命迅速从学术圈蔓延到了工业界,所谓 AI 革命从此拉开了帷幕。该热潮的背后推手正是云计算的普及和算力的巨大提升。需求来源经过近几年的发展,AI 有了许许多多的落地场景,包括智能客服、...

2020-01-15 13:56:12 463

转载 Kubernetes 会不会“杀死” DevOps?

导读:DevOps 这个概念最早是在 2007 年提出的,那时云计算基础设施的概念也才刚刚提出没多久,而随着互联网的逐渐普及,应用软件的需求爆发式增长,软件开发的理念也逐渐从瀑布模型(waterfall)转向敏捷开发(agile)。传统的软件交付模式(应用开发人员专注于软件开发、IT 运维人员负责将软件部署到服务器运行),再也无法满足互联网软件快速迭代的需求。于是,DevOps 作为一种打破...

2020-01-14 16:11:12 126

转载 阿里云,实力与担当并存!

2019年我们荣幸的参与多场国家级重大活动护航喜获多个国家级认可和荣誉成为安全技术“国家队”主力选手但,荣誉与责任并存!2020年,我们依然会不忘初心,砥砺前行为保卫国家网络空间安全,全力以赴! 本文作者:云安全专家原文链接本文为阿里云内容,未经允许不得转载。...

2020-01-14 15:34:05 242

转载 首届阿里白帽大会成功举办,用技术“肩天下”

1月10日,首届阿里白帽大会在杭州举办。本届大会由阿里巴巴安全响应中心ASRC与阿里云先知联合举办,是ASRC生态大会与先知白帽大会的首次合体亮相,来自中国、印度、巴基斯坦、法国、新加坡等世界各地的知名研究人员与近200位知名白帽子现场参与。大会现场首届阿里白帽大会 以纯粹技术追求为目标现任阿里云安全总监王昱,知名白帽猪猪侠,在开场致辞中表示,“网络安全环境越来越好,国家对网络安全的重视让...

2020-01-14 14:58:16 240

转载 DataV数据可视化年度峰会——唤醒数据,看见未来

12月23日,2019数据可视化年度峰会在阿里巴巴西溪园区白马山庄举行,峰会以“唤醒数据,看见未来”为主题,邀请著名专家学者及一线行业实践者结合自身实践与感悟,与现场业界来宾分享主题演讲。百余位业界KOL齐聚一堂,深入解读数据可视化研发生态,剖析可视化商业化应用的前景和机会,共同探讨了如何创建创新共赢的数据可视化环境。(现场的气氛可谓是热火朝天啊!还有站在后面的小伙伴,可谓是一票难求)没有抢...

2020-01-14 14:17:39 535

转载 支付宝移动端 Hybrid 解决方案探索与实践

目前 mPaaS H5 容器 Demo 源码已发布至 GitHub,全新的接入方式让你可以一键集成 mPaaS 环境并快速接入 H5 容器,体验统一的容器和内核,获取媲美原生的 Hybrid 方案及完美的动态能力。时间: 1月15日15:00 — 16:00主题: 移动开发平台mPaaS重磅发布详情:https://m.aliyun.com/markets/aliyun/...

2020-01-14 13:42:28 1001

转载 大数据上云第一课:(1)MaxCompute授权和外表操作躲坑指南

一、子账号创建、AK信息绑定如果您是第一次使用子账号登录数加平台和使用DataWorks,需要确认以下信息: 该子账号所属主账号的企业别名。 该子账号的用户名和密码。 该子账号的AccessKey ID和AccessKey Secret。 确认主账号已经允许子账号启用控制台登录。 确认主账号已经允许子账号自主管理AccessKey。1、子账号创建(1)创建子账号(2)绑定AK...

2020-01-13 16:37:41 813

转载 函数计算支持应用中心功能

前言函数计算是事件驱动的全托管计算服务。使用函数计算,您无需采购与管理服务器等基础设施,只需编写并上传代码。函数计算为您准备好计算资源,弹性地可靠地运行任务,并提供日志查询、性能监控和报警等功能。借助函数计算,您可以快速构建任何类型的应用和服务,并且只需为任务实际消耗的资源付费。使用函数计算可以实现一些典型的场景: 基于 oss 触发做图片处理 基于 Puppeteer 做网页截图或者网...

2020-01-13 16:04:10 219

转载 Serverless 解惑——函数计算如何访问 MySQL 数据库

函数计算(Function Compute):函数计算 是事件驱动的全托管计算服务。使用函数计算,您无需采购与管理服务器等基础设施,只需编写并上传代码。函数计算为您准备好计算资源,弹性地可靠地运行任务,并提供日志查询、性能监控和报警等功能。借助函数计算,您可以快速构建任何类型的应用和服务,并且只需为任务实际消耗的资源付费。访问 MySQL 数据库是指在函数计算中通过编写代码调用数据库...

2020-01-13 15:33:00 296

转载 开发函数计算的正确姿势——使用交互模式安装依赖

前言首先介绍下在本文出现的几个比较重要的概念:函数计算(Function Compute): 函数计算是一个事件驱动的服务,通过函数计算,用户无需管理服务器等运行情况,只需编写代码并上传。函数计算准备计算资源,并以弹性伸缩的方式运行用户代码,而用户只需根据实际代码运行所消耗的资源进行付费。函数计算更多信息参考。Fun: Fun 是一个用于支持 Serverless 应用部署的工具...

2020-01-13 14:50:41 121

转载 从零开始入门 K8s | 调度器的调度流程和算法介绍

导读:Kubernetes 作为当下最流行的容器自动化运维平台,以声明式实现了灵活的容器编排,本文以 v1.16 版本为基础详细介绍了 K8s 的基本调度框架、流程,以及主要的过滤器、Score 算法实现等,并介绍了两种方式用于实现自定义调度能力。调度流程调度流程概览Kubernetes 作为当下最主流的容器自动化运维平台,作为 K8s 的容器编排的核心组件 kube-scheduler...

2020-01-13 14:14:06 893 1

转载 Serverless Kubernetes 入门:对 Kubernetes 做减法

导读:Serverless Kubernetes 是阿里云容器服务团队对未来 Kubernetes 演进方向的一种探索,通过对 Kubernetes 做减法,降低运维管理负担,简化集群管理,让 Kubernetes 从复杂到简单。背景Kubernetes 作为通用的容器编排系统,承载了广泛的应用和场景,包括 CI/CD,数据计算,在线应用,AI 等,然而由于其通用性和复杂性,管理一个 Ku...

2020-01-10 15:51:42 119

转载 首次曝光 | 阿里数万名开发者都在使用的数据库开发工具到底长什么样?

除了基础的数据查询开发功能,DMS还内置SQL审核、性能诊断优化、测试数据自动生成、多环境数据对比同步、数据库日志追踪回滚、不锁表变更、访问控制、敏感数据脱敏、安全审计等高端功能。1、丰富的数据源????丰富的数据库类型支持(当前已超过25种,还在不断扩展中) MySQL、SQL Server、PostgreSQL、POLARDB等关系型数据库 DRDS等OLTP数据库 AnalyticDB...

2020-01-10 14:39:34 386

转载 跟我学-域名解析故障排查技巧

天苍苍,野茫茫,网站一瘫,唯有泪两行!!客户跳,老板叫,解析故障,心惊又肉跳!!对企业网站来说,很怕出现网站打不开的情况,一旦发生,准会发现公司技术部呈现一片哀嚎景象。为了让运维的难兄难弟们做个精致的小白领,小编特别为你们总结了一套《域名解析故障排查技巧实操全网最全手册》,并分为“初阶版”“进阶版”,跟我学完保您在排查解析故障方面,脑回路神清晰,分分钟就能定位问题。为了助您减少客户不可用时...

2020-01-10 13:59:43 435

转载 MaxCompute创建仅有查询权限的自定义角色

需求场景在很多的数据开发场景下,MaxCompute项目管理员需要能够提供给某些角色或团队(如开发人员、运维人员)对项目内所有表具备特定权限。例如,某些客户可能需要在生产项目中,给ETL开发团队赋予所有表(或者所有ods开头的表)只读权限,当项目内创建了新表后,对应角色人员可以自动获取到新表的权限,方便开发人员能够快速处理线上数据问题排查。MaxCompute原有的权限模型提供的ACL授权方式...

2020-01-09 16:20:09 1248

转载 MaxCompute问答整理之12月

问题一、MaxCompute内建日期函数,DATEPART函数命令格式为 bigint datepart(datetime date, string datepart)用于提取日期date中指定的时间单位datepart的值。DATETIME类型。如果输入为STRING类型会隐式转换为DATETIME类型后参与运算,其它类型抛异常。但是客户在使用函数的时候没有实现STRING类型隐式转换为DATE...

2020-01-09 15:46:48 1429

转载 阿里云RDS MySQL专属主机组 正式上线,一款用户自主可控的更便宜的RDS服务

2020年1月9号,阿里云数据库RDS MySQL正式上线专属主机组产品,在RDS MySQL的所有能力之外,增值提供更多产品能力,包括数据库主机资源100%独占,提供数据库CPU超配能力。客户通过CPU超配,可实现在离线系统混部、低利用率的多业务系统共享超配CPU资源,可实现降低50%的成本支出。据介绍,RDS MySQL 专属主机组为企业提供可靠、安全、高可用数据库服务,提供和RDS一样的S...

2020-01-09 15:12:04 156

转载 阿里云专有宿主机,构建公共云上的专有资源池

近日,阿里云发布专有宿主机,用户通过独占物理服务器资源,来满足安全合规、性能隔离等诉求,帮助企业级用户轻松构建公共云上的专有资源池。对于企业级用户迁移上云,将会拥有更加丰富的选择。在专有宿主机上创建ECS云服务器,用户不仅在物理级别上和其他租户进行隔离,保证单租户环境性能的稳定性,同时也能拥有阿里云虚拟化管控的所有功能和优势。近年来,云计算已经俨然成为了一种趋势,不仅仅是个人用户、创业公司选择在...

2020-01-09 14:37:36 506

转载 MaxCompute - ODPS重装上阵 第七弹 - Grouping Set, Cube and Rollup

MaxCompute(原ODPS)是阿里云自主研发的具有业界领先水平的分布式大数据处理平台, 尤其在集团内部得到广泛应用,支撑了多个BU的核心业务。 MaxCompute除了持续优化性能外,也致力于提升SQL语言的用户体验和表达能力,提高广大ODPS开发者的生产力。MaxCompute基于ODPS2.0新一代的SQL引擎,显著提升了SQL语言编译过程的易用性与语言的表达能力。我们在此推出MaxC...

2020-01-08 16:08:12 361

转载 MaxCompute - ODPS重装上阵 第六弹 - User Defined Type

MaxCompute(原ODPS)是阿里云自主研发的具有业界领先水平的分布式大数据处理平台, 尤其在集团内部得到广泛应用,支撑了多个BU的核心业务。 MaxCompute除了持续优化性能外,也致力于提升SQL语言的用户体验和表达能力,提高广大ODPS开发者的生产力。MaxCompute基于ODPS2.0新一代的SQL引擎,显著提升了SQL语言编译过程的易用性与语言的表达能力。我们在此推出MaxC...

2020-01-08 15:30:33 206

转载 阿里云 MaxCompute 2019-12 月刊

您好,MaxCompute 2019.12月刊为您带来12月产品、技术最新动态,欢迎阅读。诚邀您参与正在进行的 “MaxCompute 产品调研”, 您的建议和反馈将为产品发展注入最强动力。导读【重要功能发布】【重要文档发布】【精彩活动回顾】【精选技术文章】【12月重要功能发布】1.【新规格】发布包年包月新规格—非预留计算资源 查看文档 >>>MaxC...

2020-01-08 14:50:15 164

转载 轻松搭建基于 Serverless 的文档图片在线转换服务

函数计算(Function Compute):函数计算是一个事件驱动的服务,通过函数计算,用户无需管理服务器等运行情况,只需编写代码并上传。函数计算准备计算资源,并以弹性伸缩的方式运行用户代码,而用户只需根据实际代码运行所消耗的资源进行付费。函数计算更多信息参考。核心优势异构服务:支持多种运行环境用于媒体文件转换的库或者二进制往往和业务的运行环境不同,对计算资源的需求也有较大的差异。函数计...

2020-01-08 14:20:47 118

转载 轻松搭建基于 SpringBoot + Vue 的 Web 商城应用

背景介绍首先介绍下在本文出现的几个比较重要的概念:函数计算(Function Compute): 函数计算是一个事件驱动的服务,通过函数计算,用户无需管理服务器等运行情况,只需编写代码并上传。函数计算准备计算资源,并以弹性伸缩的方式运行用户代码,而用户只需根据实际代码运行所消耗的资源进行付费。函数计算更多信息 参考。Fun: Fun 是一个用于支持 Serverless 应用部署...

2020-01-08 13:45:17 469

转载 一小时快速搭建基于阿里云容器服务-Kubernetes的Web应用

本文面向的读者如果您是一个Kubernetes的初学者,本文可以帮助你快速在云上搭建一个可实际使用的集群环境,并发布自己的第一个应用。你无须提前准备任何的硬件资源或者下载任何的软件包。 如果您已经有一个自建的Kubernetes集群,想要尝试阿里云上的托管集群,本文可以帮助你快速完成上手操作,而无需详细阅读阿里云的帮助文档,从而节省您的时间。您可以在有了端到端的初体验之后,再有选择的...

2020-01-07 16:57:10 292

转载 阿里云正式推出内容平台“云栖号”:全面助力企业和个人上云决策

1月7日,阿里云官网正式推出“云栖号”(https://yqh.aliyun.com/ ),旨在为大家提供第一手的上云资讯,云产品快速入门,来自不同行业精选的企业上云案例,基于众多成功案例萃取而成的最佳实践,助力你进行上云决策,0门槛更轻松的上云。目前,云栖号分为6大版块,分别为热点上云资讯、快速入门、热门案例及最佳实践、热门活动,直播。下面带大家详细了解一下这6大版块内容。一、热点...

2020-01-07 16:25:48 311

转载 云原生安全-更安全的密文管理 Vault on ACK

Vault是什么?如何在云上应用中管理和保护用户的敏感信息是一个经常令开发者头疼的问题,用户的密码口令,证书秘钥等私密信息时常未经加密被随意的放置在配置文件,代码仓库或是共享存储里,而对于普通的开发者来说,设计和实现一套完整的秘钥管理系统是一个很大的挑战。且不论令人生畏的加解密算法,很多的云应用仍然将一些敏感配置信息仅仅经过base64等一些简单的hash运算就放置在某个公共的配置中心上,而很多...

2020-01-07 15:55:26 433

转载 Kubernetes多租户集群实践

如何解决多租户集群的安全隔离问题是企业上云的一个关键问题,本文主要介绍kubernetes多租户集群的基本概念和常见应用形态,以及在企业内部共享集群的业务场景下,基于kubernetes原生和ACK集群现有安全管理能力快速实现多租户集群的相关方案。什么是多租户集群?这里首先介绍一下"租户",租户的概念不止局限于集群的用户,它可以包含为一组计算,网络,存储等资源组成的工作负载集合。而在多租户集群...

2020-01-07 15:18:04 554

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除