• 博客(9)
  • 资源 (54)
  • 收藏
  • 关注

原创 性能超前,详解腾讯云新一代Redis缓存数据库

背景当前内存数据库发展迅速,用户对于存储系统的要求也越来越高,为了满足各类业务场景的需要,腾讯云设计了新一代的内存数据库,不但保留了原来系统的高性能,高可用等特性,同时还兼容了当前流行的Redis原生协议及使用方式。我们试图在解决原生方案短板的基础上,不断创新,使得新系统同时具备易懂、易用、易维护、高可靠、低成本等特点。主要体现在以下几个方面:1.沿用了上一代自研系统使用共享内存的数据存储方案,避...

2018-03-30 17:20:48 1035

原创 腾讯云存储专家深度解读基于Ceph对象存储的混合云机制

背景毫无疑问,乘着云计算发展的东风,Ceph已经是当今最火热的软件定义存储开源项目。如下图所示,它在同一底层平台之上可以对外提供三种存储接口,分别是文件存储、对象存储以及块存储,本文主要关注的是对象存储即radosgw。基于Ceph可方便快捷地搭建安全性好、可用性高、扩展性好的私有化存储平台。私有化存储平台虽然以其安全性的优势受到越来越多的关注,但私有化存储平台也存在诸多弊端。例如在如下场景中,某...

2018-03-29 10:43:18 1650

原创 剑指Kubernetes 揭秘腾讯云的PaaS技术选型策略(1)

Kubernetes 很火,一大批互联网公司早已领先一步,搭建起专有的 PaaS平台,传统企业们看到的 Kubernetes的趋势,亦不甘落后,在试水的道上一路狂奔……虽然,Kubernetes很火,并不代表可以“上手即用”,基于 Kubernetes的容器编排也不是简单的“拿来主义”。在容器圈,除了Kubernetes,还存在着 Mesos、Swarm等分属不同阵营的容器集群管理工具,以及基于这...

2018-03-26 20:33:40 1083

原创 十万服务器秒级管控 腾讯云如何将AIOps用于日常管理?

1编者按AIOps,是指基于算法的 IT运维(Algorithmic IT Operations),由 Gartner定义的新类别,源自业界之前所说的 ITOA(IT Operations and Analytics)。我们已经到达了这样的一个时代,数据科学和算法正在被用于自动化传统的 IT运维任务和流程。算法被集成到工具里,帮助企业进一步简化运维工作,把人们从耗时又容易出错的流程中解放出来。在过...

2018-03-23 14:51:54 1328

原创 强大核心功能矩阵,详解腾讯云负载均衡CLB高可靠高性能背后架构

1 前言腾讯云负载均衡(Cloud LoadBalancer),简称CLB, 负载均衡通过设置虚拟服务地址(VIP)将来自客户端的请求按照指定方式分发到其关联的多台后端云服务器,服务器将请求的响应返回给负载均衡器,负载均衡再将响应发送到用户,这样就向互联网用户隐藏了内网结构,阻止了用户直接访问后端云服务器,使得服务器更加安全,可以阻止对核心网络栈和运行在其它端口服务的攻击。通过其作用可以看出负载均...

2018-03-22 15:25:43 2986

原创 日吞吐万亿,腾讯云时序数据库 CTSDB 解密

  摘要  腾讯 CTSDB(Cloud Time Series Database) 是一种分布式、高性能的时序数据库,针对时序数据的高并发写入、存在明显的冷热数据、IoT 用户场景等做了大量优化,同时也支持各行业的日志解析和存储。  一、背景  随着移动互联网、物联网、大数据等行业的高速发展,数据在持续的以指数级的速度增长,比如我们使用手机访问互网络时的行为数据,各种可穿戴设备上报的状态数据,工...

2018-03-21 12:15:08 2393

原创 腾讯云TSF日调用量超万亿次背后的故事

腾讯云TSF是整合外部开源框架和腾讯内部历经多年锤炼的PaaS平台打造而成的企业级分布式应用服务开发与托管平台,本文重点对TSF中负责服务托管的PaaS平台进行揭秘,从技术角度解析TSF 平台是如何每天应对万亿次调用的服务托管与治理。简介:腾讯云TSF是整合外部开源框架和腾讯内部历经多年锤炼的PaaS平台打造而成的企业级分布式应用服务开发与托管平台,本文重点对TSF中负责服务托管的PaaS平台进行...

2018-03-21 12:12:19 4265

原创 支持八千台子机并发创建,详解腾讯云主机创建优化之路

背景云主机创建有两种方式,一种通过镜像下载来创建,另一种通过快照回滚来创建, 前者是通用的传统方式,后者依赖于CBS云盘能力。 随着CBS云盘使用越来越广泛,腾讯云主机创建也由原来的镜像下载切换到CBS云盘快照回滚模式。通过传统镜像下载的方式来创建云主机,在云主机拉起前,需要将整个镜像文件都下载到宿主机上,所以云主机的创建时间很大程度上依赖所选取的镜像和当时下载镜像的带宽。当遇到比较大的镜像时,云...

2018-03-21 11:43:34 618

转载 286万QPS!腾讯云TDSQL打造数据库领域的“超音速战机”

2017年,Bloodhound SSC超音速汽车将陆地极限速度提升到1678公里/小时,号称陆地“超音速战斗机”。无独有偶,同样也在2017年,在英特尔®、腾讯金融云团队的共同见证下,腾讯云数据库TDSQL采用英特尔®提供的高端平台,跑出了创造历史的最快性能数据——峰值286万QPS。相比于上一代处理器,性能提升了近4倍,是32核/220GB实例的38倍,腾讯云TDSQL正在打造数据库领域的“超...

2018-03-16 16:17:40 659

The-Emergence-of-the-Enterprise-Data-Hub-Mike-Olson

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Why-Spark-on-Hadoop-Matters-M.C.-Srivas

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Whats-Next-for-BDAS-Mike-Franklin1

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Spark-Meets-Genomics-Helping-Fight-the-Big-C-with-the-Big-D-David-Patterson00

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Spark-on-YARN-A-Deep-Dive-Sandy-Ryza

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Sparks-Role-in-the-Big-Data-Ecosystem-Matei-Zaharia1

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Spark-and-Cassandra-Martin-Van-Ryswyk

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Future-of-Spark-Patrick-Wendell

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Delivering-the-Enterprise-Fabric-for-Big-Data-Aiaz-Kazi

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Apache-Spark-and-the-Future-of-Big-Data-Applications-Eric14

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

IBM-Text-Analytics-on-Apache-Spark-Bhatia-Thitte

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Scalable-Distributed-Decision-Trees-in-Spark-Made-Das-Sparks-Talwalkar

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

End-to-end-analytics-with-Oryx-Spark-and-MMLib-Sandy-Ryza

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

Spark-Meets-Genomics-Helping-Fight-the-Big-C-with-the-Big-D-David-Patterson

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

把Docker打造成虚机-搜狗

很多公司已经使用物理机和vm很多年,以机器为粒度做运维,积累了很多运维工具和平台。弊端很明显,但又难以一下子切换到docker推崇的微服务架构。既想平滑兼容既有平台,又想充分利用docker的好处,how to?于是就有了我们的尝试:把docker改造成虚机的样子。

2015-07-19

kubernetes-容器集群管理利器-时速云

Kubernetes将于7月21日发布1.0版本,对容器生态圈具有重大意义。topic将介绍kubernetes的轻量化、模块化、弹性伸缩等特征,以及在服务发现、虚拟网络等方面的优势。

2015-07-19

Hyper-用虚拟机作为Pod的边界

Pod 是 K8s 调度的基本单位,也是一个逻辑实体,而 Hyper 为这个逻辑实体添加了一个“物理”边界,使得同一台主机上的不同 Pod 可以服务不同用户,这样使用kubernetes提供公有云服务就不再需要一个额外的IaaS层来提供多租户隔离了。

2015-07-19

在Spark上实时、准实时离线视频分析

Conviva 创始人 Davis Shepherd 在此次峰会上就Conviva使用Spark的情况,从我们是做什么、哪些问题需要我们解决、为什么Spark对于我们的解决方案必不可少、未来Spark能为Conviva带来什么改变等方面做了详细的介绍。

2014-05-29

StratioDeep:一个在Spark 和Cassandra之间的集成层

Stratio高级架构师Luca Rosellini:在此次峰会上和其同事Oscar Méndez、Alvaro Agea重点介绍Stratio的主要客户、为什么使用Cassandra、为什么使用Spark以及举例说明。

2014-05-29

Flint: Making Sparks (and Sharks!)

Jim Donahue是Adobe系统技术实验室主要科学家,主要研究方向是云计算、数据库和企业系统,此次峰会上Jim Donahue主要从架构,安装等方面详细介绍了Flint。

2014-05-29

腾讯技术开放日 | 全面解析腾讯会议的视频前处理算法

在视频通话中,视频前处理模块可以有效提升用户参与实时视频时的体验,并保护用户隐私,主要包括虚拟背景、美颜和视频降噪等。腾讯会议在视频前处理场景下,遇到哪些技术难点,如何进行优化?【腾讯技术开放日 · 云视频会议专场】中,腾讯云高级工程师李峰从算法和工程优化的角度进行了分享。

2020-05-24

千万日活腾讯会议背后:深度学习的最新应用

深度学习是实现语音增强最主要的方法之一,¬帮助我们从带噪语音中提取尽可能纯净的原始语音,提高语音质量和可懂度。腾讯会议在去年年底推出,短短两个月内就突破千万日活大关。在多样且复杂的场景下,深度学习如何帮助腾讯会议在实时通话中进行去混响、声音事件检测和回声消除?本文是腾讯多媒体实验室高级研究员王燕南在「腾讯技术开放日·云视频会议专场」的分享整理。

2020-03-29

干货|一文读懂腾讯会议在复杂网络下如何保证高清音频

一场突如其来的疫情,让数以亿计的白领只能居家办公,云视频会议系统突然成为最重要的办公软件。腾讯会议在2019年12月25日正式上线后,短短两个月时间内积累千万日活。除了时机,腾讯会议产品又为什么能脱颖而出呢?产品力是个不得不提的因素,腾讯多媒体实验室高级研究员王晓海在【腾讯技术开放日·云视频会议专场】中,对腾讯会议在复杂网络情况下如何保证高清音质进行了分享。

2020-03-29

Kubernetes实战系列之一-原理篇

kubernetes实战系列公开课PPT,讲师叶伙荣是《Kubernetes权威指南》的作者之一。

2016-03-04

开源大数据引擎:分布式Greenplum数据库内核分析

Pivotal 研发总监姚延栋《开源大数据引擎:分布式Greenplum数据库内核分析》

2015-12-17

FreeWheel基于大数据的新兴视频广告测量实践

FreeWheel技术副总裁李旸《FreeWheel基于大数据的新兴视频广告测量实践》

2015-12-17

大数据与金融创新: 从研究到实战

新加坡管理大学信息系统学院教授朱飞达《大数据与金融创新: 从研究到实战》

2015-12-17

Octopus(大章鱼):基于R语言的跨平台大数据机器学习与数据分析系统

南京大学计算机系PASA大数据实验室教授黄宜华《Octopus(大章鱼):基于R语言的跨平台大数据机器学习与数据分析系统》

2015-12-17

Apache Kylin的大数据可视化实践

eBay 软件工程师,Apache Kylin PMC 成员仲俭《Apache Kylin的大数据可视化实践》

2015-12-17

BML百度大规模机器学习云平台实践

百度基础架构部高级架构师沈国龙《BML百度大规模机器学习云平台实践》

2015-12-17

大数据驱动下的微博社会化推荐

新浪微博算法技术总监姜贵彬《大数据驱动下的微博社会化推荐》

2015-12-17

Sentry金融实时风控系统

数美公司联合创始人兼CTO梁堃《Sentry金融实时风控系统》

2015-12-17

大数据下的数据安全

阿里巴巴数据安全部阿里数据安全小组总监郑斌《大数据下的数据安全》

2015-12-17

Deep Learning助力客服小二:数据技术及机器学习在客服中心的应用

阿里巴巴iDST语音组高级专家鄢志杰《Deep Learning助力客服小二:数据技术及机器学习在客服中心的应用》

2015-12-17

Voidbox - Docker On YARN在Hulu的实践

Hulu 资深研发主管梁宇明《Voidbox - Docker On YARN在Hulu的实践》

2015-12-17

从2014 到2016,大规模内存数据库演进之路

京东云平台总架构师、系统技术部负责人刘海锋《从2014 到2016,大规模内存数据库演进之路》

2015-12-17

Spark发展:回顾2015,展望2016

Databricks公司联合创始人、Spark首席架构师辛湜《Spark发展:回顾2015,展望2016》

2015-12-17

2016 年大数据技术发展趋势解读

启明星辰公司副总裁,CCF 大数据专家委员会副秘书长潘柱廷《2016 年大数据技术发展趋势解读》

2015-12-17

大数据和小米金融

2015中国大数据技术大会讲师PPT,本PPT来自小米金融技术主管方流的演讲

2015-12-17

Databricks-Update-and-Announcing-Databricks-Cloud-Ion-Stoica000

2014年Spark Summit于6月30日至7月2日在美国旧金山举行。Spark、Shark、Spark流媒体和相关项目及产品的主要用户聚集一地,共同探讨Spark项目开发的方向,以及Spark在各种各样应用程序中的实践情况。

2015-09-22

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除