架构师技术联盟（Hardy）-CSDN博客

原创第二讲：高性能计算关键技术和趋势分析

需求的膨胀推动着技术变革，技术的革新进一步丰富着我们的生活，如今大数据、云计算技术跨界竞争和技术融合迫使我们不断换血和补充能量来适应一次次变革。那么在人工智能、虚拟现实、物联网等技术热潮过后，能预测到的下一个技术热点会是什么，高性能计算(HPC)？面对技术和行业融合现状，HPC应该再适合不过了，因为HPC是一个跟各个行业结合比较紧密的技术。回顾历史，传统HPC还是主要聚焦在仿真、物理...

2019-12-29 17:21:47 2899

原创第一讲：高性能计算基础知识讲解

回顾过去15年，HPC一直是增长最快的IT市场之一，其增长速度有时甚至超过了在线游戏、平板的年增长率，在云计算、大数据和AI的推动下，HPC的应用类型更加复杂，要求HPC方案必须与时俱进，需要不断匹配新技术来应对应用和业务挑战，这就是笔者推出该专题的背景。首先，让我们从高性能计算概念开始，逐步深入到技术细节，掌握HPC关键技术和方案选型、设计等综合能力。什么是高性能计算，涉及哪些...

2019-12-29 17:09:57 15997

原创详解Mellanox 200G HDR InfiniBand解决方案

在数字信息的不断暴增的世界里，通过实时对分析数据挖掘其特征的能力已经成为一种竞争优势。一个先进的网络必须解决的问题就是快速和有效地传输不断增长的数据，同时必须实时地对数据进行分析。网络协同技术已经彻底改变了这个行业，它清楚地表明，传统的以CPU为中心的数据中心架构已经过时了，在这种架构中，尽可能多的功能都需要被载到CPU上处理。过渡到以数据为中心的新体系结构要求网络高速且有效...

2019-12-20 21:34:58 10775

原创第54届超算TOP500排名，中美各自以数量和性能领先

在第54版TOP500排名中(2019.11发布)，中国和美国尽管在不同类别中也保持了其统治地位。同时，基于高性能Linpack(HPL)基准的500个系统的总体性能持续提高至目前的1.65 exaflops。而且该列表的入门门槛从2019年6月发布的1.02 petaflops增加到1.14 petaflops。排名靠前的超算系统TOP500列表排名靠前的系统很大...

2019-12-19 21:47:23 1146

原创揭秘CPU和GPU区别到底有多大？

CPU (Central Processing Unit，中央处理器)就是机器的“大脑”，是完成布局谋略、发号施令、控制行动的“总司令官”。CPU的结构主要包括运算器(ALU，Arithmetic and Logic Unit)、控制单元(CU，Control Unit)、寄存器(Register)、高速缓存器(Cache)和它们之间通讯的数据、控制及状态的总线。GPU...

2019-12-18 22:53:06 1155

原创华为Atlas 500智能小站如何使能边缘计算？

一．什么是边缘计算边缘计算(Edge Computing)是相对数据中心提出的概念，它是指收集并分析数据的行为发生在靠近数据生成的本地设备和网络中，而不需要将数据传输到计算资源集中化的数据中心进行处理。边缘计算又被叫做分布式云计算、雾计算或第四代数据中心。二. 为什么需要边缘计算整个计算产业发展了进半个世纪，从专用的大型机、小型机到走进千家万户的x86通用服务器，服务器推动着整个...

2019-11-28 21:23:41 9144

原创深度解析服务器科普知识

原创：晗狄架构师技术联盟在上一篇服务器基础知识文章“[收藏] 最全服务器基础知识科普”中，读者阅读量超过了1.1W，既然大家这么喜欢此类科普文章，今天笔者再次给大家带来服务器深度知识相关文章，请大家搬好椅子，精彩内容马上开始。服务器是网络数据的节点和枢纽，是一种高性能计算机，存储、处理网络上80％的数据、信息，负责为网络中的多个客户端用户同时提供信息服务，获取大家非常熟悉服务器...

2019-09-08 14:32:42 1577

原创 GPFS和Lustre之后，还有谁来接盘？

文件系统从来都没有成为IT领域中最闪光的那部分，这或许可以解释在大型变革和新进入该领域的人，为什么没有注意到它。但在HPC领域，情况可能有所不同。 HPC方案供应商主要基于GPFS或Lustre的产品提供HPC文件解决方案，而且企业和HPC组织已经接受了这些产品。然而，近年来IT环境的变化已经说服一些公司和供应商重新考虑文件系统。诸如大规模分析和机器学习的兴起，HPC...

2019-07-07 14:15:45 3677

原创精选架构技术文章和总结来袭

大家都是我的老朋友了，也是“架构师技术联盟”的老朋友了，所以今天就来点干货。当然，奉献给大家首先是技术总结(电子书)，对着手机看文章，不急，看不完先收着，以后慢慢看。笔者通过总结、归类和细化公众号历史原创文章，并梳理成电子书，电子书打包的目录如下:《RDMA原理分析、对比和技术实现解析》《数据备份和副本管理技术全面解析》《容器技术架构、网络和生态详解》《闪存技术、产品和发展...

2019-07-07 13:57:44 1256

原创 Intel推出10nm 3D新CPU架构，让失效的摩尔定律再次生效！

Intel在大洋彼岸的Architecture Day 2018活动中，公布了多项重大产品消息，最重要的消息就是发布了基于下一代Sunny Cove架构的10nm芯片，该CPU芯片将有望在2019年下半年开始出货。大会公布了Sunny Cove架构细节和2019-2021年的核心路标。Intel将核心产品线的路标更新方式分为两个分支: 通用和专用产品。...

2018-12-15 20:54:15 643

原创详谈华为全球首款7nm工艺ARM企业级TaiShan服务器

至少四年以来，ARM一直致力于成为现代服务器，成为现代数据中心以及云中真正的企业级玩家的重要组成部分。Arm在服务器领域已经小有名声，在全球超算500强中，由HPE提供的部署在Sandia国家实验室的Astra超算系统就是ARM，该系统排名205位。ARM大型芯片专注于Cortex核心系列。但是，在长期与x86单线程高性能竞争中，ARM所必须的高性能核心Ares(并非Cortex)，将于201...

2018-12-15 20:50:43 2899 1

原创美国Gartner权威报告揭露华为技术(18个)实力有多强？

其实，华为技术不仅仅是聚焦运营商BG，还有企业BG、消费者BG(大家最熟悉的手机等终端业务)和公有云BU。关于华为技术如何，最近网上纷纷攘攘，各种说辞应有尽有。由于我对华为企业BG相对比较熟，所以只能站在企业角度，通过拿美国第三方咨询机构Gartner报告来谈谈，尽量通过第三方机构来证明，可能更具有说服力。简单说说Gartner象限，Gartner魔力四象限主要从执行力和技术前瞻性两个维度...

2018-12-15 20:48:59 1707

原创存储双活技术，是否要VMWare等虚拟化支持？

存储双活方案中，需要保证端到端的双活(应用，Hypervisor，网络，存储等)，VMWare等虚拟化支持双活是必须的，否则就无法实现业务端到端双活透明切换。下面详细讨论具体细节。首先存储需要支持双活。目前主流存储厂商都支持双活特性和部署方案，如华为HyperMetro、HDS GAD、Dell Live Volume、IBM HyperSwap(配合阵列MetroMirror)和SVC ...

2018-12-15 20:46:16 3210 1

转载全球OpenStack用户调查报告

11月13日，开源IaaS平台OpenStack Summit大会在德国柏林拉开帷幕时，“2018 OpenStack用户调查报告”也发布出炉。由OpenStack基金会发起的第11次全球OpenStack用户调查项目，报告汇总了2017年8月至2018年8月期间提交的1483份调查问卷，来自全球63个国家和地区的858个项目部署和441个用户组织。根据这些数据，报告对O...

2018-12-01 17:53:14 553

原创谈谈RedHat Forum 2018云转型技术亮点(附资料)

Redhat被IBM收购后，Redhat将作为独立的混合云团队，保持红帽开源发展传统和承诺的独立性和中立性，当前的产品组合和市场战略以及独特的发展文化。Redhat创建于1993，先后发布Linux、虚拟化操作系统，通过OpenShift和OpenStack平台进入云计算市场。 11月6日，RedHat Forum 2018论坛在北京站举行，这也是红帽被收购后的第一次大...

2018-12-01 17:49:14 433

原创架构师知识星球重磅上线通知

新老朋友们，本号推出的知识星球上线了。这是专业的垂直技术讨论学习平台，可以上传文件、发表观点、知识点，点对点提问，应答等。针对历史内容，方便搜索相关讨论主题问题和对应答案。知识星球比微信群更聚焦、更专业，平台推荐付费星球形式，其目的就是把真正想学习的技术相关者聚在一起(有效规避广告者和垃圾信息)，在这里，每个相关问题都将获得答案，回答者也有机会得到相应奖赏。 ...

2018-09-23 10:18:16 889

原创架构师遇到这些技术瓶颈，应该怎么办？

记得我刚刚踏入技术架构领域时，在产品设计和市场项目中，比拼的还是谁家的产品规格够不够高，特性够不够全。但慢慢发现，这种土鳖的方式在技术迅速革新的今天已过时，企业面临其业务竞争压力，他们的关注点已经转移到产品和服务快速上线，规模扩展、并发处理能力和架构演进上。在一次次跨界竞争对手面前，企业也被迫一次次降低利润保市场份额，研发采购预算大大缩减。一场DevOps战争，...

2018-09-23 10:14:40 668

原创 SUSE CaaS Platform 3和Kubernetes如何落地企业微服务(附白皮书)

现如今，随着容器技术的广泛应用，Kubernetes 对每个企业来说都是不可或缺的。但由于平台发展如此迅速，要每个企业都跟上它的发展脚步必然是件难事。但也不用担心，SUSE可以为您解决这个问题，因为在SUSE的企业级解决方案中，SUSE CaaS Platform 3已经引入了 Kubernetes 的强大功能。SUSE CaaS Platform 3将Kubernetes...

2018-08-03 23:34:34 549

原创架构师技术精华文章汇总

为了便于读者阅读架构师技术联盟公众号历史文章，故在此进行分类和持续更新，请本号的读者按需进行查阅。谈谈系统架构>备份软件体系架构解析>顶级架构师应该知道的99件事>网管到首席架构师之路>如何才能成为出色的架构师>告诉你什么叫别人家的架构师>XenServer虚拟化技术架构>大型网站架构演变和知识体系>SDN和OpenFlow架构分析高性能...

2018-07-07 11:23:09 2786 2

原创 HPC高性能计算知识: GPU的工作原理(含视频)

啃芝士架构师技术联盟 4月18日在GPU出现以前，显卡和CPU的关系有点像“主仆”，简单地说这时的显卡就是画笔，根据各种有CPU发出的指令和数据进行着色、材质的填充、渲染、输出等。较早的娱乐用的3D显卡又称“3D加速卡”，由于大部分坐标处理的工作及光影特效需要由CPU亲自处理，占用了CPU太多的运算时间，从而造成整体画面不能非常流畅地表现出来。例如，渲染一个复...

2018-06-03 10:29:40 3200 1

原创详解以太网介质技术发展史

前面陆续已经分享很多网络和交换机的知识，随着云计算、软件定义网络等技术潮流趋势，以太网在可靠性和速率上发生了巨大的技术变革，今天我们从以太网介质入手，谈谈以太网技术的发展。言归正传，下面从以太网标准，介质发展等方面聊聊以太网发展简史。1973年， Xerox公司提出以太网技术并实现之，最初以太网数率只有2.94Mbps1980年， Digital Equipment Corporati...

2018-06-03 10:21:49 2890

原创 “京东区块链技术白皮书”解密互联网应用(附下载链接)

Hardy 架构师技术联盟请点击此处输入图片描述请点击此处输入图片描述前不久，京东发布了“京东区块链技术白皮书(2018)”。相比华为发布的“华为区块链白皮书(附下载链接)”，京东区块链将聚焦运用于供应链、金融、保险防欺诈和大数据安全五个领域，各自聚焦自身技术和市场优势，京东给各大互联网厂商做了一个很好的例子。区块链本质上是一种健壮和安全的分布式状态机，典型的技术构成包括共...

2018-05-05 20:43:50 1408

原创 [精华] RDMA技术原理分析、主流实现对比和解析

替换高清大图请点击此处输入图片描述摘要: 远程直接内存访问(即Remote Direct Memory Access)是一种直接内存访问技术，它将数据直接从一台计算机的内存传输到另一台计算机，无需双方操作系统的介入，本文旨在技术引导，详细内容请通过文末“阅读原文”参阅<RDMA原理分析、对比和技术实现解析>电子书。 RDMA技术最早出现在Infiniband网络，...

2018-04-22 17:55:44 4822

原创 [赠票]智能合约与区块链技术专场

随着比特币的升温，区块链技术已经得到了金融、证券等行业和不同应用的重视。区块链是比较热门的新概念，蕴含了技术与金融两层概念。从技术角度来看，这是一个牺牲一致性效率且保证最终一致性的的分布式的数据库，当然这是比较片面的认识。从经济学的角度来看，这种容错能力很强的点对点网络，恰恰满足了共享经济的一个必须要求，即低成本的可信环境。针对区块链技术、应用和价值的介绍文章产量庞大、琳琅满目，但大多数文章都停留...

2018-04-21 07:41:34 853 1

原创 “华为区块链白皮书”重磅发布(附下载链接)

Hardy 架构师技术联盟替换高清大图请点击此处输入图片描述请点击此处输入图片描述在2018华为分析师大会(HAS2018)期间，华为云正式重磅发布“华为区块链白皮书”，白皮书系统介绍了区块链的兴起、核心技术及原理机制、国内外产业发展现状和典型应用场景，总结了华为历年来在区块链上的研究成果。华为云区块链服务可用于数据应用、IOT、金融等领域，具体场景如：数据交易、身份认证、...

2018-04-21 07:18:01 7866 1

转载如何向Openstack社区提交一个新的开源项目

前几天有个朋友问我，自己有一个idea不错的项目，也把基本的框架写好了，想贡献到Openstack社区，却不知道应该怎么做。正好之前我有过类似的经历，那么来分享一下我是如何向Openstack社区提交一个新项目。 Openstack的整套系统就是一个开源项目的“大杂烩”，社区把所有项目划分为两类：核心和孵化。除非出身特别牛逼或者从其他核心项目独立出来的项目会在设计之初就被列为核心项目(例如Nuet...

2018-04-14 18:03:00 1424

原创详解Oracle AWR运行日志分析工具

在Oracle数据库学习和使用中，遇到性能问题，首要的步骤就是导出AWR分析报告，AWR是Oracle的一个脚本工具，通过周期性快照记录下当时的所有运行数据，数据库管理员可以导出其中一部分数据进行分析，从而找出来哪些脚本导致了目前的数据性能问题。一般情况下，安装完Oracle服务端后，默认都会有这个脚本工具(在数据库管理员HOME目录下)，进入到sqlplus，然后直接运行@awrrpt脚本，按照...

2018-04-05 22:20:12 6180

原创谨赠20篇技术热文营造一个不一样的节日气氛！

一年一度的圣诞节又来临了。在这个越来越受到国人重视的节日中，每个人有每个人的浪漫方式，作为程序员、架构师和软件运维人员来说，也不例外。但是，我们表达节日快乐的方式与众不同，一切都在干货分享中，20篇技术热文营造一个不一样的节日气氛。强烈推荐(含电子书总结)(点解图片可跳转)文章推荐：传统企业存储厮杀过后，昨天的战场留下什么值得回忆>分布式、多活数据中心如何实现DNS域名解析和负载...

2018-04-05 22:13:25 429

原创 CDM技术分析和产品选型建议

数据副本管理(CDM)是一种节约存储资源，有效管理数据生命周期的方法，包括消除不必要的重复生产数据。传统备份软件和企业应用程序独立运行，经常会创建多个相同数据的副本。然而，相同数据的冗余副本不但浪费存储空间，还降低网络性能，使数据访问或恢复关键数据任务更加困难。CDM软件可以通过减少使用数据虚拟化的完整副本的数量来帮助消除这些问题。 CDM工作机制和原理大多数CDM管理软件...

2018-04-05 10:45:00 1929

原创云和人工智烈日当头，华为HPC解决方案如何应对？

年底，Intersect360咨询机构发布了HPC市场分析报告(前期做过分析)，其中针对华为Cloud和AI解决方案能力发布了专门的报告。今天，我们首先回顾下HPC市场空间和投入情况，然后，看看华为在HPC市场的表现和解决方案，文章最后谈谈个人的观点。根据Intersect360统计，在应用服务器、集群和Hyperscale 超级计算系统3大类HPC系统中，以任意可伸缩的、面向web的Hypers...

2018-04-04 22:58:27 4270

原创谈谈存储即服务(STaaS)解决方案具有什么优势？

Hardy 架构师技术联盟数据是客户宝贵的财富，但传统数据存储盒子和数据管理却是十分复杂的，我们跟很多客户交流时，客户普遍认为在业务发放和设备管理中，经常会面临下面问题。1、利用率低、管理复杂：在传统数据中心，存储设备种类多、管理复杂；业务与存储系统之间难以匹配，通常只能以超配来确保存储满足业务应用的需求，导致资源利用率低。2、数据系统杂乱、难以云化：传统数据系统缺乏对存储进行服务等级定义和衡量，...

2018-03-06 21:52:25 1896 1

原创 Grafana和Kibana是写给程序员最美的情诗！

是的，对程序员和软件开发从业者来说，当Coding成为兴趣时，这种对技术的执着和美的追求，就变成了程序员的“诗和远方”。在StackOverflow的一项有关年龄的调查中发现，40岁之后的开发人员占开发人员总数的13%。那么其他人到哪里去了？在国内，由于竞争、压力和企业研发力量年轻化文化，他们被解雇了或者上升到管理岗位。似乎软件开发对于过了40岁的人来说，就意味着终结。在国外，事实可能并非如此，有

2018-01-14 11:49:30 6205

原创 NAND Flash SSD 是如何生产出来的？

NAND Flash是一种非易失性随机访问存储介质，基于浮栅(Floating Gate)晶体管设计，通过浮栅来锁存电荷，电荷被储存在浮栅中，它们在无电源供应的情况下仍然可以保持。关于NAND Flash技术基本原理之前有过讲解，大家可以参考文章闪存技术最全面解析。今天主要讨论下NAND Flash生产过程、架构和关键指标。NAND Flash是从原始的硅材料加工出来的，硅材料被加工成晶圆(Waf

2017-12-24 09:56:37 3980

原创 [多活] 分布式、多活数据中心如何实现DNS域名解析和负载均衡？

关于双活技术和业界主流方案，应大家要求做了分析和分享(参考历史发文)，为了帮助大家进一步理解，特意将重要知识点做了梳理和细化，并整理成文。由于平时工作繁忙，只有利用周末时间写写文章，为了表示对我付出的认可，整理成文的“业界主流数据中心存储双活完全解析”需要收取一些费用，通过这种方式，也希望把自己的心血传递到真正需要的人手中，文章目录如下。

2017-11-26 11:07:04 7338

原创存储性能瓶颈的背后，这篇文章带来的参考价值

在项目实战中，需根据业务真实诉求，针对业务模型进行最佳实践分析和洞察，从主机端口、存储系统、后端磁盘等端到端进行分析和评估，才能提供比较切合业务诉求的配置。基于项目实战，作者已经总结出一套性能评估技术方法论，并整理成文的“IO知识和系统性能深度调优全解”电子书，涉及到的内容已在本号推送过，但如果怕麻烦零散阅读，那就通过原文链接支付少量费用获取吧，也是您对咱们公号的支持，资料目录如下。

2017-11-26 11:02:54 3285 1

原创深入剖析HPE、Dell和Fujitsu双活数据中心存储方案

HPE 3PAR存储有个非常有用的特性叫Storage Federation(存储联邦)，存储联邦特性主要解决多个存储数据敏捷性和流动性，主要包括Peer Motion、Online Import 和 Peer Persistence三个特性，Peer Motion和Online Import都不支持带增值特性的LUN迁移。

2017-09-28 22:55:41 3582