分布式存储
文章平均质量分 85
杉岩数据
这个作者很懒,什么都没留下…
展开
-
日活跃用户超6亿,扒一扒抖音背后的“黑科技”
一、粉丝经济时代,抖音成为现象级流量平台在粉丝经济时代,抓住流量意味着拥有一切可能。抖音作为现今最火的短视频平台,日活跃用户已超过6亿,每天数以亿计的视频被播放、转发和评论。如此庞大的数据规模和访问压力,没有强大且稳定的IT基础设施显然是hold不住的。即便内容创作者没有粉丝基础,但上传的视频内容足够优质,同样有机会成为点播量过千万的网红博主。这得益于平台的智能推荐机制,将短视频推送到对它感兴趣的用户面前,进而促进转发和关注,增加用户黏性。抖音火爆的背后,离不开IT发展带来的技术红利,今天我们就来扒一扒原创 2021-01-07 14:38:54 · 1471 阅读 · 0 评论 -
先于Amazon S3支持强一致性,这款产品值得了解一下
2020年最后一个月的第一天,AWS官方博客发布文章称:Amazon S3实现了原生支持强一致性。从2006年上线至今,Amazon S3一直采用最终一致性的实现方案。14年来,随着上层业务类型从简单的数据归档扩展到更为复杂的数据分析场景,存储模型由基本的写入读取升级为更多数据覆盖写且时效性要求更高的遍历读取,Amazon S3的最终一致性方案已经无法满足这一需求。尤其是以Hadoop为代表的大数据分析场景,要求数据写入之后快速读取,底层存储支持强一致性成为刚需。什么是数据一致性从数据读写的角度,如果前原创 2020-12-29 10:53:06 · 193 阅读 · 0 评论 -
杉岩:云原生时代,容器持久化存储方案选对了吗?
75%的企业部署容器应用,云原生正加速业务创新互联网的发展、云计算的出现,对传统IT带来冲击和挑战。面对数据爆炸式增长、业务种类增加、应用复杂性提高、软件迭代速度加快等一系列挑战,容器技术带来了突破性的解决方案。容器为互联网应用提供了绝佳的运行环境,颠覆了企业级应用交付的模式,敏捷开发、快速交付、可移植,成为容器行走江湖的独特标签。早期容器技术更多应用于开发测试环境,一度成为软件开发人员的乐土。而现在,随着云原生对业务创新的影响力持续显现,越来越多的企业开始将容器应用于生产环境。前者更侧重容器本身带来的原创 2020-12-21 11:28:59 · 309 阅读 · 1 评论 -
杉岩数据:工业视觉的智能存储之道
制造业是立国之本、兴国之器、强国之机。智能制造为中国制造业跨越发展提供了历史性机遇。人工智能与制造业深度融合所形成的新一代智能制造技术,成为新一轮工业革命的核心驱动力。在新制造环境下,工业视觉在质量管理的流程中扮演相当重要的角色。作为智能制造的“智慧之眼”,工业视觉不仅提高检测效率和准确度,进一步提升产出功率与降低查验人员的作业负荷,还可让产品的出货质量更稳定。1、工业视觉助力智能制造工业视觉是计算机视觉的一大分支,更注重广义图像信号与自动化控制方面的应用,提高生产的柔性和自动化程度。在一些不适合人工原创 2020-05-12 17:34:29 · 225 阅读 · 0 评论 -
杉岩海量图片分布式存储解决方案
随着互联网、云计算及大数据等信息技术的发展,越来越多的应用依赖于对海量数据的存储和处理,如智能监控、电子商务、地理信息等,这些应用都需要对海量图片的存储和检索。由于图片大多是小文件(80%大小在数MB以内),以GFS、HDFS为代表的适用于流式访问大文件的分布式存储系统,若直接用来存储图片,由于元数据膨胀,在扩展性和性能方面均存在严重问题。为了解决HDFS在小文件存储方面的问题,通常的做法是先将...原创 2019-12-23 15:38:57 · 712 阅读 · 0 评论 -
海量图片存储解决方案
当今世界,互联网、大数据应用迅猛发展,物联网、人工智能、云计算 技术日新月异,随之而来的是各种企业和个人应用持续不断地产生亿级甚至是百亿级的海量小文件。这些小文件的元数据管理、存储性能以及访问效率等问题因而成为学术界和工业界公认的难题。例如,国内目前最大的电商网站淘宝存储的商品图片超过 200 亿张,这些文件的平均大小仅为 15KB 左右,国外著名的社交网站Facebook 存储的图片总量更是超...原创 2019-12-18 14:42:05 · 5006 阅读 · 0 评论 -
杉岩PACS影像系统分布式存储架构
该医院创建于1999年,是深圳市政府投资建成的集医疗、教学、科研和预防为一体的现代化三级综合性医院。2017年通过三级甲等医院复审。2018年,医院年门急诊总量约292万人次,年出院病人近7.4万人次,年手术量4.9万台次。 该院在深圳有较高的知名度和认可度。行业挑战随着该医院门诊量的爆发式增长,放射科等科室新增了大量影像采集设备,PACS存储了大量的非结构化数据,原有的存储系统面临如下挑战:...原创 2019-12-10 14:35:50 · 3157 阅读 · 0 评论 -
浅谈分布式存储与传统存储之间的区别和关系
对于分布式存储一直有一个疑问:横向扩展(Scale Out)、弹性伸缩、敏捷业务、开箱即用,外加成本优势……,无不针对传统存储的“罩门”,从技术分析上看,分布式存储理应所向披靡,但为什么现实市场并不是这样呢?国产分布式存储厂商-杉岩对此有一个观点认为:分布式存储发展不会一步登天,会有一个过程。首先分布式存储会蚕食增量存储市场,然后随着用户对于技术理解的不断加深,最终将一统江湖。分布式存储称雄市场...原创 2019-12-06 10:44:17 · 6849 阅读 · 1 评论