- 博客(9)
- 资源 (72)
- 收藏
- 关注
原创 中心化云与去中心化云有什么区别
中心化云服务是大量数据集中在统一的云平台上。去中心化云服务是数据储存不在一个中心,而是分散于全球各个节点。去中心化云服务衍生出更多去中心化的应用。
2020-12-31 16:20:46 814
原创 对象存储调研四华为云OBS
华为云对象存储OBS架构华为云对象存储服务(Object Storage Service ,OBS)是一个基于对象的海量存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力。OBS的基本组成是桶和对象,其中对象是OBS中数据存储的基本单位,一个对象实际是一个文件的数据与其相关属性信 息的集合体,包括Key 、 Metadata 、Data三部分。华为云针对OBS提供的REST API进行了二次开发,为您提供了控制台、SDK和各类工 具,方便在不同的场景下轻松访问OBS桶以及桶中的对象。当然您也
2020-12-31 16:10:14 953
原创 对象存储调研三开源MinIO
MinIO对象存储简介MinIO对象存储系统是为海量数据存储、人工智能、大数据分析而设计,基于Apache License v2.0开源协议的对象存储系统,它完全兼容Amazon S3接口,单个对象最大可达5TB,适合存储海量图片、视频、日志文件、备份数据和容器/虚拟机镜像等。MinIO主要采用Golang语言实现,整个系统都运行在操作系统的用户态空间,客户端与存储服务器之间采用http/https通信协议。MinIO架构MinIO采用去中心化的无共享架构,对象数据被打散存放在不同节点的多块硬盘
2020-12-31 15:59:40 464
原创 对象存储调研二阿里云OSS
阿里云对象存储OSSOSS概念阿里云OSS的优势OSS的存储空间OSS存储基本单元OSS对比文件系统OSS对比自建服务器存储阿里云OSS的存储类型OSS存储类型对比OSS的计费方式OSS的费用构成OSS使用限制...
2020-12-31 15:30:55 198
原创 对象存储调研一
1、对象存储简介对象存储,也称为“面向对象的存储”,英文是Object-based Storage。OBS是一种新型的网络存储架构,基于对象存储技术的设备就是对象存储设备(Object-Based Storage Device),简称 OSD。对象存储 OBS 综合了 NAS 和 SAN 的优点,同时具备SAN 的高速直接访问和 NAS 的分布式数据共享等优势,提供了具有高性能、高可靠性、跨平台以及安全的数据共享和存储体系结构。对象存储的命名,是由其存储数据的格式来的,它的数据是以对象object的
2020-12-31 15:19:56 362
原创 HDFS的优缺点和缺陷
1、选择 HDFS 存储数据,是因为 HDFS 具有以下优点:(1) 高容错性数据自动保存多个副本。它通过增加副本的形式,提高容错性。某一个副本丢失以后,它可以自动恢复,这是由 HDFS 内部机制实现的,我们不必关心。(2) 适合批处理它是通过移动计算而不是移动数据。它会把数据位置暴露给计算框架。(3) 适合大数据处理数据规模:能够处理数据规模达到 GB、TB、甚至PB级别的数据。文件规模:能够处理百万规模以上的文件数量,数量相当之大。节点规模:能够处
2020-12-31 11:11:53 12514
原创 对象存储原理(组成结构、访问方式、优缺点)
1、对象数据组成结构与块存储和文件存储管理数据的方式不同,对象存储是以对象的形式管理数据的。对象和文件最大的不同,就是在文件基础之上增加了元数据。一般情况下,对象分为三个部分:数据、元数据以及对象id。对象的数据通常是无结构的数据,比如:图片、视频或文档等;对象的元数据则指的是对象的相关描述,比如:图片的大小、文档的拥有者等;对象id则是一个全局的唯一标识符,用来区分对象的。从数据结构来看,这三种存储有着根本不同。块存储的数据结构是数组,而文件存储是二叉树(B,B-,B+,B*各种树),对象存储基本上
2020-12-31 10:58:41 4581
原创 数据存储在OBS和HDFS有什么区别
数据存储在OBS和HDFS有什么区别?MRS集群处理的数据源来源于OBS或HDFS,HDFS是Hadoop分布式文件系统(Hadoop Distributed File System),OBS(Object Storage Service)即对象存储服务,是一个基于对象的海量存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力。MRS可以直接处理OBS中的数据,客户可以基于云管理平台Web界面和OBS客户端对数据进行浏览、管理和使用,同时可以通过REST API接口方式单独或集成到业务程序进行管
2020-12-24 18:51:23 1651 1
原创 linux权限drwxrwxrwx所代表的意义
016575020@DESKTOP-F9IGROA MINGW64 /d/workspace/lake$ ls -ltotal 4drwxr-xr-x 1 016575020 197121 0 11月 27 08:41 rtf/drwxr-xr-x 1 016575020 197121 0 11月 26 17:00 rtf-lake/共显示了七列信息,从左至右依次为:权限、文件数、归属用户、归属群组、文件大小、创建日期、文件名称d :第一位表示文件类型 d 文件夹 - 普通文.
2020-12-02 10:25:22 25091
Charles4.2.6.dmg
2018-12-12
mysql-connector-java-8.0.13.jar
2018-11-20
wget-1.18.tar.gz
2018-04-27
android6.0及以上获取wifi MAC地址
2017-10-12
Fiddlersetup.exe
2017-07-18
JSONObject所必须的6个包
2017-07-06
commons-collections-3.2
2016-03-18
json-lib-2.2.2-jdk15
2016-03-18
commons-httpclient.jar
2016-03-18
commons-beanutils.jar
2016-03-18
学习宝典apk
2016-01-08
BigDataTools_for_intellij-213.5449.243
2022-01-29
Spark3.1.2 Docker镜像资源
2022-01-29
WinPcap_4_1_3.exe
2020-09-22
合并PDF软件.rar
2020-06-06
设计ATM使用封装、继承和多态.zip
2020-05-21
tampermonkey.crx.zip
2020-03-29
StudentsPerformance.csv
2020-03-26
tools-1.8.0_181.jar.zip
2020-03-04
Java开发工程师笔试题(带答案).pdf
2020-02-22
万兴数据恢复MAC版本.zip
2020-02-07
复旦大学中文文本分类训练集和测试集.zip
2020-01-11
weibodatabase.sql.zip
2020-01-11
用于逻辑回归教学分析的数据.rar
2020-01-02
PDF文档转换工具(含安装使用教程).rar
2019-05-13
mongodb命令学习手册.pdf
2019-04-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人