NoSQL
文章平均质量分 76
Sailist
这个作者很懒,什么都没留下…
展开
-
Windows环境下HBase单机版安装全部过程
下载HBase: http://hbase.apache.org/downloads.htmlHadoop: https://hadoop.apache.org/releases.html下载后会得到两个压缩文件hadoop-common-[版本号]-bin-master.zip和hbase-[版本号]-bin.tar.gz由于Hbase是建立在HDFS上的,而HDFS又是Hadoop的...原创 2018-11-01 19:24:14 · 1998 阅读 · 0 评论 -
HBase+Hadoop+Zookeeper环境搭建的错误排查
确认hbase下的hbase-site.xml中的hbase.rootdir的端口和hadoop下的core-site.xml中的fs.defaultFS共用一个端口,否则在进入hbase shell的时候输入list会报Can't get master address from ZooKeeper; znode data == null错误,如果出现了一定要确认一下,如果hdfs-site.x...原创 2018-11-04 19:19:14 · 247 阅读 · 0 评论 -
NoSQL入门(序)
典型的NoSQL类型:临时性键值存储永久性键值存储面向文档面向列的数据库memcached…MongoDBHBase(Redis)(Redis)键值存储:即抛弃了表的概念,所有的数据都以键值对的形式存储(这样的话,不支持模糊查询),具体的存储方法,分为临时性,永久性和两者兼具三种。临时性键值存储:即所有数据保存在内存中,服务退出时数据丢失...原创 2018-12-20 20:04:35 · 259 阅读 · 0 评论 -
NoSQL入门(MongoDB)
MongoDB简介MongoDB是一种非关系型的数据库,其存储类型是文档存储文档存储的特点保证海量数据存储的同时,具有良好的查询性能。用类Json格式进行存储MongoDB的简单介绍C++语言编写基于分布式文件存储的开源数据库系统在高负载的情况下,添加更多的节点,可以保证服务器性能旨在为WEB应用提供可扩展的高性能数据存储解决方案MongoDB的存储方式(文档存储)将数...原创 2018-12-20 20:04:21 · 357 阅读 · 0 评论 -
MapReduce的工作过程以及Shuffle的通俗理解
MapReduce的处理流程a. 在runner类中设置输入和输出路径,输入路径可以是文件,也可以是文件夹,对文件或文件夹中的所有目录,交给job设定的InputFormat进行处理b. 程序根据InputFormat将文件分割成一个个Split,一个Split是一个Maptask,每个Map task有一个环形的内存缓冲区,输入数据经过map阶段处理后的中间结果会写入该内存缓冲区,并且...原创 2019-01-02 16:29:27 · 334 阅读 · 0 评论 -
BASE理论
转自部分:https://www.cnblogs.com/szlbm/p/5588543.htmlBASE理论即:Basically Available(基本可用)Soft state(软状态)Eventually consistent(最终一致性)BASE理论是对CAP中一致性和可用性权衡的结果,其来源于对大规模互联网系统分布式实践的总结, 是基于CAP定理逐步演化而来的。BAS...转载 2018-12-30 16:16:21 · 116 阅读 · 0 评论