孟知之的搬砖填坑历险记

文章目录搜索引擎选择:Elasticsearch与Solr搜索引擎选型调研文档ES***Elasticsearch的优缺点***优点:缺点:Solr***Solr的优缺点***优点缺点Elasticsearch与Solr的比较 搜索引擎选择:Elasticsearch与Solr 搜索引擎选型调研文档 ES Elasticsearch是一个实时的分布式搜索和分析引擎。它可以帮助你用前所未有的速度去处...

文章目录1.Hadoop1.1 定义1.2 特点优点1.3Hadoop优化1.3.1Mapreduce跑的慢的原因1.3.2优化方法2.HDFS2.1 HDFS设计目标2.2 HDFS的重要特性2.3 优缺点2.4 小文件解决方法3.HBase3.1特点3.2架构4.Zookeeper4.1 工作机制4.2特点4.2 选举机制4.3监听器原理4.4部署方式有哪几种？集群中的角色有哪些？集群最少需要...

文章目录Kafka1. 消息队列2. Kafka架构3. kafka 高吞吐量的原因4. Kafka监控5. Kafka丢不丢数据?6. Kafka幂等性7. Kafka消息数据积压，Kafka消费能力不足怎么处理？ Kafka 在流式计算中，kafka一般用来缓存数据，Storm通过消费Kafka的数据进行计算。kafka是一个分布式消息队列，kafka对消息保存时根据Topic进行归类，发送消...

文章目录Hbase RowKey设计三个设计原则及相应实现方法其他经验举个栗子 Hbase RowKey设计 想要设计一个合适的Rowkey，首先需要了解Hbase通过RowKey检索数据的三种方式： 通过单个row key访问：即按照某个row key键值进行get操作； 通过row key的range进行scan：即通过设置startRowKey和endRowKey，在这个范围内进行扫描； ...

文章目录1. 特点2. Hbase数据读取与数据写入2.1 数据读取2.2 数据写入 HBase是一个高可靠性，高性能，面向列、可伸缩的分布式存储系统，利用HBase技术可以在廉价的PC Sever上搭建起大规模结构化存储集群。 1. 特点 海量存储，适合存储PB级别的海量数据，在PB级别的数据以及采用廉价pc存储的情况下，能在几十到百毫秒内返回数据。 列式存储，HBase是根据列族拉开存储数据的，列族下面可以有非常多的列，列族在创建表的时候就必须制定。 极易扩展，其扩展性主要表现在两个方面，一个是基础上

文章目录1. 缓存穿透1.1 带来的问题1.2 解决办法1.2.1 缓存空值1.2.2 BloomFilter1.2.3 如何选择2. 缓存击穿2.1 带来的问题2.2 解决办法3. 缓存雪崩3.1 解决办法3.1.1 事前：使用集群缓存，保证缓存服务的高可用3.1.2 事中：使用 ehcache 本地缓存 + Hystrix 限流&降级 ,避免 MySQL 被打死的情况发生3.1.3 事后：开启 Redis 持久化机制，尽快恢复缓存集群4. 热点数据集中失效4.1 解决办法4.1.1 设置不同的失