「Flink」RocksDB介绍以及Flink对RocksDB的支持

RocksDB介绍

RocksDB简介

RocksDB是基于C++语言编写的嵌入式KV存储引擎，它不是一个分布式的DB，而是一个高效、高性能、单点的数据库引擎。它是由Facebook基于Google开源的kv存储LevelDB开发开发。RocksDB使用LSM存储引擎。它针对不同的生产环境进行调优，可以直接使用内存、也可以使用Flash、或者用硬盘或者HDFS。而且支持不同的压缩算法，有一整套的工具用于生产、调试使用。RocksDB是一种嵌入式、KV型、持久化的存储。

使用嵌入式的数据存储原因有很多，当数据频繁访问内存、或者存储时，网络延迟会增加响应时间。

RocksDB的主要应用场景

1. 适应于多CPU场景
   • 一般的商业服务器有很多的CPU核，例如：志强E5系列 - 6核
   • RocksDB可以高效运行在多核服务器上
   • 它提供的RocksDB语义比传统DBMS更简单
2. 高效利用存储
   • RocksDB可以在快速存储上高效运行且不会成为性能瓶颈
   • RocksDB采用LSM引擎，对比B-Tree引擎，它有更好的压缩和更小的写放大
3. 弹性架构，支持扩展
4. 支持IO-bound、in-memory、write-once

 

入门案例

为了简单说明RocksDB，我们这里使用RocksDB的Java版本来编写。

导入Maven依赖

<dependencies>
        <!-- https://mvnrepository.com/artifact/org.rocksdb/rocksdbjni -->
        <dependency>
            <groupI