rocksdb在YCSB中的运行教程

本文介绍了如何在YCSB中运行RocksDB,包括RocksDB JNI包的生成、YCSB的编译与运行,以及YCSB下RocksDB的参数设置。在Ubuntu 14.04上,使用RocksDB 5.18.3和YCSB 0.15.0,详细讲解了编译过程中遇到的问题及解决办法,确保成功运行和加载数据。
摘要由CSDN通过智能技术生成

1 介绍

使用YCSB测试rocksdb(自己修改的代码)的性能,运行环境:

  • 操作系统:ubuntu 14.04
  • rocksdb的版本:5.18.3
  • YCSB的版本:0.15.0

2 rocksdb的jni包生成

2.1 rocksdb的版本代码

通过github获取rocksdb版本5.18.3的代码作为基础:

> git clone https://github.com/facebook/rocksdb.git
> cd rocksdb 
> git tag  # 查看发布的版本号,对应分支的标签
> git checkout v5.18.3 # 切换分支,查看当前分支 git branch 查看所有分支 git branch -a
> git checkout -b doycsb v5.18.3 # 创建复制分支v5.18.3为新的分支doycsb,方便修改v5.18.3的代码提交,当然最好的方法是先fork

2.2 rocksdb的java编译

  1. rocksdb的文件夹中java文件夹便是生成jni包,由于我是在linux64位系统中运行,所以无需完成跨平台编译,压缩方式也无需5种(太多了下载过程可能会出错),只需要snappy压缩即可,修改rocksdb/Makefile:
ifneq ($(ROCKSDB_JAVA_NO_COMPRESSION), 1)
# JAVA_COMPRESSIONS = libz.a libbz2.a libsnappy.a liblz4.a libzstd.a
JAVA_COMPRESSIONS = libsnappy.a 
endif

#JAVA_STATIC_FLAGS = -DZLIB -DBZIP2 -DSNAPPY -DLZ4 -DZSTD
JAVA_STATIC_FLAGS = -DSNAPPY 
#JAVA_STATIC_INCLUDES = -I./zlib-$(ZLIB_VER) -I./bzip2-$(BZIP2_VER) -I./snappy-$(SNAPPY_VER) -I./lz4-$(LZ4_VER)/lib -I./zstd-$(ZSTD_VER)/lib/include
JAVA_STATIC_INCLUDES =  -I./snappy-$(SNAPPY_VER)
  1. 使用make rocksdbjavastaticrelease 编译规则,找到该规则,取消vagrantd的跨平台,无需安装Vagrant和Virtualbox,即在rocksdbjavastaticrelease规则下,注释掉:
#cd java/crossbuild && vagrant destroy -f && vagrant up linux32 && vagrant halt linux32 && vagrant up linux64 && vagrant halt linux64
  1. 在rocksdb文件夹下,执行make rocksdbjavastaticrelease -j16,会出现如下错误:
cd java/target;jar -uf rocksdbjni-5.18.3.jar librocksdbjni-*.so librocksdbjni-*.jnilib
librocksdbjni-*.jnilib : no such file or d
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值