由于之前帖子内容太多,这里重新发布一篇,之前帖子地址--> 地址
什么是rocksdb?
- RocksDB是一个 持久的键值存储库 ,它是用C++编写的,适合在快速、低延迟的存储设备上存储数据。它是由Facebook数据库工程团队开发和维护。
LevelDB 有什么区别?
- RocksDB和LevelDB都是基于LSM-Tree的嵌入式键值存储库,但RocksDB是在LevelDB的基础上进行了优化和增强
- RocksDB可以支持 多线程 合并文件,而LevelDB是 单线程
- RocksDB可以根据需要开辟 多个Memtable ,而LevelDB只有 一个Memtable
- RocksDB可支持多种压缩算法,而LevelDB只支持snappy
- 单线程模式下 LevelDB 可能稍微快一点,而在多线程下 RocksDB 就会发挥出它的优势了
rocksdb的优点
- 高性能:RocksDB 使用了很多优化技术,如多线程、高效的数据结构等,因此具有非常高的读写性能。
- 可扩展性:RocksDB 可以处理大规模的数据,并支持自动分片和负载均衡等功能,因此可以很好地应对高并发访问。
- 可靠性:RocksDB 支持 ACID 事务,保证数据的一致性和可靠性。
- 灵活性:RocksDB 支持多种数据格式,包括内存映射文件、纯内存等,让用户可以灵活选择适合自己的存储方式。
- RocksDB在存储数据时是按照键的排序方式进行存储的,它并没有明确的容量限制,可以存储非常大的数据 [理论上无限制容量]。而类似MMKV框架限制容量的方式是使用了一种固定大小的映射文件,即在创建MMKV实例时就已经确定了最大容量,超过容量时就不能再写入数据[大概在 4GB 左右]
下图为 rocksdb和leveldb 单/多线程 写入对比
理论上在单线程下 RocksDB应该比levldb稍微略慢一点
图中可看到300W多线程写入RocksDB一瞬间完成
另外发布了一份火山版rocksdb
更新日志 2023/09/21 18:00 - V1.5 本次更新内容有点多
- 本次使用了C++ MT 模式编译
- 增加 Transaction事务类 (此事务支持在事务内创建迭代器,支持事务读取回滚操作)
- 增加 OptimisticTransactionDB_类
- 增加 TransactionDB类 (TransactionDB(PessimisticTransactionDB)和OptimisticTransactionDB,分别对应并发控制中的悲观锁和乐观锁)
- 增加 Merge 合并功能 (使用此命令前务必在 rocksdb_启动参数 的 合并模式 选择合并模式)
- 修复 压缩模式 无效
- 修复 关闭写前日志 无效 (如果想完全启用内存模式,请将缓存调大关闭写前日志开启 即可)
- OptimisticTransactionDB,TransactionDB 对应的事务 [Transaction事务类]
- ...
- 以下为Facebook官方更新
- -Please note 8.5.1 includes a fix for a persisted database corruption in an unlikely edge case. Upgrading to a version including this fix, like this one, is highly recommended!
- Fixed a race condition in GenericRateLimiter that could cause it to stop granting requests
- Fix a bug where iterator may return incorrect result for DeleteRange() users if there was an error reading from a file.
- Fix a bug where if there is an error reading from offset 0 of a file from L1+ and that the file is not the first file in the sorted run, data can be lost in compaction and read/scan can return incorrect results.
点我下载
(已有 45 次下载)