LevelDB一个超高性能的KV数据库
LevelDB一个超高性能的K/V数据库
Leveldb是一个google实现的非常高效的kv数据库,目前的版本1.2能够支持billion级别的数据量了。 在这个数量级别下还有着非常高的性能,主要归功于它的良好的设计。特别是LSM算法。
LevelDB 是单进程的服务,性能非常之高,在一台4个Q6600的CPU机器上,每秒钟写数据超过40w,而随机读的性能每秒钟超过10w。
示例代码:
授权协议: BSD
开发语言: C/C++ C/C++
操作系统: Linux Linux
【简单说下leveldb】
作者:黄东旭@youdao
最近在公司内有人讨论到leveldb,之前正好也简单看了看文档,没仔细看实现,简单写个总结
1. leveldb的committer阵容很强大,几乎是google那篇经典的big table的原班人马。虽然有人说可能并不是完整的google的使用着的实现,但是还是很吸引人的
2. 它是一个k/v db library,提供持久化,看项目首页给出的performance很牛逼, 注意目前只是library, 严格来说和tc有点像,并没有dht,甚至没有server实现,不过我相信网上很多蛋疼的hacker会写的,如果有时间的话,我也蠢蠢欲动啊。和Redis之类没法比,因为没有cache。
3. 针对随机写做了优化,使用了传说中的LSMTree,google的那篇paper里写了,但是没仔细看,在这里暂时不评论。我想应该是目前开源的唯一的LSMTree的kv db的实现(流行的大多数b-tree,其实lsmtree貌似是b-tree的一个优化)
4. 实现了iterator, 对data可以前序甚至逆序遍历,这点很新鲜
5. 类似batch,atom这种就不说了,基本是目前的标配
6. 8g一下, chrome中的indexedDB就是用它实现的
7. 居然还提供了ObjC的port
简单归结一句话:这个东西是个k-v本地存储库,读性能一般(和TokyoCabinet 比),随机写不错,很小很清凉。没有memcache,没有server,什么都没有,就是个存储引擎而已。
1. #include
2. #include"leveldb/include/db.h"
3.
4. leveldb::DB*db;
5. leveldb::Options options;
6. options.create_if_missing=true;
7. leveldb::Status status=leveldb::DB::Open(options,"/tmp/testdb",&db);
8. assert(status.ok());
9.
开源的持久化 KV 单机存储引擎,开源页面 http://code.google.com/p/leveldb/...随着数据不断的写入和 compact 的进行,低 level 的 sstable 不断向高 level ...
SSDB-LevelDB原理与实现_计算机软件及应用_IT/计算机_专业资料。设计?自?己的...? LevelDB + libevent SSDB 开发?自?己的 KV数据库引擎 14年1?月3?日周五...
如果数据库被破坏了(可能是 因为打开了 paranoid checking 而导致它无法打开),leveldb::RepairDB 函数可以用 来尽量地对数据进行恢复。 2. 一个实际的 SSTable ...
kv以及复杂数 据结构缓存 rdb (Redis) 持久化引擎 特性:kv以及分级key 存储,数据排序 ldb (LevelDB) 目录一.LevelDB原理 二.Tair ldb介绍 三.ldb应用案例 四...
开源的持久化 KV 单机存储引擎,开源页面 http://code.google.com/p/leveldb/...随着数据不断的写入和 compact 的进行,低 level 的 sstable 不断向高 level ...
Google LevelDB Study Discuss_IT/计算机_专业资料...随机读– 从新到旧反向Read数据 ? 结合KV特点,短路...Pros. – 高性能的随机顺序写 – SSD性能优异,...
Redis 的主要缺点是数据库容量受到物理内存的限制,不能用作海量数据的高性能读...LevelDB google 开发的数据库,LevelDB 是一个嵌入式的 key-value 数据库。它的...
Hypertable, Cassandra, Memcachedb, levelDB etc MongoDB, coutchDB 系统设计目标...目标领域有 序 KV数据库 表 No-SQL 数据规模 高 题纲系统需求与现有方案 ? ...
一个110KV 室内变电站,2 回进线,全市 10KV 出线,大概 16 回, 请问大概占地多少? 35*75m,约 4 亩地;变电站投资受设备影响较大,比如我正在设 计的一个...
500KV 3/2 开关接线方式下的倒闸操作超高压管理局 500kV 集控中心 肖奕 前言: 针对我省 500kV 集控中心以后主要面对的是全省 500kV 变电站的集中监视 和...
热门文档