longzuo 2012-04-03
1:简介
Leveldb是一个google实现的非常高效的kv数据库,可按照字符串键值顺序映射进行存贮。目前的版本1.2能够支持billion级别的数据量了。 在这个数量级别下还有着非常高的性能。
Leveldb是一个C++库,可用于很多情况。比如用于一个网页浏览器存储最近存取网页的缓存,或用于操作系统存储安装包列表,或用于应用存储用户的设置参数。其实新版本的Chrome浏览器里部署的IndexedDB HTML5 API就是基于LevelDB打造的。Google自己的数据库Bigtable掌管着数百万数据表也是用LevelDB的。
今天在Linux(Fedra14)下编译了一下,感觉不错。中间遇到了很多问题,记录下来。作为学习之用。
在这里我想发泄一下郁闷之情。我对学过Linux下的编程,但是不是很深入,大部分时间时自己摸索的,周围没有可以交流的人,再说周围的大部分在搞java、C#、.net没人在研究c\c++尤其是Linux下的。有些研究生毕业了还不知道什么是Ubuntu。我以一直喜欢技术特别是Linux的,不管怎样算是一种追求吧。自己摸索之路是很坎坷的,深知一个人探索的困难,所以遇到问题会自己写下来发成博客,对自己是一种学习,也希望别的有共同兴趣的人有所帮助,如果能让没有一点基础的人们能看懂,并且根据示例自己操作成功,也算是一件很有成就感的事。
2:编译源代码
我用的版本为Release 1.2 2011-05-16,这个需要用SVN下载,过程就不多说了。
2.1 解压缩文件,我的路径是/home/lyc/leveldb/Leveldb
2.2 进入解压缩后的路径,cd /home/lyc/leveldb/Leveldb
2.3 编译,这个很简单一个命令makefile就行了,注意这个编译需要g++的支持
2.4 编译后在/home/lyc/leveldb/Leveldb路径下会出现一个库文件libleveldb.a,这个可以用在自己的项目中
3:leveldb性能测试
默认的编译makefile命令是不会生成测试程序的,如果要生成这些辅助的程序,可以用命令makefile test
结果在/home/lyc/leveldb/Leveldb路径下会产生可执行文件db_bench,arena_test,db_test等测试程序。这个就不解少了,我的目标的是在自己的程序中使用leveldb,所以重点在使用库文件libleveldb.a上。
4:leveldb头文件准备
头文件的问题花了很多时间来解决,其实很简单,到/home/lyc/leveldb/Leveldb路径下(这个具体要根据自己的文件路径),用命令 cp -r include/leveldb /usr/local/include。把./include/leveldb文件夹的内容都拷到/usr/local/include路径下。
注意要切还到root用户,要不没有执行的权限。
5:示例程序
把libleveldb.a、db.h拷到本程序的同一路径下。
编译命令为: g++ -o sa Main.cpp libleveldb.a -lpthread
执行:
[lyc@Fedora test]$ ./sa
结果:
Open db OK
源码Main.cpp:
6.1 编译中加上库文件的路径(libleveldb.a)和线程库标志(-lpthread),执行后在当前文件产生一个文件夹testdb保存了插入的数据。
6.2 leveldb用于一些单间的数据比如名称-值对,并且数据量远大于内存并且需要永久保存的情况下。很适合大规模的语言模型文件存贮。
6.3 插入的数据为两个字符串对一个为key,另外一个为value,查询时可以根据key取得value的值,相反不可以。