python lmdb demo 这接口和BDB一样恶心啊!
import lmdb lmdb_img_name = "test.lmdb" env = lmdb.open(lmdb_img_name, map_size=1e6) with env.begin(write=True) as txn: txn.put("key", "xxxxxxxxxxxxxxxxxx") txn.put("key2", "?") txn.put("key3", "some value") #txn.commit() env.close() env = lmdb.open(lmdb_img_name, readonly=True) with env.begin() as txn: print txn.get(b'key') cursor = txn.cursor() for key, value in cursor: print(key, value)
更多见:http://blog.csdn.net/ayst123/article/details/44077903,摘录如下:
write
db_img = lmdb.Environment(lmdb_img_name,map_size=int(1e12))
txn_img = db_img.begin(write=True,buffers=True)
datum_img = getImgDatum(img_path)
txn_img.put(key,datum_img.SerializeToString())
txn_img.commit()
db_img.close()
这里,先建立lmdb的instance, db_img。 然后开始txn(可能有很多个开始?)。 put 存放,最后一定注意要commit()。不然根本没有存进去,检查下生成的lmdb文件就能看出。最后,close()
这里生成datum是用caffe自带的函数,做io.py里,叫caffe.io.array_to_datum, 将array变成datum.
Note:
datum存的时候一定要用datum.SerializeToString(), 将它变成string()
分段write
for ind,obj in enumerate(list):
if ind%100=0:
txn.commit()
txn = env.begin(write=True)
txn.commit()
env.close()
每一次commit 后,需要再定义一次 txn=env.begin(write=True)
for loop 外面最后再 commit
Read
img_lmdb = imdb.open("name")
txn= img_lmdb.begin()
cursor = txn.cursor()
cursor.iternext()
key = cursor.key()
value = cursor.value()
datum = caffe_pb2.Datum()
datum.ParseFromString(value)
Note:
cursor 第一个是空的, iternext()后是第一个值
循环
txn = …
cursor = txn.cursor()
for ( idx, (key, value) ) in enumerate(cursor):
…………….
这就可以循环找了
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
· 理解Rust引用及其生命周期标识(上)
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
· 没有源码,如何修改代码逻辑?
· 全程不用写代码,我用AI程序员写了一个飞机大战
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· 记一次.NET内存居高不下排查解决与启示
· 白话解读 Dapr 1.15:你的「微服务管家」又秀新绝活了
· DeepSeek 开源周回顾「GitHub 热点速览」