SQLite Blob读写的局限性

在使用SQLite在Windows Mobile上的大容量BLOB读写时,遇到一个OOM(Out Of Memory)的问题,让我们都觉得不可思议: 

试看下边的SQL语句代码片段:

    executeStmt(db, stmt, "create table foo(id integer not null primary key, content blob null, content2 blob null)"); 
    
    sqlite3_stmt* stmt2 = NULL; 
    executeStmt(db, stmt, "insert into foo(id) values(10)"); 

    sqlite3_stmt* stmt3 = NULL; 
    executeStmt(db, stmt3, "update foo set content=zeroblob(10*1024*1024) where rowid=10"); 

    sqlite3_stmt* stmt4 = NULL; 
    executeStmt(db, stmt4, "update foo set content2=zeroblob(1024) where rowid=10"); // OOM here  
    不过是单个数据库列的0填充而已,怎么会出现OOM呢? 

我直接给它的作者Dr. Richard Hipp和他的team发邮件询问,得到的答复是: 
每次更新,sqlite都会读取该行的数据,加载到内存里。难怪,第一列可是要10M内存。 
Richard建议:使用incremental BLOB I/O mechanism机制进行读写。 
可是这个机制局限性依然明显: 
e.g. 
first write,  20K, then append 10K.  If we want to append it,  we need to zeroblob 30K first. Otherwise, sqlite_blob_write will fail to write the chunk. 
??? 
他的答复是: 
Unfortunately, no; there is no way to increase the size of a row without allocating memory sufficient to hold the entire row. 
除非要更改sqlite的文件格式。一旦更改,将会打破与以前sqlite文件的兼容性。那是不可容忍的。 

看来,使用小内存逐步分片更改blob字段,在目前来看无法实现。只能接受此现实。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

iihero

谢谢打赏,不断前行

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值