sqlite数据库的基本操作:
1.关键数据类型和结构
sqlite 里最常用到的是 sqlite3 * 类型。从数据库打开开始,sqlite就要为这个类型准备好内存,直到数据库关闭,整个过程都需要用到这个类型。当数据库打开时开始,这个类型的变量就代表了你要操作的数据库。下面再详细介绍。
大 多数的数据库在数据类型上都有严格的限制,在建立表的时候,每一列都必须制定一个数据类型,只有符合该数据类型的数据可以被保存在这一列当中。而在 Sqlite 2.X中,数据类型这个属性只属于数据本生,而不和数据被存在哪一列有关,也就是说数据的类型并不受数据列限制(有一个例外:INTEGER PRIMARY KEY,该列只能存整型数据)。
但是当Sqlite进入到3.0版本的时候,这个问题似乎又有了新的答案,Sqlite的开发者 开始限制这种无类型的使用,在3.0版本当中,每一列开始拥有自己的类型,并且在数据存入该列的时候,数据库会试图把数据的类型向该类型转换,然后以转换 之后的类型存储。当然,如果转换被认为是不可行的,Sqlite仍然会存储这个数据,就像他的前任版本一样。
举个例子,如果你企图向一个INTEGER类型的列中插入一个字符串,Sqlite会检查这个字符串是否有整型数据的特征, 如果有而且可以被数据库所识别,那么该字符串会被转换成整型再保存,如果不行,则还是作为整型存储。
总的来说,所有存在Sqlite 3.0版本当中的数据都拥有以下之一的数据类型:
空(NULL):该值为空
整型(INTEGEER):有符号整数,按大小被存储成1,2,3,4,6或8字节。
实数(REAL):浮点数,以8字节指数形式存储。
文本(TEXT):字符串,以数据库编码方式存储(UTF-8, UTF-16BE 或者 UTF-16-LE)。
BLOB:BLOB数据不做任何转换,以输入形式存储。
注意:在关系数据库中,CLOB和BLOB类型被用来存放大对象。BOLB表示二进制大对象,这种数据类型通过用来保存图片,图象,视频等。CLOB表示字符大对象,能够存放大量基于字符的数据。
对应的,对于数据列,同样有以下的数据类型:
TEXT
NUMERIC
INTEGER
REAL
NONE
数据列的属性的作用是确定对插入的数据的转换方向:
TEXT 将数据向文本进行转换,对应的数据类型为NULL,TEXT 或 BLOB
NUMERIC 将数据向数字进行转换,对应的数据类型可能为所有的五类数据,当试图存入文本 时将执行向整型或浮点类型的转换(视具体的数值而定),转换若不可行,则保留文本类型存储,NULL或BLOB不做变化
INTEGER 将数据向整型转换,类似于NUMERIC,不同的是没有浮点标志的浮点数将转换为整型保存
REAL 将数据向浮点数类型转换,类似于NUMERIC,不同的是整数将转换为浮点数保存
NULL 不做任何转换的数据列类型
2.打开数据库
- int sqlite3_open(filename, sqlite3 * );
int sqlite3_open(filename, sqlite3 * );
两个参数:
一是数据库文件名,比如:Database.db
文件名不需要一定存在,如果此文件不存在,sqlite 会自动建立它。如果它存在,就尝试把它当数据库文件来打开。
二是sqlite3 ** 参数,即前面提到的关键数据结构。这个结构底层细节如何,你不要关它。
函数返回值表示操作是否正确,如果是 SQLITE_OK 则表示操作正常。相关的返回值sqlite定义了一些宏。具体这些宏的含义可以参考 sqlite3.h 文件。里面有详细定义(顺便说一下,sqlite3 的代码注释率自称是非常高的,实际上也的确很高。只要你会看英文,sqlite 可以让你学到不少东西)。
3.关闭数据库
- int sqlite3_close(sqlite3 *);
int sqlite3_close(sqlite3 *);
4.执行sql语句
- int sqlite3_exec(sqlite3*, const char *sql, sqlite3_callback, void *, char **errmsg );
int sqlite3_exec(sqlite3*, const char *sql, sqlite3_callback, void *, char **errmsg );
第1个参数不再说了,是前面open函数得到的指针。说了是关键数据结构。
第2个参数const char *sql 是一条 sql 语句,以/0结尾。
第3个参数sqlite3_callback 是回调,当这条语句执行之后,sqlite3会去调用你提供的这个函数。(什么是回调函数,自己找别的资料学习)
第4个参数void * 是你所提供的指针,你可以传递任何一个指针参数到这里,这个参数最终会传到回调函数里面,如果不需要传递指针给回调函数,可以填NULL。等下我们再看回调函数的写法,以及这个参数的使用。
第5个参数char ** errmsg 是错误信息。注意是指针的指针。sqlite3里面有很多固定的错误信息。执行 sqlite3_exec 之后,执行失败时可以查阅这个指针(直接 printf(“%s/n”,errmsg))得到一串字符串信息,这串信息告诉你错在什么地方。sqlite3_exec函数通过修改你传入的指针的指针,把你提供的指针指向错误提示信息,这样sqlite3_exec函数外面就可以通过这个 char*得到具体错误提示。
说明:通常,sqlite3_callback 和它后面的 void * 这两个位置都可以填 NULL。填NULL表示你不需要回调。比如你做 insert 操作,做 delete 操作,就没有必要使用回调。而当你做 select 时,就要使用回调,因为 sqlite3 把数据查出来,得通过回调告诉你查出了什么数据。
5.exec 的回调
- typedef int (*sqlite3_callback)(void*,int,char**, char**);
typedef int (*sqlite3_callback)(void*,int,char**, char**);
你的回调函数必须定义成上面这个函数的类型。
6.查询
非回调函数的查询:
- int sqlite3_get_table(sqlite3*, const char *sql,char***result , int *nrow , int *ncolumn ,char **errmsg );
int sqlite3_get_table(sqlite3*, const char *sql,char***result , int *nrow , int *ncolumn ,char **errmsg );
第1个参数不再多说,看前面的例子。第2个参数是 sql 语句,跟 sqlite3_exec 里的 sql 是一样的。是一个很普通的以/0结尾的char *字符串。
第3个参数是查询结果,它依然一维数组(不要以为是二维数组,更不要以为是三维数组)。它内存布局是:第一行是字段名称,后面是紧接着是每个字段的值。下面用例子来说事。
第4个参数是查询出多少条记录(即查出多少行)。
第5个参数是多少个字段(多少列)。
第6个参数是错误信息。
7.删除
- sql = "delete from SensorData where SensorID = 1 ;" ;
- sqlite3_exec( db , sql , 0 , 0 , &zErrMsg );
sql = "delete from SensorData where SensorID = 1 ;" ;
sqlite3_exec( db , sql , 0 , 0 , &zErrMsg );
所有的操作都可以通过sqlite3_exec这个函数
sqlite基本操作举例:
- #include<stdio.h>
- #include<stdlib.h>
- #include<sqlite3.h>
- //回调函数
- int LoadMyInfo(void *para,int n_column,char **column_value,char **column_name)
- {
- int i;
- printf("记录包含%d个字段\n",n_column);
- for(i = 0;i < n_column;i++)
- {
- printf("字段名:%s字段值:%s\n",column_name[i],column_value[i]);
- }
- printf("-------------------------\n");
- return 0;
- }
- int main(void)
- {
- sqlite3 *db = NULL;
- char *zErrMsg = 0;
- int rc;
- rc = sqlite3_open("wxj.db",&db);
- if(rc)
- {
- fprintf(stderr,"open error:%s\n",sqlite3_errmsg(db));
- sqlite3_close(db);
- exit(1);
- }
- else printf("open successfully\n");
- char *sql = "create table SensorData(ID INTEGER PRIMARY KEY, SensorID INTEGER, SiteNum INTEGER, Time VARCAR(12), SersorParameter REAL );";
- sqlite3_exec(db,sql,0,0,&zErrMsg);
- #ifdef _DEBUG_
- printf("%s\n",zErrMsg);
- #endif
- char *sql1 = "insert into SensorData values(NULL,1,1,'1',98.9);";
- sqlite3_exec(db,sql1,0,0,&zErrMsg);
- char *sql2 = "insert into SensorData values(NULL,2,2,'2',99.9);";
- sqlite3_exec(db,sql2,0,0,&zErrMsg);
- char *sql4 = "insert into SensorData values(NULL,3,3,'3',100);";
- sqlite3_exec(db,sql4,0,0,&zErrMsg);
- printf("基于回调函数查询结果\n");
- char *sql3 = "select *from SensorData";
- sqlite3_exec(db,sql3,LoadMyInfo,NULL,&zErrMsg);//基于回调函数的查询
- printf("删除数据后的查询\n");
- char *sql5 = "delete from SensorData where SensorID = 1;";
- sqlite3_exec(db,sql5,0,0,&zErrMsg);
- printf("基于非回调函数查询结果\n");
- char **result;
- int nrow = 0,ncolumn = 0,index;
- sqlite3_get_table(db,sql3,&result,&nrow,&ncolumn,&zErrMsg);
- int i = 0,j = 0;
- printf("row=%dcolumn=%d\n",nrow,ncolumn);
- index = ncolumn;
- printf("查到%d条记录\n",nrow);
- for(i = 0;i < nrow;i++)
- {
- printf("第%d条记录\n",i+1);
- for(j = 0;j < ncolumn;j++)
- {
- printf("字段名:%s字段值:%s\n",result[j],result[index]);
- ++index;
- }
- printf("---------------\n");
- }
- sqlite3_close(db);
- return 0;
- }
#include<stdio.h>
#include<stdlib.h>
#include<sqlite3.h>
//回调函数
int LoadMyInfo(void *para,int n_column,char **column_value,char **column_name)
{
int i;
printf("记录包含%d个字段\n",n_column);
for(i = 0;i < n_column;i++)
{
printf("字段名:%s字段值:%s\n",column_name[i],column_value[i]);
}
printf("-------------------------\n");
return 0;
}
int main(void)
{
sqlite3 *db = NULL;
char *zErrMsg = 0;
int rc;
rc = sqlite3_open("wxj.db",&db);
if(rc)
{
fprintf(stderr,"open error:%s\n",sqlite3_errmsg(db));
sqlite3_close(db);
exit(1);
}
else printf("open successfully\n");
char *sql = "create table SensorData(ID INTEGER PRIMARY KEY, SensorID INTEGER, SiteNum INTEGER, Time VARCAR(12), SersorParameter REAL );";
sqlite3_exec(db,sql,0,0,&zErrMsg);
#ifdef _DEBUG_
printf("%s\n",zErrMsg);
#endif
char *sql1 = "insert into SensorData values(NULL,1,1,'1',98.9);";
sqlite3_exec(db,sql1,0,0,&zErrMsg);
char *sql2 = "insert into SensorData values(NULL,2,2,'2',99.9);";
sqlite3_exec(db,sql2,0,0,&zErrMsg);
char *sql4 = "insert into SensorData values(NULL,3,3,'3',100);";
sqlite3_exec(db,sql4,0,0,&zErrMsg);
printf("基于回调函数查询结果\n");
char *sql3 = "select *from SensorData";
sqlite3_exec(db,sql3,LoadMyInfo,NULL,&zErrMsg);//基于回调函数的查询
printf("删除数据后的查询\n");
char *sql5 = "delete from SensorData where SensorID = 1;";
sqlite3_exec(db,sql5,0,0,&zErrMsg);
printf("基于非回调函数查询结果\n");
char **result;
int nrow = 0,ncolumn = 0,index;
sqlite3_get_table(db,sql3,&result,&nrow,&ncolumn,&zErrMsg);
int i = 0,j = 0;
printf("row=%dcolumn=%d\n",nrow,ncolumn);
index = ncolumn;
printf("查到%d条记录\n",nrow);
for(i = 0;i < nrow;i++)
{
printf("第%d条记录\n",i+1);
for(j = 0;j < ncolumn;j++)
{
printf("字段名:%s字段值:%s\n",result[j],result[index]);
++index;
}
printf("---------------\n");
}
sqlite3_close(db);
return 0;
}
8.写入二进制
要插入二进制,前提是这个表的字段的类型是 blob 类型。我假设有这么一张表:
create table Tbl_2( ID integer, file_content blob )
首先声明
sqlite3_stmt * stat;
然后,把一个 sql 语句解析到 stat 结构里去:
sqlite3_prepare( db, “insert into Tbl_2( ID, file_content) values( 10, ? )”, -1, &stat, 0 );
上面的函数完成 sql 语句的解析。
第一个参数跟前面一样,是个 sqlite3 * 类型变量,第二个参数是一个 sql 语句。
这个 sql 语句特别之处在于 values 里面有个 ? 号。在sqlite3_prepare函数里,?号表示一个未定的值,它的值等下才插入。
第三个参数我写的是-1,这个参数含义是前面 sql 语句的长度。如果小于0,sqlite会自动计算它的长度(把sql语句当成以/0结尾的字符串)。
第四个参数是 sqlite3_stmt 的指针的指针。解析以后的sql语句就放在这个结构里。
第五个参数为0就可以了。
如果这个函数执行成功(返回值是 SQLITE_OK 且 stat 不为NULL ),那么下面就可以开始插入二进制数据。
sqlite3_bind_blob( stat, 1, pdata, (int)(length_of_data_in_bytes), NULL ); // pdata为数据缓冲区,length_of_data_in_bytes为数据大小,以字节为单位
这个函数一共有5个参数。
第1个参数:是前面prepare得到的 sqlite3_stmt * 类型变量。
第2个参数:?号的索引。前面prepare的sql语句里有一个?号,假如有多个?号怎么插入?方法就是改变 bind_blob 函数第2个参数。这个参数我写1,表示这里插入的值要替换 stat 的第一个?号(这里的索引从1开始计数,而非从0开始)。如果你有多个?号,就写多个 bind_blob 语句,并改变它们的第2个参数就替换到不同的?号。如果有?号没有替换,sqlite为它取值null。
第3个参数:二进制数据起始指针。
第4个参数:二进制数据的长度,以字节为单位。
第5个参数:是个析够回调函数,告诉sqlite当把数据处理完后调用此函数来析够你的数据。这个参数我还没有使用过,因此理解也不深刻。但是一般都填NULL,需要释放的内存自己用代码来释放。
bind完了之后,二进制数据就进入了你的“sql语句”里了。你现在可以把它保存到数据库里:
int result = sqlite3_step( stat );
通过这个语句,stat 表示的sql语句就被写到了数据库里。
最后,要把 sqlite3_stmt 结构给释放:
sqlite3_finalize( stat ); //把刚才分配的内容析构掉
9.读出二进制
下面说读二进制的步骤。
跟前面一样,先声明 sqlite3_stmt * 类型变量:
sqlite3_stmt * stat;
然后,把一个 sql 语句解析到 stat 结构里去:
sqlite3_prepare( db, “select * from Tbl_2”, -1, &stat, 0 );
当 prepare 成功之后(返回值是 SQLITE_OK ),开始查询数据。
int result = sqlite3_step( stat );
这一句的返回值是 SQLITE_ROW 时表示成功(不是 SQLITE_OK )。
你可以循环执行 sqlite3_step 函数,一次 step 查询出一条记录。直到返回值不为 SQLITE_ROW 时表示查询结束。
然后开始获取第一个字段:ID 的值。ID是个整数,用下面这个语句获取它的值:
int id = sqlite3_column_int( stat, 0 ); //第2个参数表示获取第几个字段内容,从0开始计算,因为我的表的ID字段是第一个字段,因此这里我填0
下面开始获取 file_content 的值,因为 file_content 是二进制,因此我需要得到它的指针,还有它的长度:
const void * pFileContent = sqlite3_column_blob( stat, 1 );
int len = sqlite3_column_bytes( stat, 1 );
这样就得到了二进制的值。
把 pFileContent 的内容保存出来之后,不要忘了释放 sqlite3_stmt 结构:
sqlite3_finalize( stat ); //把刚才分配的内容析构掉
i.3 重复使用 sqlite3_stmt 结构
如果你需要重复使用 sqlite3_prepare 解析好的 sqlite3_stmt 结构,需要用函数: sqlite3_reset。
result = sqlite3_reset(stat);
这样, stat 结构又成为 sqlite3_prepare 完成时的状态,你可以重新为它 bind 内容。
SQLite中如何操作blob类型的字段:
下面代码展示的是如何用blob类型存储和读取图片:
- #include<sqlite3.h>
- #include<stdio.h>
- #include<stdlib.h>
- int main(int argc,char *argv[])
- {
- sqlite3 *db = NULL;
- sqlite3_stmt *stmt = NULL;
- char *ffile;//指向下面新分配的空间地址
- FILE *fp;
- int rc,i,j;
- char *zErrMsg;
- long filesize = 0;
- rc = sqlite3_open("image.db",&db);
- if(rc)
- {
- fprintf(stderr,"open error:%s\n",sqlite3_errmsg(db));
- sqlite3_close(db);
- exit(1);
- }
- else printf("open successfully\n");
- sqlite3_exec(db,"create table imagelist(filename varchar(128) unique,image blob);",0,0,&zErrMsg);
- rc = sqlite3_prepare(db,"insert into imagelist values('x,jpg',?);",-1,&stmt,0);
- if(rc != SQLITE_OK)
- {
- printf("sqlite3_prepare error\n");
- return 0;
- }
- fp = fopen("x.jpg","rb");
- if(fp != NULL)
- {
- //计算文件的大小
- fseek(fp,0,SEEK_END);
- filesize = ftell(fp);
- fseek(fp,0,SEEK_SET);
- //读取文件
- ffile = (char*)malloc(filesize+1);
- size_t sz = fread(ffile,sizeof(char),filesize+1,fp);
- fclose(fp);
- }
- //将文件数据绑定到insert语句中,替换?部分
- sqlite3_bind_blob(stmt,1,ffile,filesize,NULL);
- //执行绑定之后的SQL语句
- sqlite3_step(stmt);
- //查询并读取二进制
- rc = sqlite3_prepare(db,"select *from imagelist;",-1,&stmt,0);
- if(rc != SQLITE_OK)
- {
- printf("sqlite3_prepare error\n");
- return 0;
- }
- sqlite3_step(stmt);
- //获取file_content的值,为二进制
- //获取指针
- const void *test = sqlite3_column_blob(stmt,1);
- //获取长度
- int size = sqlite3_column_bytes(stmt,1);
- //把格式化的数据写入到字符串中
- //char buffer[1024] = "0";
- //sprintf(buffer,"%s",test);
- FILE *fp2;
- fp2 = fopen("y.jpg","wb");
- if(fp2 != NULL)
- {
- size_t ret = fwrite(test,sizeof(char),size,fp2);
- fclose(fp2);
- }
- free(ffile);
- //析构
- sqlite3_finalize(stmt);
- sqlite3_close(db);
- return 0;
- }
#include<sqlite3.h>
#include<stdio.h>
#include<stdlib.h>
int main(int argc,char *argv[])
{
sqlite3 *db = NULL;
sqlite3_stmt *stmt = NULL;
char *ffile;//指向下面新分配的空间地址
FILE *fp;
int rc,i,j;
char *zErrMsg;
long filesize = 0;
rc = sqlite3_open("image.db",&db);
if(rc)
{
fprintf(stderr,"open error:%s\n",sqlite3_errmsg(db));
sqlite3_close(db);
exit(1);
}
else printf("open successfully\n");
sqlite3_exec(db,"create table imagelist(filename varchar(128) unique,image blob);",0,0,&zErrMsg);
rc = sqlite3_prepare(db,"insert into imagelist values('x,jpg',?);",-1,&stmt,0);
if(rc != SQLITE_OK)
{
printf("sqlite3_prepare error\n");
return 0;
}
fp = fopen("x.jpg","rb");
if(fp != NULL)
{
//计算文件的大小
fseek(fp,0,SEEK_END);
filesize = ftell(fp);
fseek(fp,0,SEEK_SET);
//读取文件
ffile = (char*)malloc(filesize+1);
size_t sz = fread(ffile,sizeof(char),filesize+1,fp);
fclose(fp);
}
//将文件数据绑定到insert语句中,替换?部分
sqlite3_bind_blob(stmt,1,ffile,filesize,NULL);
//执行绑定之后的SQL语句
sqlite3_step(stmt);
//查询并读取二进制
rc = sqlite3_prepare(db,"select *from imagelist;",-1,&stmt,0);
if(rc != SQLITE_OK)
{
printf("sqlite3_prepare error\n");
return 0;
}
sqlite3_step(stmt);
//获取file_content的值,为二进制
//获取指针
const void *test = sqlite3_column_blob(stmt,1);
//获取长度
int size = sqlite3_column_bytes(stmt,1);
//把格式化的数据写入到字符串中
//char buffer[1024] = "0";
//sprintf(buffer,"%s",test);
FILE *fp2;
fp2 = fopen("y.jpg","wb");
if(fp2 != NULL)
{
size_t ret = fwrite(test,sizeof(char),size,fp2);
fclose(fp2);
}
free(ffile);
//析构
sqlite3_finalize(stmt);
sqlite3_close(db);
return 0;
}
10.事务处理
sqlite 是支持事务处理的。如果你知道你要同步删除很多数据,不仿把它们做成一个统一的事务。
通常一次 sqlite3_exec 就是一次事务,如果你要删除1万条数据,sqlite就做了1万次:开始新事务->删除一条数据->提交事务->开始新事务->… 的过程。这个操作是很慢的。因为时间都花在了开始事务、提交事务上。
你可以把这些同类操作做成一个事务,这样如果操作错误,还能够回滚事务。
事务的操作没有特别的接口函数,它就是一个普通的 sql 语句而已:
分别如下:
- int result;
- result = sqlite3_exec( db, "begin transaction", 0, 0, &zErrorMsg ); //开始一个事务
- result = sqlite3_exec( db, "commit transaction", 0, 0, &zErrorMsg ); //提交事务
- result = sqlite3_exec( db, "rollback transaction", 0, 0, &zErrorMsg ); //回滚事务
int result;
result = sqlite3_exec( db, "begin transaction", 0, 0, &zErrorMsg ); //开始一个事务
result = sqlite3_exec( db, "commit transaction", 0, 0, &zErrorMsg ); //提交事务
result = sqlite3_exec( db, "rollback transaction", 0, 0, &zErrorMsg ); //回滚事务