数据持久化技术比较

【数据存储】coredata、sqlite、fmdb和sqlitepersistentobject

管理提醒: 本帖被 angellixf 从 OS X开发讨论区移动到本区(2014-02-12)

分享类型：应用开发相关

在ios开发过程中，经常需要用到数据持久化工作。对于基本的配置信息等，NSUserDefault已经可以满足要求，但是对于大部分需要存储的信息，主要的方式有coredata建模或者sqlite写数据库的方法进行存储。现在针对coredata、sqlite以及常用的sqlite封装库进行研究和学习。

    首先，针对四种数据持久化方式，进行基本的10w条数据插入得到性能耗时如下（由于sqlitepersistentobject未找到合适的批量插入方法，所以没有进行对比）：

  sqlite          1470ms
  fmdb           3088ms
  coredata    3418ms

从中可以看出，sqlite最快，基本都只用fmdb以及coredata等的一半时间。接下来我们逐个解析相关技术/库的操作以及使用。

【coreData】
    coredata相信基本都不陌生，我们常用的主要就是Data Model了，有两种方法添加Data Model：新建工程时勾选或者添加Core Data->Data Model文件。采用第一种方法默认会有相关的代码生成，为了更好的了解Core Data是怎么load进来的，我们采用第二种方法进行演示。

首先，我们添加CoreData->Model Data模型，名字输入为coreData，即可在文件列表中见到coreData.xcdatamodeld文件。我们先添加如下Entities:

我们已经有了模型，那么该怎样使用呢。有一个NSManagedObjectModel的类，专门用来管理数据模型的。先从coreData.xcdatamodeld中初始化模型：

复制代码

// initilize
NSURL* modelURL = [[NSBundle mainBundle] URLForResource:@"coreData" withExtension:@"momd"];
coreDataModel = [[NSManagedObjectModel alloc] initWithContentsOfURL:modelURL];</span>
我们可以理解为，coreDataModel就代表了该模型。
接下来，我们需要考虑，有了模型后，数据最终应该存在哪里?答案是：文件。接下来我们有另外一个类来管理模型跟文件之间的对应关系：
[code]NSString* strInfoPath = [[NSHomeDirectory() stringByAppendingPathComponent:@"Documents"] stringByAppendingPathComponent:@"coreData.sqlite"];
coreDataCoordinator = [[NSPersistentStoreCoordinator alloc] initWithManagedObjectModel:coreDataModel];
[coreDataCoordinator addPersistentStoreWithType:NSSQLiteStoreType configuration:nil URL:[NSURL fileURLWithPath:strInfoPath] options:nil error:nil];</span>
OK，现在文件<->模型之间的映射关系也有了。那么接下来我们就需要去对模型数据库进行读写操作等。自然，有一个上下文用来执行/处理相关数据信息：
[code]// 对context进行操作
coreDataContext = [[NSManagedObjectContext alloc] init];
[coreDataContext setPersistentStoreCoordinator:coreDataCoordinator];</span>
我们尝试去插入一条数据：
[code]NSManagedObject* object = [NSEntityDescription insertNewObjectForEntityForName:@"TestCoreData" inManagedObjectContext:coreDataContext];
[object setValue:[NSNumber numberWithInt:data->intType] forKey:@"intType"];
[object setValue:[NSNumber numberWithFloat:data->floatType] forKey:@"floatType"];
[object setValue:[NSNumber numberWithDouble:data->doubleType] forKey:@"doubleType"];
[object setValue:[NSString stringWithUTF8String:data->testString] forKey:@"stringType"];

插入数据过程中，首先获取一个NSManagedObject的对象，可以这么理解，NSManagedObject就代表了一条数据信息，我们用insertNewObjectForEntityForName往TestCoreData这个数据模型中添加了一条数据：object。后面的[object setValue:"***" forkey:"***"]即为该条插入的数据进行赋值。
添加完毕数据后，内存中模型已经有添加的数据了。但是文件中还没有同步进去，那么我们调用：
[coreDataContext save:nil];

即可将刚才插入的数据保存到文件中。
关于其他修改、删除等操作，以及core data中的releationship操作等，可以参考附件程序或查阅相关其他资料。
【sqlite】

    sqlite是一款轻量级数据库，在c、c++、java以及其他各种产品中都有涉及到，xcode对sqlite也提供的原生支持。使用sqlite也不难，只要在Link Binary With Libraries中添加ibsqlite3.0.dylib（我是用的3.0版本），然后在需要使用的地方添加头文件：#include<sqlite3.h>即可。
    sqlite的操作很方便，也很直观：

复制代码

- (IBAction)onBtnSqlite:(id)sender {
// 初始化数据库要保存的地方，如果存在则删除
NSString* strSQLiteFilePath = [[NSHomeDirectory() stringByAppendingPathComponent:@"Documents"] stringByAppendingPathComponent:@"sqlite.sqlite"];
BOOL bIsDir = FALSE;
if ([[NSFileManager defaultManager] fileExistsAtPath:strSQLiteFilePath isDirectory:&bIsDir]) {
[[NSFileManager defaultManager] removeItemAtPath:strSQLiteFilePath error:nil];
}
sqlite3* sqlite = NULL;
// 首先打开数据库路径，如果不存在则创建
if (SQLITE_OK != sqlite3_open([strSQLiteFilePath UTF8String], &sqlite)) {
NSLog(@"sqlite3: open error...");
}
// create table
// 创建表，主要就是sql语句
NSString* strCreateTable = @"CREATE TABLE TESTCOREDATA(intType INTEGER, floatType FLOAT, doubleType DOUBLE, stringType VARCHAR(256))";
if (sqlite3_exec(sqlite, [strCreateTable UTF8String], nil, nil, nil) != SQLITE_OK) {
NSLog(@"sqlite Create table error...");
}
// 接下来是生成10w条测试数据
NSArray* arrayTest = [self arrayWithData:100000];
NSLog(@"Before save...");
// !!!这里很重要，将所有的insert操作作为一个transaction操作，这样避免每次insert的时候都去写文件，导致IO时间拖慢整个数据插入操作
NSString* strBegin = @"BEGIN TRANSACTION";
sqlite3_exec(sqlite, [strBegin UTF8String], NULL, NULL, NULL);
// 遍历数据并插入，就是普通的sql语句操作
for (NSValue* value in arrayTest)
{
Data* data = [value pointerValue];
NSString* strSQLInsert = [NSString stringWithFormat:@"INSERT INTO TESTCOREDATA(intType, floatType, doubleType, stringType) values(%d, %f, %lf, '%s')", data->intType, data->floatType, data->doubleType, data->testString];
if (SQLITE_OK != sqlite3_exec(sqlite, [strSQLInsert UTF8String], NULL, NULL, NULL))
{
const char* errormsg = sqlite3_errmsg(sqlite);
NSLog(@"exec Error...");
}
free(data);
}
// 提交所有的插入操作
NSString* strEnd = @"COMMIT";
sqlite3_exec(sqlite, [strEnd UTF8String], NULL, NULL, NULL);
NSLog(@"End Save...");
// 不使用的时候关闭即可
sqlite3_close(sqlite);
sqlite = NULL;
}

sqlite非常直观，并且依赖于sql语句，所以sqlite的有点在于灵活性高，上手简单并易于理解。缺点就是带来了很多底层数据库的操作，一般都需要自己再去进行数据建模并进行封装使用。
相关读写步骤也很简单：

复制代码

- (IBAction)onBtnSqliteRead:(id)sender {
sqlite3* sqlite = NULL;
NSString* strSQLiteFilePath = [[NSHomeDirectory() stringByAppendingPathComponent:@"Documents"] stringByAppendingPathComponent:@"sqlite.sqlite"];
BOOL bIsDir = FALSE;
if (![[NSFileManager defaultManager] fileExistsAtPath:strSQLiteFilePath isDirectory:&bIsDir]) {
NSLog(@"Sqlite Open Error....File NOt exist...");
return;
}
if (SQLITE_OK != sqlite3_open([strSQLiteFilePath UTF8String], &sqlite))
{
NSLog(@"sqlite open error...");
return;
}
NSString* strSQL = @"select * from TESTCOREDATA";
sqlite3_stmt* stmt;
// 将对应的操作信息跟stmt进行bind，如果有相关条件可以在prepare之后进行调整
sqlite3_prepare_v2(sqlite, [strSQL UTF8String], -1, &stmt, NULL);
// 获取执行SQL的返回结果
while (SQLITE_ROW == sqlite3_step(stmt)) {
int nIntType = sqlite3_column_int(stmt, 0);
float floatType = sqlite3_column_double(stmt, 1);
double doubleType = sqlite3_column_double(stmt, 2);
const unsigned char* strTest = sqlite3_column_text(stmt, 3);
break;
}
sqlite3_close(sqlite);
}

【FMDB】
fmdb是一个开源的库（https://github.com/ccgus/fmdb），主要的操作就是针对sqlite进行封装并提供了很多针对线程、多个sqlite实例的管理等相关操作。避免了sqlite操作过程中多行的各种bind，getcolumn等操作。
要使用fmdb，将获取到的包中src下的文件（除了fmdb.m）拖到自己工程中(最好用一个group管理起来)，然后添加libsqlite3.0.dylib即可。
照例我们先来看下fmdb的基础用法:

复制代码

NSString* strSQLiteFilePath = [[NSHomeDirectory() stringByAppendingPathComponent:@"Documents"] stringByAppendingPathComponent:@"fmdb.sqlite"];
BOOL bIsDir = FALSE;
if ([[NSFileManager defaultManager] fileExistsAtPath:strSQLiteFilePath isDirectory:&bIsDir]) {
[[NSFileManager defaultManager] removeItemAtPath:strSQLiteFilePath error:nil];
}
FMDatabase* db = [FMDatabase databaseWithPath:strSQLiteFilePath];
if (![db open]) {
NSLog(@"db Open Error...");
}
NSString* strCreateTable = @"CREATE TABLE TESTCOREDATA(intType INTEGER, floatType FLOAT, doubleType DOUBLE, stringType VARCHAR(256))";
[db executeUpdate:strCreateTable];
NSLog(@"begin ");
[db beginTransaction];
NSArray* arrayTest = [self arrayWithData:100000];
for (NSValue* value in arrayTest)
{
Data* data = [value pointerValue];
NSString* strSQLInsert = [NSString stringWithFormat:@"INSERT INTO TESTCOREDATA(intType, floatType, doubleType, stringType) values(%d, %f, %lf, '%s')", data->intType, data->floatType, data->doubleType, data->testString];
[db executeUpdate:strSQLInsert];
free(data);
}
[db commit];
NSLog(@"end...");
[db close];
db = nil;

fmdb使用比直接调用sqlite要省略很多代码和相关参数（估计让很多人很头疼），整个使用过程感觉就是四个字：酣畅淋漓。只将必要的一些关键操作需要给出参数。符合大部分对性能要求不高的场合，非常方便。fmdb针对读取操作也一样方便，这里就不多讲。接下来我们看看fmdb中其他几个文件的用途，有几个比较有趣的东西可以细说。
在我们拿到的src中，还有部分文件我们在基本的使用场景中很少用到的：

FMDatabaseAdditions.*文件，我们可以打开h文件看下：

复制代码

/** Return `int` value for query
@param query The SQL query to be performed.
@param ... A list of parameters that will be bound to the `?` placeholders in the SQL query.
@return `int` value.
*/
- (int)intForQuery:(NSString*)query, ...;
/** Return `long` value for query
@param query The SQL query to be performed.
@param ... A list of parameters that will be bound to the `?` placeholders in the SQL query.
@return `long` value.
*/
- (long)longForQuery:(NSString*)query, ...;

很直观是不是，就是针对某些你确定只有一个返回值的select语句，就不需要再通过返回FMResultSet并遍历set获取了。提供简单、直观易懂的操作。

FMDatabaseQueue.*提供多线程下针对db操作的一个队列。使用FMDatabaseQueue，我们在任何线程中，都可以操作：

复制代码

[queue inDatabase:^(FMDatabase *db) {
// 操作db
}];
而由queue自己去保证执行的先后顺序和唯一性，避免同时操作时产生冲突等。
FMDatabasePool*则提供了一个db池，每一个db实力都会放在FMDatabasePool的池中，使用完成后归还db即可，sqlite相关的生命周期都由db池进行管理。避免经常性的open和close操作。
具体的相关细节可以参考fmdb的源码。
【sqlitepersistentobject】
sqlitepersistentobject库是基于ORM模型编写，将没一条数据都封装成对应的一个对象，而且完全屏蔽相关表名、文件名等信息，采用sqlitepersistentobject时，将所有的信息都屏蔽在实现细节后面。操作的时候只要操作每一个对象即可。
sqlitepersistentobject相关下载路径：https://code.google.com/p/sqlitepersistentobjects/
同样，要使用sqlitepersistentobject，首先将库下载下来后，将src中相关文件拉入到自己的工程。并添加libsqlite3.0.dylib。因为sqlitepersistentobject底层也是用的sqlite进行的操作。
先来看下基础的数据插入部分：
[code]#import <Foundation/Foundation.h>
#import "SQLitePersistentObject.h"
@interface ZJSqlitePersistentobjectsPerson : SQLitePersistentObject
{
int intType;
float floatType;
double doubleType;
NSString* stringType;
}
@property(assign, nonatomic) int intType;
@property(assign, nonatomic) float floatType;
@property(assign, nonatomic) double doubleType;
@property(copy, nonatomic) NSString* stringType;
@end

首先我们有一个数据类，继承自SQLitePersistentObject，每一个ZJSqlitePersistentobjectPerson对象都对应数据库中的一条记录。
接下来，我们添加一批ZJSqlitePersistentobjectsPerson数据：

复制代码

NSArray* arrayTest = [self arrayWithData:1000];
NSLog(@"begin...");
for (NSValue* value in arrayTest)
{
Data* data = [value pointerValue];
ZJSqlitePersistentobjectsPerson* person = [[ZJSqlitePersistentobjectsPerson alloc] init];
person.intType = data->intType;
person.floatType = data->floatType;
person.doubleType = data->doubleType;
person.stringType = [NSString stringWithUTF8String:data->testString];
[person save];
[person release];
free(data);
}
// [ZJSqlitePersistentobjectsPerson clearCache];
[ZJSqlitePersistentobjectsPerson clearCache];
NSLog(@"end...");

可以从插入过程中看到，整个操作过程中完全屏蔽了相关sql语句、表结构等细节。非常方便简单，不过sqlitepesistentobject只支持基础数据类型和实现了NSCoding等相关类，由此，对于相关集合类型（NSArray，NSSet，NSDictionary）等是不支持的。关于sqlitepersistentobject的其他细节，可以参考sqlitepersistentobject源码。

【总结】

综合比较coredata、sqlite、fmdb和sqlitepersistentobject等四种数据永久化方式，个人认为：
1、如果只是基础数据类型并且对sql不熟悉，用sqlitepersistenttobject是最理想的，我们需要的是数据，sqlitepersistentobject需要你面对的也是一条一条的数据。
2、如果需要操作一般的比较复杂的数据库以及类型，个人推荐用fmdb，非常方便和便于操作，而且sqlite本身还支持对数据加密的借口。
3、如果需要很好的性能，可以使用sqlite并自己封装相关接口。
4、如果需要基本的数据模型，并且对xcode可视化情有独钟的话，可以使用coredata->data model等。

由于对四种数据存储类型只是浅尝辄止，其中不免疏漏的地方。

posted @ 2015-01-22 21:11 mengxiangtong22 阅读(334) 评论(0) 编辑收藏举报

刷新页面返回顶部

一天一个知识点

主攻前端。。。

数据持久化技术比较

【数据存储】coredata、sqlite、fmdb和sqlitepersistentobject

公告

一天一个知识点

主攻前端。。。

数据持久化 技术比较

【数据存储】coredata、sqlite、fmdb和sqlitepersistentobject

公告

数据持久化技术比较