Android上的SQLite与iOS上的性能差异

wqlqzqxt  于 2022-11-15  发布在  SQLite
关注(0)|答案(3)|浏览(190)

我试图在一个项目中对安卓和iOS的SQLite性能进行基准测试,与安卓相比,在iOS平台上的表现似乎真的很差。
我想要实现的是测量在SQLite DB中插入许多行(5000行)并在不同平台之间进行比较所需的时间。对于Android,我执行全部5000次插入的结果大约是500ms,但对于iOS,同样的操作需要20秒以上。这怎么可能呢?
这是我的iOS代码片段(插入部分),dataArray是一个包含5000个随机100个字符的NSStrings的数组:

int numEntries = 5000;
self.dataArray = [[NSMutableArray alloc] initWithCapacity:numEntries];//Array for random data to write to database

//generate random data (100 char strings)
for (int i=0; i<numEntries; i++) {
    [self.dataArray addObject:[self genRandStringLength:100]];
}

// Get the documents directory
NSArray *dirPaths = NSSearchPathForDirectoriesInDomains(NSDocumentDirectory, NSUserDomainMask, YES);

NSString *docsDir = [dirPaths objectAtIndex:0];

// Build the path to the database file
NSString *databasePath = [[NSString alloc] initWithString:[docsDir stringByAppendingPathComponent: @"benchmark.db"]];

NSString *resultHolder = @"";

//Try to open DB, if file not present, create it
if (sqlite3_open([databasePath UTF8String], &db) == SQLITE_OK){

    sql = @"CREATE TABLE IF NOT EXISTS BENCHMARK(ID INTEGER PRIMARY KEY AUTOINCREMENT, TESTCOLUMN TEXT)";

    //Create table
    if (sqlite3_exec(db, [sql UTF8String], NULL, NULL, NULL) == SQLITE_OK){
        NSLog(@"DB created");
    }else{
        NSLog(@"Failed to create DB");
    }

        //START: INSERT BENCHMARK
        NSDate *startTime = [[NSDate alloc] init];//Get timestamp for insert-timer

        //Insert values in DB, one by one
        for (int i = 0; i<numEntries; i++) {
            sql = [NSString stringWithFormat:@"INSERT INTO BENCHMARK (TESTCOLUMN) VALUES('%@')",[self.dataArray objectAtIndex:i]];
            if (sqlite3_exec(db, [sql UTF8String], NULL, NULL, NULL) == SQLITE_OK){
                //Insert successful
            }
        }

        //Append time consumption to display string
        resultHolder = [resultHolder stringByAppendingString:[NSString stringWithFormat:@"5000 insert ops took %f sec\n", [startTime timeIntervalSinceNow]]];

        //END: INSERT BENCHMARK

Android代码片段:

// SETUP
           long startTime, finishTime;

        // Get database object
            BenchmarkOpenHelper databaseHelper = new BenchmarkOpenHelper(getApplicationContext());
            SQLiteDatabase database = databaseHelper.getWritableDatabase();

            // Generate array containing random data
            int rows = 5000;
            String[] rowData = new String[rows];
            int dataLength = 100;

            for (int i=0; i<rows; i++) {
                rowData[i] = generateRandomString(dataLength);
            }

            // FIRST TEST: Insertion
            startTime = System.currentTimeMillis();

            for(int i=0; i<rows; i++) {
                database.rawQuery("INSERT INTO BENCHMARK (TESTCOLUMN) VALUES(?)", new String[] {rowData[i]});
            }

            finishTime = System.currentTimeMillis();
            result += "Insertion test took: " + String.valueOf(finishTime-startTime) + "ms \n";
            // END FIRST TEST
owfi6suc

owfi6suc1#

在iOS上,除了StilesCrisis讨论的BEGIN/COMMIT更改提供了最显著的性能差异外,如果您想进一步优化iOS性能,请考虑准备一次SQL,然后重复调用sqlite3_bind_textsqlite3_stepsqlite3_reset。在这种情况下,它似乎让它的速度大约快了一倍。
因此,下面是我用sqlite3_exec(每次使用stringWithFormat%@手动构建SQL)呈现您现有的iOS逻辑:

- (void)insertWithExec
{
    NSDate *startDate = [NSDate date];

    NSString *sql;

    if (sqlite3_exec(database, "BEGIN", NULL, NULL, NULL) != SQLITE_OK)
        NSLog(@"%s: begin failed: %s", __FUNCTION__, sqlite3_errmsg(database));

    for (NSString *value in dataArray)
    {
        sql = [NSString stringWithFormat:@"INSERT INTO BENCHMARK (TESTCOLUMN) VALUES('%@')", value];
        if (sqlite3_exec(database, [sql UTF8String], NULL, NULL, NULL) != SQLITE_OK)
            NSLog(@"%s: exec failed: %s", __FUNCTION__, sqlite3_errmsg(database));
    }

    if (sqlite3_exec(database, "COMMIT", NULL, NULL, NULL) != SQLITE_OK)
        NSLog(@"%s: commit failed: %s", __FUNCTION__, sqlite3_errmsg(database));

    NSTimeInterval elapsed = [[NSDate date] timeIntervalSinceDate:startDate];

    // log `elapsed` here
}

以下是代码的优化格式,其中我只准备了一次SQL,但随后使用sqlite3_bind_text将我们的数据绑定到您的Android代码使用的SQL中的同一个?占位符:

- (void)insertWithBind
{
    NSDate *startDate = [NSDate date];

    if (sqlite3_exec(database, "BEGIN", NULL, NULL, NULL) != SQLITE_OK)
        NSLog(@"%s: begin failed: %s", __FUNCTION__, sqlite3_errmsg(database));

    sqlite3_stmt *statement;

    NSString *sql = @"INSERT INTO BENCHMARK (TESTCOLUMN) VALUES(?)";

    if (sqlite3_prepare_v2(database, [sql UTF8String], -1, &statement, NULL) != SQLITE_OK)
        NSLog(@"%s: prepare failed: %s", __FUNCTION__, sqlite3_errmsg(database));

    for (NSString *value in dataArray)
    {
        if (sqlite3_bind_text(statement, 1, [value UTF8String], -1, NULL) != SQLITE_OK)
            NSLog(@"%s: bind failed: %s", __FUNCTION__, sqlite3_errmsg(database));

        if (sqlite3_step(statement) != SQLITE_DONE)
            NSLog(@"%s: step failed: %s", __FUNCTION__, sqlite3_errmsg(database));

        if (sqlite3_reset(statement) != SQLITE_OK)
            NSLog(@"%s: reset failed: %s", __FUNCTION__, sqlite3_errmsg(database));
    }

    sqlite3_finalize(statement);

    if (sqlite3_exec(database, "COMMIT", NULL, NULL, NULL) != SQLITE_OK)
        NSLog(@"%s: commit failed: %s", __FUNCTION__, sqlite3_errmsg(database));

    NSTimeInterval elapsed = [[NSDate date] timeIntervalSinceDate:startDate];

    // log `elapsed` here
}

在我的iPhone 5上,使用sqlite3_exec逻辑(我的insertWithExec方法)插入5000条记录需要280-290ms,使用sqlite3_bind_textsqlite3_stepsqlite3_reset(我的insertWithBind方法)插入相同的5000条记录需要110-127毫秒。我的数据无法与您的进行比较(不同的设备、插入不同的dataValues对象、在后台队列中完成等),但值得注意的是,准备一次SQL语句,然后仅重复绑定、步骤和重置调用,所用时间不到您的一半。
查看Android代码,我注意到您使用的是?占位符,所以我假设它也在幕后执行sqlite3_bind_text(尽管我不知道它是准备一次并每次绑定/单步/重置,还是每次都重新准备;可能是后者)。
另外,根据一般经验,您应该始终使用?占位符,就像您在Android中所做的那样,而不是使用stringWithFormat手动构建SQL,因为它使您不必手动转义数据中的撇号,保护您免受SQL注入攻击,等等。

pbpqsu0x

pbpqsu0x2#

您需要使用事务--从执行BEGIN开始,执行COMMIT结束。
这应该会大大提高INSERT的性能。
http://www.titaniumdevelopment.com.au/blog/2012/01/27/10x-faster-inserts-in-sqlite-using-begin-commit-in-appcelerator-titanium-mobile/
一旦完成,我预计5000个插入在两个平台上都会相当快。
下面是StackOverflow的另一个答案,它列出了大量可以提高SQLite性能的不同方面,包括使用绑定变量和启用各种牺牲健壮性以换取速度的Pragma模式:Improve INSERT-per-second performance of SQLite?

ar5n3qh5

ar5n3qh53#

还有一点是使用production版本而不是Debug作为基准。它包含了更多的优化

相关问题