Cơ sở dữ liệu Android SQLite: chèn chậm

Tôi cần phân tích cú pháp một tệp XML khá lớn (dao động trong khoảng một trăm kilobyte đến vài trăm kilobyte) mà tôi đang sử dụng Xml#parse(String, ContentHandler). Tôi hiện đang thử nghiệm điều này với tệp 152KB.

Trong phân tích, tôi cũng chèn các dữ liệu trong một cơ sở dữ liệu SQLite sử dụng các cuộc gọi tương tự như sau: getWritableDatabase().insert(TABLE_NAME, "_id", values). Tất cả điều này cùng nhau mất khoảng 80 giây cho tệp thử nghiệm 152KB (đi kèm để chèn khoảng 200 hàng).

Khi tôi nhận xét ra tất cả các câu lệnh chèn (nhưng để lại trong mọi thứ khác, chẳng hạn như tạo, ContentValuesv.v.) cùng một tệp chỉ mất 23 giây.

Có bình thường khi hoạt động cơ sở dữ liệu có chi phí lớn như vậy không? Tôi có thể làm bất cứ điều gì về điều đó?

Bạn nên thực hiện chèn hàng loạt.

Mã giả:

db.beginTransaction();
for (entry : listOfEntries) {
    db.insert(entry);
}
db.setTransactionSuccessful();
db.endTransaction();

Điều đó đã làm tăng tốc độ chèn trong ứng dụng của tôi.

Cập nhật:
@Yuku đã cung cấp một bài đăng trên blog rất thú vị: Android sử dụng inserthelper để chèn nhanh hơn vào cơ sở dữ liệu sqlite

Vì InsertHelper được Yuku và Brett đề cập hiện không còn được dùng nữa (API cấp 17), có vẻ như giải pháp thay thế phù hợp được Google đề xuất là sử dụng SQLiteStatement .

Tôi đã sử dụng phương pháp chèn cơ sở dữ liệu như thế này:

database.insert(table, null, values);

Sau khi tôi cũng gặp phải một số vấn đề nghiêm trọng về hiệu suất, đoạn mã sau đã tăng tốc 500 lần chèn của tôi từ 14,5 giây xuống chỉ còn 270 ms , thật tuyệt vời!

Đây là cách tôi sử dụng SQLiteStatement:

private void insertTestData() {
    String sql = "insert into producttable (name, description, price, stock_available) values (?, ?, ?, ?);";

    dbHandler.getWritableDatabase();
    database.beginTransaction();
    SQLiteStatement stmt = database.compileStatement(sql);

    for (int i = 0; i < NUMBER_OF_ROWS; i++) {
        //generate some values

        stmt.bindString(1, randomName);
        stmt.bindString(2, randomDescription);
        stmt.bindDouble(3, randomPrice);
        stmt.bindLong(4, randomNumber);

        long entryID = stmt.executeInsert();
        stmt.clearBindings();
    }

    database.setTransactionSuccessful();
    database.endTransaction();

    dbHandler.close();
}

Biên dịch câu lệnh chèn sql giúp đẩy nhanh tiến độ. Nó cũng có thể đòi hỏi nhiều nỗ lực hơn để củng cố mọi thứ và ngăn ngừa khả năng bị tiêm vì bây giờ tất cả đều nằm trên vai bạn.

Một cách tiếp cận khác cũng có thể tăng tốc mọi thứ là lớp android.database.DatabaseUtils.InsertHelper được tài liệu hóa dưới dạng tài liệu. Sự hiểu biết của tôi là nó thực sự bao bọc các câu lệnh chèn đã biên dịch. Đi từ chèn giao dịch không được biên dịch sang chèn được giao dịch đã biên dịch có tốc độ tăng khoảng 3 lần (2ms mỗi lần chèn đến .6ms mỗi lần chèn) cho các chèn SQLite lớn (200K +) nhưng đơn giản của tôi.

Mã mẫu:

SQLiteDatabse db = getWriteableDatabase();

//use the db you would normally use for db.insert, and the "table_name"
//is the same one you would use in db.insert()
InsertHelper iHelp = new InsertHelper(db, "table_name");

//Get the indices you need to bind data to
//Similar to Cursor.getColumnIndex("col_name");                 
int first_index = iHelp.getColumnIndex("first");
int last_index = iHelp.getColumnIndex("last");

try
{
   db.beginTransaction();
   for(int i=0 ; i<num_things ; ++i)
   {
       //need to tell the helper you are inserting (rather than replacing)
       iHelp.prepareForInsert();

       //do the equivalent of ContentValues.put("field","value") here
       iHelp.bind(first_index, thing_1);
       iHelp.bind(last_index, thing_2);

       //the db.insert() equilvalent
       iHelp.execute();
   }
   db.setTransactionSuccessful();
}
finally
{
    db.endTransaction();
}
db.close();

Nếu bảng có một chỉ mục trên đó, hãy cân nhắc bỏ nó trước khi chèn các bản ghi và sau đó thêm lại nó sau khi bạn đã cam kết các bản ghi của mình.

Nếu sử dụng ContentProvider:

@Override
public int bulkInsert(Uri uri, ContentValues[] bulkinsertvalues) {

    int QueryType = sUriMatcher.match(uri);
    int returnValue=0;
    SQLiteDatabase db = mOpenHelper.getWritableDatabase();

     switch (QueryType) {

         case SOME_URI_IM_LOOKING_FOR: //replace this with your real URI

            db.beginTransaction();

            for (int i = 0; i < bulkinsertvalues.length; i++) {
                //get an individual result from the array of ContentValues
                ContentValues values = bulkinsertvalues[i];
                //insert this record into the local SQLite database using a private function you create, "insertIndividualRecord" (replace with a better function name)
                insertIndividualRecord(uri, values);    
            }

            db.setTransactionSuccessful();
            db.endTransaction();                 

            break;  

         default:
             throw new IllegalArgumentException("Unknown URI " + uri);

     }    

    return returnValue;

}

Sau đó, chức năng riêng tư để thực hiện chèn (vẫn bên trong trình cung cấp nội dung của bạn):

       private Uri insertIndividualRecord(Uri uri, ContentValues values){

            //see content provider documentation if this is confusing
            if (sUriMatcher.match(uri) != THE_CONSTANT_IM_LOOKING_FOR) {
                throw new IllegalArgumentException("Unknown URI " + uri);
            }

            //example validation if you have a field called "name" in your database
            if (values.containsKey(YOUR_CONSTANT_FOR_NAME) == false) {
                values.put(YOUR_CONSTANT_FOR_NAME, "");
            }

            //******add all your other validations

            //**********

           //time to insert records into your local SQLite database
           SQLiteDatabase db = mOpenHelper.getWritableDatabase();
           long rowId = db.insert(YOUR_TABLE_NAME, null, values);           

           if (rowId > 0) {
               Uri myUri = ContentUris.withAppendedId(MY_INSERT_URI, rowId);
               getContext().getContentResolver().notifyChange(myUri, null);

               return myUri;
           }


           throw new SQLException("Failed to insert row into " + uri);


    }