安卓上的SQLite查询非常缓慢

Question

我有一个相当大的数据库需要查询，以获取一些数据并在Android上的ListView中呈现。数据库大小约为5MB，存储在SD卡上。它有2个表中的60k条记录。问题在于查询该数据库以获取某个特定列的所有记录需要非常长的时间 - 在模拟器和我的手机上都需要几分钟的时间。我已经尝试了所有方法 - 将这些数据存储在平面文件、XML中 - sqlite是我的最后希望。这是我用于打开数据库并查询它的类:

    public class DataHelper {

    private static final int DATABASE_VERSION = 1;
    private static final String TABLE_NAME = "TableName";
    private Context context;
    private SQLiteDatabase db;
    private SQLiteStatement insertStmt;

    public DataHelper(Context context) {
        this.context = context;
        OpenHelper openHelper = new OpenHelper(this.context);
        // this.db = openHelper.getReadableDatabase();

        this.db = SQLiteDatabase.openDatabase(
                Environment.getExternalStorageDirectory()
                        + "/myDB.db", null,
                SQLiteDatabase.NO_LOCALIZED_COLLATORS);
        // this.insertStmt = this.db.compileStatement(INSERT);
    }

    public void deleteAll() {
        this.db.delete(TABLE_NAME, null, null);
    }

    public List<String> selectBrands() {
        List<String> list = new ArrayList<String>();
        Cursor cursor = this.db.query(TABLE_NAME, new String[] { "ColumnName" },
                null, null, null, null, null); 
 }
        if (cursor.moveToFirst()) {
            do {
                if (!(list.contains(cursor.getString(0)))) {
                    list.add(cursor.getString(0));

                }

            } while (cursor.moveToNext());
        }
        if (cursor != null && !cursor.isClosed()) {
            cursor.close();
        }
        return list;
    }

    private static class OpenHelper extends SQLiteOpenHelper {
        OpenHelper(Context context) {
            super(context, null, null, DATABASE_VERSION);

        }

        @Override
        public void onCreate(SQLiteDatabase db) {

        }

        @Override
        public void onUpgrade(SQLiteDatabase db, int oldVersion, int newVersion) {

            onCreate(db);
        }
    }

并且在ListView部分进行操作：

@Override
public void onCreate(Bundle savedInstanceState) {
    super.onCreate(savedInstanceState);
    setContentView(R.layout.main);
    try {
        ctxContext = this.getApplicationContext();

        lView = (ListView) findViewById(R.id.ListView01);

        lView.setTextFilterEnabled(true);

        ParseSQLITETask task = new ParseSQLITETask();
        task.execute(null);

    } catch (Exception e) {
        LogErr(e.getMessage());
    }

}

private class ParseSQLITETask extends AsyncTask<Void, Void, Void> {
    @Override
    protected Void doInBackground(Void... urls) {
        try {

            DataHelper dHelper = new DataHelper(getApplicationContext());
            list = (ArrayList<String>) dHelper.selectBrands();

        } catch (Exception e) {
            LogErr(e.getMessage());

        }
        return null;

    }

    @Override
    protected void onProgressUpdate(Void... progress) {

    }

    @Override
    protected void onPostExecute(Void result) {
        try {

            lView.setAdapter(new ArrayAdapter<String>(ctxContext,
                    R.layout.list_item, list));
        } catch (Exception e) {
            LogErr(e.getMessage());

        }
    }

}

- milous

Answer 1

您正在检索整个记录集并将其转换为 ArrayList。不要这样做。返回一个 Cursor 并使用适当的适配器（例如 SimpleCursorAdapter）。

编辑：您还可以考虑在该列上创建索引，因为它可能会加快检索时间。

- Femi

---

一个索引将加速查询，特别是在使用WHERE子句过滤该列时，否则它不会起到太大作用。把所有东西都放进ArrayList中肯定会很慢。 - satur9nine

非常感谢@Femi提供的这个想法。 - Jimmy Ilenloa

Answer 2

没有测试的话，我预计你的list.contains会占用很多时间。你应该能够使用SELECT DISTINCT在数据库库中删除重复项。

编辑：Femi正确指出，您可能根本不需要所有记录的List。光标和/或适配器可能足够。还要考虑是否可以以任何方式缩小结果（例如WHERE子句）。

- Matthew Flaschen

Answer 3

这是我最终使用的代码，以防有人遇到类似的问题：

public class DataHelper {

    private static final int DATABASE_VERSION = 1;
    private static final String TABLE_NAME = "TableName";
    private Context context;
    private SQLiteDatabase db;

    public static final String ColName = "ColumnName";
    public static final String KEY_ID = "_id";

    public DataHelper(Context context) {
        this.context = context;
        OpenHelper openHelper = new OpenHelper(this.context);

        this.db = SQLiteDatabase.openDatabase(
                Environment.getExternalStorageDirectory()
                        + "/myDB.db", null,
                SQLiteDatabase.NO_LOCALIZED_COLLATORS);

    }

    public void deleteAll() {
        this.db.delete(TABLE_NAME, null, null);
    }

    public Cursor selectBrandsCursor() {

        String[] columns = new String[] { ColName, KEY_ID };
        Cursor cursor = this.db.rawQuery("SELECT " + ColName + ", " + KEY_ID
                + " FROM " + TABLE_NAME + " GROUP BY " + ColName + ";", null);

        return cursor;
    }

    private static class OpenHelper extends SQLiteOpenHelper {
        OpenHelper(Context context) {
            super(context, null, null, DATABASE_VERSION);

        }

        @Override
        public void onCreate(SQLiteDatabase db) {

        }

        @Override
        public void onUpgrade(SQLiteDatabase db, int oldVersion, int newVersion) {

            onCreate(db);
        }
    }
}

非常好用，速度快了很多，没有重复，感谢Matthew和Femi的建议。

- milous

Answer 4

这与主题无直接关系，但是我刚刚发现了为什么数据库查询非常慢。

在应用程序冷启动时，20,000个数据库条目在100毫秒内被加载。如果在运行的应用程序中重复相同的查询，它需要9000毫秒（9秒）。

原因是新的Android Studio数据库检查器大大降低了查询速度。

- almisoft