批量插入5000条数据测试自己的数据库与第三方LitePal数据库所需时间

1. 概述


上节课我们已经手动的搭建了我们自己的数据库框架,有问题的可以先看下我的上篇文章,自己动手搭建数据库框架,而且运行之后没有问题,可以创建数据库成功,并且也可以循环插入多条数据,而我们上节课是以让其插入10数据为例演示的,那么接下来我们就一次性插入5000条数据来测试下二者所需要的时间,当然你也可以插入10000条数据也都是可以的。

2. 实现方式如下


2.1:接口 IDaoSupport如下:

/**
 * Email: 2185134304@qq.com
 * Created by JackChen 2018/4/6 19:41
 * Version 1.0
 * Params:
 * Description:  接口
*/

public interface IDaoSupport<T> {


    /**
     * 创建表
     */
    void init(SQLiteDatabase sqLiteDatabase , Class<T> clazz) ;
    /**
     * 插入数据
     */
    public long insert(T t) ;

    /**
     * 批量插入,用于检测性能
     */
    public void insert(List<T> datas) ;

    /**
     * 查询所有
     */
    public List<T> query() ;

    /**
     * 按照语句查询
     */
}

2.2:接口实现类 DaoSupport类如下:

/**
 * Email: 2185134304@qq.com
 * Created by JackChen 2018/4/6 19:42
 * Version 1.0
 * Params:
 * Description:  接口实现类
*/
public class DaoSupport<T> implements IDaoSupport<T> {

    private SQLiteDatabase mSqliteDatabase ;
    private Class<T> mClazz ;

    private static final Object[] mPutMethodArgs = new Object[2];

    private static final Map<String, Method> mPutMethods
            = new ArrayMap<>();


    public void init(SQLiteDatabase sqLiteDatabase , Class<T> clazz){
        this.mSqliteDatabase = sqLiteDatabase ;
        this.mClazz = clazz ;

        // 创建表  这个是完整的创建表语句
        /*"create table if not exists Person ("
                + "id integer primary key autoincrement, "
                + "name text, "
                + "age integer, "
                + "flag boolean)";*/


        // 下边是通过 StringBuffer去动态的拼接表语句,目的就是用append拼接出和上边一样一样的 结构

        StringBuffer sb = new StringBuffer() ;
        sb.append("create table if not exists ")    // 如果表不存在
                .append(DaoUtil.getTableName(mClazz)) // 通过 class创建 表名
                .append("(id integer primary key autoincrement, ") ;


        // 获取Person中所有属性,有多少就可以获取多少

        // name就代表 Person中所有的 值,比如是 name、age等等;
        // type就代表的是该值对应的所有类型,比如是String、int等等;

        Field[] fields = mClazz.getDeclaredFields() ;
        for (Field field : fields) {
            // 设置权限,private、public、protected都可以
            field.setAccessible(true);

            // 注意:这里是通过反射,取出 Person中的 name text,
            // 首先获取 name,然后再获取name对应的类型 text,这里String 就对应的是 text

            // 获取的name
            String name = field.getName() ;
            // 获取的name的类型type(其实就是text类型,在数据库中 text类型就对应的是String)
            String type = field.getType().getSimpleName();

            // type需要转换 :int -> integer String -> text
            sb.append(name).append(DaoUtil.getColumnType(type)).append(", ") ;
        }

        // 这里是把最后的 ", " 替换成 ")"
        sb.replace(sb.length() - 2 , sb.length()  ,")") ;
        Log.e("TAG" , "表语句 --> "+sb.toString()) ;

        // 执行创建表
        mSqliteDatabase.execSQL(sb.toString());

    }


    /**
     * 插入数据库,t 是任意对象
     */
    @Override
    public long insert(T obj) {
        /*ContentValues values = new ContentValues();
        values.put("name",person.getName());
        values.put("age",person.getAge());
        values.put("flag",person.getFlag());
        db.insert("Person",null,values);*/


        // 这里使用的其实还是原生的方式,只是把 obj转成ContentValues
        ContentValues values = contentValuesByObj(obj) ;

        return mSqliteDatabase.insert(DaoUtil.getTableName(mClazz) , null , values);
    }


    /**
     * 批量插入
     */
    @Override
    public void insert(List<T> datas) {
        // 批量插入采用事务优化
        mSqliteDatabase.beginTransaction();
        for (T data : datas) {
            // 调用单条数据插入
            long number = insert(data) ;
//            Log.e("TAG" , "number -> " + number) ;
        }
        mSqliteDatabase.setTransactionSuccessful();
        mSqliteDatabase.endTransaction();
    }

    @Override
    public List<T> query() {
        Cursor cursor = mSqliteDatabase.query(DaoUtil.getTableName(mClazz), null, null, null, null, null, null);
        return cursorToList(cursor) ;
    }


    /**
     * 查询所有数据
     */
    private List<T> cursorToList(Cursor cursor) {
        List<T> list = new ArrayList<>();
        if (cursor != null && cursor.moveToFirst()) {
            // 不断的从游标里面获取数据
            do {
                try {
                    // 通过反射new对象
                    T instance = mClazz.newInstance();
                    Field[] fields = mClazz.getDeclaredFields();


                    for (Field field : fields) {
                        // 遍历属性
                        field.setAccessible(true);
                        String name = field.getName();
                        // 获取角标  获取在第几列
                        int index = cursor.getColumnIndex(name);
                        if (index == -1) {
                            continue;
                        }

                        // 通过反射获取 游标的方法  field.getType() -> 获取的类型
                        Method cursorMethod = cursorMethod(field.getType());
                        if (cursorMethod != null) {
                            // 通过反射获取了 value
                            Object value = cursorMethod.invoke(cursor, index);
                            if (value == null) {
                                continue;
                            }

                            // 处理一些特殊的部分
                            if (field.getType() == boolean.class || field.getType() == Boolean.class) {
                                if ("0".equals(String.valueOf(value))) {
                                    value = false;
                                } else if ("1".equals(String.valueOf(value))) {
                                    value = true;
                                }
                            } else if (field.getType() == char.class || field.getType() == Character.class) {
                                value = ((String) value).charAt(0);
                            } else if (field.getType() == Date.class) {
                                long date = (Long) value;
                                if (date <= 0) {
                                    value = null;
                                } else {
                                    value = new Date(date);
                                }
                            }

                            // 通过反射注入
                            field.set(instance, value);
                        }
                    }
                    // 加入集合
                    list.add(instance);
                } catch (Exception e) {
                    e.printStackTrace();
                }
            } while (cursor.moveToNext());
        }
        cursor.close();
        return list;
    }

    // 获取游标的方法
    private Method cursorMethod(Class<?> type) throws Exception {
        String methodName = getColumnMethodName(type);
        // type String getString(index); int getInt; boolean getBoolean
        Method method = Cursor.class.getMethod(methodName, int.class);
        return method;
    }

    private String getColumnMethodName(Class<?> fieldType) {
        String typeName;
        if (fieldType.isPrimitive()) {
            typeName = DaoUtil.capitalize(fieldType.getName());
        } else {
            typeName = fieldType.getSimpleName();
        }
        String methodName = "get" + typeName;
        if ("getBoolean".equals(methodName)) {
            methodName = "getInt";
        } else if ("getChar".equals(methodName) || "getCharacter".equals(methodName)) {
            methodName = "getString";
        } else if ("getDate".equals(methodName)) {
            methodName = "getLong";
        } else if ("getInteger".equals(methodName)) {
            methodName = "getInt";
        }
        return methodName;
    }


    /**
     *  把 obj 转成 ContentValues 利用反射
     *  反射其实就是获取的是属性、方法等东西
     */
    public ContentValues contentValuesByObj(T obj) {
        ContentValues values = new ContentValues() ;

        // 封装values
        Field[] fields = mClazz.getDeclaredFields() ;
        for (Field field : fields) {
            try {
                field.setAccessible(true);
                // 这里的key 就指的是获取的是 Person中的  name、age等所有字段,通过for循环有多少拿多少
                String key = field.getName() ;
                // 获取value
                Object value = field.get(obj) ;

                mPutMethodArgs[0] = key ;
                mPutMethodArgs[1] = value ;


                String filedTypeName = field.getType().getName() ;
                Method putMethod = mPutMethods.get(filedTypeName) ;
                if (putMethod == null){
                    // 获取put()方法
                    putMethod = ContentValues.class.getMethod("put", String.class, value.getClass());
                    mPutMethods.put(filedTypeName , putMethod) ;
                }

                // 通过反射执行
                putMethod.invoke(values , mPutMethodArgs) ;

            } catch (Exception e) {
                e.printStackTrace();
            }finally {
                mPutMethodArgs[0] = null ;
                mPutMethodArgs[1] = null ;
            }

        }
        return values;
    }



    /**
     * 删除
     */
    public int delete(String whereClause, String[] whereArgs) {
        return mSqliteDatabase.delete(DaoUtil.getTableName(mClazz), whereClause, whereArgs);
    }

    /**
     * 更新  这些你需要对  最原始的写法比较明了 extends
     */
    public int update(T obj, String whereClause, String... whereArgs) {
        ContentValues values = contentValuesByObj(obj);
        return mSqliteDatabase.update(DaoUtil.getTableName(mClazz),
                values, whereClause, whereArgs);
    }

    // 查询
    // 修改
    // 删除
}

2.3:DaoSupportFactory工厂代码如下:

/**
 * Email: 2185134304@qq.com
 * Created by JackChen 2018/4/6 19:44
 * Version 1.0
 * Params:
 * Description:   这是一个工厂
*/

public class DaoSupportFactory {


    private SQLiteDatabase mSqliteDatabase ;

    private static volatile DaoSupportFactory mFactory ;

    /**
     * 持有外部数据库的引用
     */
    private DaoSupportFactory(){
        // 打开或者创建数据库,这个地方是把数据库放到内存卡中
        // 这里需要判断:1. 是否有内存卡 2. 6.0需要动态申请权限(可以直接在app刚运行就申请权限)
        File dbRoot = new File(Environment.getExternalStorageDirectory().getAbsolutePath()
                + File.separator + "nhdz"
                + File.separator + "database") ;

        // 如果目录不存在,就去创建目录
        if (!dbRoot.exists()){
            dbRoot.mkdirs() ;
        }

        File dbFile = new File(dbRoot  ,"nhdz.db") ;

        // 打开或者创建一个数据库
        mSqliteDatabase = SQLiteDatabase.openOrCreateDatabase(dbFile , null) ;
    }


    /**
     * 这里是双重校验,为了防止多个线程同时操作同一个资源
     */
    public static DaoSupportFactory getFactory(){
        if (mFactory == null){
            synchronized (DaoSupportFactory.class){
                if (mFactory == null){
                    mFactory = new DaoSupportFactory() ;
                }
            }

        }
        return mFactory ;
    }


    /**
     * 这里是使用 自己写的创建表的init()方法,如果以后使用第三方方便切换
     * @param clazz
     * @param <T>
     * @return
     */
    public <T> IDaoSupport<T> getDao(Class<T> clazz){
        IDaoSupport<T> daoSupport = new DaoSupport() ;
        daoSupport.init(mSqliteDatabase  ,clazz);
      return daoSupport ;
    }

}

2.4. 与第三方数据库 LitePal批量插入数据时间对比

/**
 * Email: 2185134304@qq.com
 * Created by JackChen 2018/4/6 18:16
 * Version 1.0
 * Params:
 * Description:
*/
public class SecondActivity extends BaseSkinActivity {
    @Override
    protected void initData() {

        /**
         * 思路就是:
         *     1>:程序一启动,就会调用工厂DaoSupportFactory,然后调用自己的构造方法,然后创建目录和 nhdz.db数据库 到内存卡中,然后创建 mSliteDataBase数据库;
         *     2>:然后调用 init()方法,该方法是在 DaoSupport中实现 init()方法
         *
         * 目的就是:
         *     1>:利用工厂 getFactory(),别人在调用的时候只需要传递 一个 需要存储的 对象就ok,达到最少知识原则的思想
         *     2>:别人需要添加、删除、修改、查询都非常方便
         *
         *
         */
        // Person是要 存储的数据
        IDaoSupport<Person> daoSupport = DaoSupportFactory.getFactory().getDao(Person.class) ;

        // 最少知识原则

        // 这里可以直接插入数据到数据库,就不用  Person person = new Person() ;
//        daoSupport.insert(new Person("novate" , 26)) ;
        /*List<Person> persons = new ArrayList<>() ;
        for (int i = 0; i < 5000; i++) {
            persons.add(new Person("Novate" , 26 + i)) ;
        }

        long startTime = System.currentTimeMillis() ;
        // 自己的批量插入
        daoSupport.insert(persons);
        // litepal的批量插入
//        DataSupport.saveAll(persons);
        long endTime = System.currentTimeMillis() ;

        // 这里批量插入1000条数据:目的是为了测试自己写的数据库框架所需要时间和第三方litepal数据库比较

        // 统一批量插入5000条:
        // 自己的:48426ms   优化后:2285ms  768ms
        // litepal:4831ms   优化后:1127ms 1120ms
        Log.e("TAG" , "时间差 --> " + (endTime - startTime)) ;*/


        List<Person> personSize = daoSupport.query();
        Log.e("TAG" , "personSize --> " + personSize.size()) ;    // personSize --> 37010

    }

    @Override
    protected void initView() {
        //初始化权限
        initPermission();
    }

    @Override
    protected void initTitle() {

    }


    /**
     * 初始化权限事件
     */
    private void initPermission() {
        //检查权限
        String[] permissions = CheckPermissionUtils.checkPermission(this);
        if (permissions.length == 0) {
            //权限都申请了
            //是否登录
        } else {
            //申请权限
            ActivityCompat.requestPermissions(this, permissions, 100);
        }
    }


    @Override
    protected void setContentView() {
        setContentView(R.layout.activity_second);
    }
}
经过多次测试,可以看出:

1>:我们自己的数据库批量插入5000条数据所需时间48426ms,采用事务优化后时间是:2285ms 768ms;
2>:litepal数据库时间分别是:4831ms 优化后:1127ms 1120ms;
可以看出我们自己写的数据库批量插入5000条数据相对来说所需时间比litepal稍微快一点,
3>:最下边打印一下:查询数据库中所有的数据,总共有37010条数据;

生成的数据库在我们手机的外部存储卡中,是nhdz/database/nhdz.db文件。

使用NavicatePreminm打开nhdz.db文件就ok。

具体代码已上传至github:
https://github.com/shuai999/EssayJoke_day_10.git

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,937评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,503评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,712评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,668评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,677评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,601评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,975评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,637评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,881评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,621评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,710评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,387评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,971评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,947评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,189评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,805评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,449评论 2 342

推荐阅读更多精彩内容