发表于： 2020-06-09 10:58:33

4 1427

今日作为：

1.根据师兄的建议我先用SQL语句+for循环一条一条的插入100W条数据

然后再用Mybatis的批量添加做对比区别很明显

时间：单次插入100W数据用了快3个小时才46W数据左右，很慢 ×

批量插入只用了6分钟左右 √

内存：单次插入的内存占用大概就700MB左右而已 √

批量插入的内存占用在生成内含100W条数据的时候占用大概7G ×

CPU：单次插入的处理器占用大概13%左右 √

批量插入的处理器占用25%左右，在生成100W条数据时最高，批量插入时降低了一些 ×

而且循环单条插入数据的磁盘占用贼高！

单条插入：

@Test
public void insertall() throws Exception {
    SqlSession sqlSession = MybatisUtil.getSeesion();
    Student student = new Student();

    student.setName("无敌");
    student.setSchool("矮子");
    student.setOnline_un("天上");
    student.setNumber(788);
    student.setCity("跑路");
    Integer rows = 0;
    for(int i = 0; i <= 1000000;i++) {
        rows = rows +sqlSession.insert("com.jnshu.dao.StudentMapper.insert", student);
        sqlSession.commit();
    }

    if (rows > 0) {
        System.out.println("添加数据" + rows + "条");
    } else {
        System.out.println("添加数据失败");
    }

    sqlSession.close();
}

看了一下2h50m左右才插入条数据。。。。。取消了效率好低啊

批量插入：

@Test
public void insertall_forEach() throws Exception{
    SqlSession sqlSession = MybatisUtil.getSeesion();
    List<Student> user = new ArrayList<Student>();
    Integer rows = 0;
    for(int i = 0 ; i <= 1000000 ; i++){
        Student student = new Student();
        student.setName("无敌");
        student.setSchool("矮子");
        student.setOnline_un("天上");
        student.setNumber(788);
        student.setCity("跑路");
        user.add(student);
    }

    rows = sqlSession.insert("com.jnshu.dao.StudentMapper.insertall",user);
    sqlSession.commit();
    sqlSession.close();
}