首页 > 代码库 > JAVA大集合数据分批次进行切割处理

JAVA大集合数据分批次进行切割处理

今天遇到一个大集合里面的数据删除问题,

因为是一个大集合,如果同时传递到数据库,那么就会造成数据库压力

所以分批次的进行批量操作

其实 也可以采用多线程来处理或者多批次加多线程来处理都是可以的

下面的案例 主要讲述是大集合拆分成小集合的代码

避免下次用到忘记了!

  public static void main(String[] args) {

          List<String> list=new ArrayList<String>();

          for (int i = 0; i <=100000; i++) {

            list.add(""+i);

        }

          int size=list.size();

          int num = (size) % 30 == 0 ? (size / 30) : (size / 30 + 1);// 按每30条记录查询

          int start=0;

          int end  =0;

          List<String> a = new ArrayList<String>();

          //方法1

          for (int i = 1; i <= num; i++)

        {

                end=(i*30)> size ? size:(i*30);

                start=(i-1)*30;

                for(;start < end; start++){

                    a.add(list.get(start));

                }

                System.out.println("输出数据---"+a.toString());

                //此处可以进行处理数据  插入 修改删除 都可以进行操作 避免同时操作大集合数据

                a.clear();

        }

         //方法2

          end=0;

          start=0;

          for (int i = 1; i <= num; i++)

          {

              end=(i*30)> size ? size :(i*30);

              start=(i-1)*30;

              System.out.println(end+"--"+start);

              a=list.subList(start,end);

              System.out.println("输出数据-bbb--"+a.toString());

          }

  }