List(ArrayList)分段,处理数据

问题:如果处理数据量过大,一次性处理,时间过长

解决方案:那么可以将数据进行分段处理,然后每一段可以用一个线程来处理,这样就可以提高代码的运行效率

下面是对list分段的两种方法,附上代码

package com.study.array;

import org.slf4j.Logger;
import org.slf4j.LoggerFactory;

import java.util.ArrayList;
import java.util.List;

/**
 * 给list分批次
 * zhangpba 20190828
 */
public class SplitList {
    private static Logger logger = LoggerFactory.getLogger(SplitList.class);

    public static void main(String[] args) {
        List<String> dataList = new ArrayList<String>();
        for (int i = 0; i < 1288; i++) {
            dataList.add(i + "");
        }

     if (dataList.isEmpty()) { return; } sublistTwo(dataList); } /** * 第一种分段 * * @param dataList */ public static void sublistOne(List<String> dataList) { List<List<String>> list = new ArrayList<>(); // 分批处理 if (null != dataList & dataList.size() > 0) { int pointsDataLimit = 100;//限制条数 Integer size = dataList.size(); // 判断是否有必要分批:大于100条数据的进行分批 if (pointsDataLimit < size) { int part = size / pointsDataLimit; System.out.println("共有:" + size + "条数据!" + "分为:" + part + "批"); for (int i = 0; i < part; i++) { // 截取100条 List<String> listPage = dataList.subList(0, pointsDataLimit); list.add(listPage); System.out.println("截取的100条" + listPage); // clear 把前100条从集合中去除 dataList.subList(0, pointsDataLimit).clear(); } if (!dataList.isEmpty()) { System.out.println("最后剩下的数据:" + dataList); } } else { System.out.println(dataList); } } else { System.out.println("没有数据!!!"); } int size = list.size(); System.out.println("size=" + size); } /** * 第二种分段 * * @param dataList */ public static void sublistTwo(List<String> dataList) { int ftest = 100;//每次取的数据 int size = dataList.size(); int temp = size / ftest + 1; boolean special = size % ftest == 0; List<String> cutList = null; for (int i = 0; i < temp; i++) { if (i == temp - 1) { if (special) { break; } cutList = dataList.subList(ftest * i, size); } else { cutList = dataList.subList(ftest * i, ftest * (i + 1)); } System.out.println("第" + (i + 1) + "组:" + cutList.toString()); } } }

 

***努力的过程,会让你对未来有一万种以上的憧憬,一眼望穿的人生,会让你对生活失去激情,失去乐趣***

posted @ 2020-10-29 23:38  zhangpba  阅读(2519)  评论(0编辑  收藏  举报