List(ArrayList)分段,处理数据
问题:如果处理数据量过大,一次性处理,时间过长
解决方案:那么可以将数据进行分段处理,然后每一段可以用一个线程来处理,这样就可以提高代码的运行效率
下面是对list分段的两种方法,附上代码
package com.study.array; import org.slf4j.Logger; import org.slf4j.LoggerFactory; import java.util.ArrayList; import java.util.List; /** * 给list分批次 * zhangpba 20190828 */ public class SplitList { private static Logger logger = LoggerFactory.getLogger(SplitList.class); public static void main(String[] args) { List<String> dataList = new ArrayList<String>(); for (int i = 0; i < 1288; i++) { dataList.add(i + ""); }
if (dataList.isEmpty()) { return; } sublistTwo(dataList); } /** * 第一种分段 * * @param dataList */ public static void sublistOne(List<String> dataList) { List<List<String>> list = new ArrayList<>(); // 分批处理 if (null != dataList & dataList.size() > 0) { int pointsDataLimit = 100;//限制条数 Integer size = dataList.size(); // 判断是否有必要分批:大于100条数据的进行分批 if (pointsDataLimit < size) { int part = size / pointsDataLimit; System.out.println("共有:" + size + "条数据!" + "分为:" + part + "批"); for (int i = 0; i < part; i++) { // 截取100条 List<String> listPage = dataList.subList(0, pointsDataLimit); list.add(listPage); System.out.println("截取的100条" + listPage); // clear 把前100条从集合中去除 dataList.subList(0, pointsDataLimit).clear(); } if (!dataList.isEmpty()) { System.out.println("最后剩下的数据:" + dataList); } } else { System.out.println(dataList); } } else { System.out.println("没有数据!!!"); } int size = list.size(); System.out.println("size=" + size); } /** * 第二种分段 * * @param dataList */ public static void sublistTwo(List<String> dataList) { int ftest = 100;//每次取的数据 int size = dataList.size(); int temp = size / ftest + 1; boolean special = size % ftest == 0; List<String> cutList = null; for (int i = 0; i < temp; i++) { if (i == temp - 1) { if (special) { break; } cutList = dataList.subList(ftest * i, size); } else { cutList = dataList.subList(ftest * i, ftest * (i + 1)); } System.out.println("第" + (i + 1) + "组:" + cutList.toString()); } } }
***努力的过程,会让你对未来有一万种以上的憧憬,一眼望穿的人生,会让你对生活失去激情,失去乐趣***
本文来自博客园,作者:zhangpba,转载请注明原文链接:https://www.cnblogs.com/zhangpb/p/13899920.html