List(ArrayList)分段,处理数据

问题:如果处理数据量过大,一次性处理,时间过长

解决方案:那么可以将数据进行分段处理,然后每一段可以用一个线程来处理,这样就可以提高代码的运行效率

下面是对list分段的两种方法,附上代码

复制代码
package com.study.array;

import org.slf4j.Logger;
import org.slf4j.LoggerFactory;

import java.util.ArrayList;
import java.util.List;

/**
 * 给list分批次
 * zhangpba 20190828
 */
public class SplitList {
    private static Logger logger = LoggerFactory.getLogger(SplitList.class);

    public static void main(String[] args) {
        List<String> dataList = new ArrayList<String>();
        for (int i = 0; i < 1288; i++) {
            dataList.add(i + "");
        }

     if (dataList.isEmpty()) { return; } sublistTwo(dataList); } /** * 第一种分段 * * @param dataList */ public static void sublistOne(List<String> dataList) { List<List<String>> list = new ArrayList<>(); // 分批处理 if (null != dataList & dataList.size() > 0) { int pointsDataLimit = 100;//限制条数 Integer size = dataList.size(); // 判断是否有必要分批:大于100条数据的进行分批 if (pointsDataLimit < size) { int part = size / pointsDataLimit; System.out.println("共有:" + size + "条数据!" + "分为:" + part + "批"); for (int i = 0; i < part; i++) { // 截取100条 List<String> listPage = dataList.subList(0, pointsDataLimit); list.add(listPage); System.out.println("截取的100条" + listPage); // clear 把前100条从集合中去除 dataList.subList(0, pointsDataLimit).clear(); } if (!dataList.isEmpty()) { System.out.println("最后剩下的数据:" + dataList); } } else { System.out.println(dataList); } } else { System.out.println("没有数据!!!"); } int size = list.size(); System.out.println("size=" + size); } /** * 第二种分段 * * @param dataList */ public static void sublistTwo(List<String> dataList) { int ftest = 100;//每次取的数据 int size = dataList.size(); int temp = size / ftest + 1; boolean special = size % ftest == 0; List<String> cutList = null; for (int i = 0; i < temp; i++) { if (i == temp - 1) { if (special) { break; } cutList = dataList.subList(ftest * i, size); } else { cutList = dataList.subList(ftest * i, ftest * (i + 1)); } System.out.println("第" + (i + 1) + "组:" + cutList.toString()); } } }
复制代码

 

***努力的过程,会让你对未来有一万种以上的憧憬,一眼望穿的人生,会让你对生活失去激情,失去乐趣***

posted @   zhangpba  阅读(2542)  评论(0编辑  收藏  举报
编辑推荐:
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
阅读排行:
· winform 绘制太阳,地球,月球 运作规律
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· AI 智能体引爆开源社区「GitHub 热点速览」
· Manus的开源复刻OpenManus初探
· 写一个简单的SQL生成工具
点击右上角即可分享
微信分享提示