List(ArrayList)分段,处理数据
问题:如果处理数据量过大,一次性处理,时间过长
解决方案:那么可以将数据进行分段处理,然后每一段可以用一个线程来处理,这样就可以提高代码的运行效率
下面是对list分段的两种方法,附上代码
package com.study.array; import org.slf4j.Logger; import org.slf4j.LoggerFactory; import java.util.ArrayList; import java.util.List; /** * 给list分批次 * zhangpba 20190828 */ public class SplitList { private static Logger logger = LoggerFactory.getLogger(SplitList.class); public static void main(String[] args) { List<String> dataList = new ArrayList<String>(); for (int i = 0; i < 1288; i++) { dataList.add(i + ""); }
if (dataList.isEmpty()) { return; } sublistTwo(dataList); } /** * 第一种分段 * * @param dataList */ public static void sublistOne(List<String> dataList) { List<List<String>> list = new ArrayList<>(); // 分批处理 if (null != dataList & dataList.size() > 0) { int pointsDataLimit = 100;//限制条数 Integer size = dataList.size(); // 判断是否有必要分批:大于100条数据的进行分批 if (pointsDataLimit < size) { int part = size / pointsDataLimit; System.out.println("共有:" + size + "条数据!" + "分为:" + part + "批"); for (int i = 0; i < part; i++) { // 截取100条 List<String> listPage = dataList.subList(0, pointsDataLimit); list.add(listPage); System.out.println("截取的100条" + listPage); // clear 把前100条从集合中去除 dataList.subList(0, pointsDataLimit).clear(); } if (!dataList.isEmpty()) { System.out.println("最后剩下的数据:" + dataList); } } else { System.out.println(dataList); } } else { System.out.println("没有数据!!!"); } int size = list.size(); System.out.println("size=" + size); } /** * 第二种分段 * * @param dataList */ public static void sublistTwo(List<String> dataList) { int ftest = 100;//每次取的数据 int size = dataList.size(); int temp = size / ftest + 1; boolean special = size % ftest == 0; List<String> cutList = null; for (int i = 0; i < temp; i++) { if (i == temp - 1) { if (special) { break; } cutList = dataList.subList(ftest * i, size); } else { cutList = dataList.subList(ftest * i, ftest * (i + 1)); } System.out.println("第" + (i + 1) + "组:" + cutList.toString()); } } }
***努力的过程,会让你对未来有一万种以上的憧憬,一眼望穿的人生,会让你对生活失去激情,失去乐趣***
本文来自博客园,作者:zhangpba,转载请注明原文链接:https://www.cnblogs.com/zhangpb/p/13899920.html
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· winform 绘制太阳,地球,月球 运作规律
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· AI 智能体引爆开源社区「GitHub 热点速览」
· Manus的开源复刻OpenManus初探
· 写一个简单的SQL生成工具