MyBatis读取大量数据(流式读取)
## 一、背景
导出大量数据时,虚拟机频繁GC,内存耗尽,CPU爆满,可采用Mybatis数据流式读取进行优化。
## 二、JDBC三种读取方式:
1. 一次全部(默认):一次获取全部。
2. 流式:多次获取,一次一行。
3. 游标:多次获取,一次多行。
mybatis默认采取第一种。
## 三、实现
### 1. Business层
```java
//最终查询的List结果
List<FinancePackageFutureResponseVO> financePackageFutureList = new ArrayList<>();
financeOrderDao.seachDataList(financeOrderPackageRequestVO, new ResultHandler<FinancePackageFutureResponseVO>() {
@Override
public void handleResult(ResultContext<? extends FinancePackageFutureResponseVO> resultContext) {
/**回调处理逻辑 */
financePackageFutureList.add(resultContext.getResultObject());
}
});
```
### 2. Dao层
```java
/**
* 流式读取数据
* @param financeOrderPackageRequestVO 查询对象
* @param handler 回调处理
*/
void
seachDataList(FinanceOrderPackageRequestVO
financeOrderPackageRequestVO,
ResultHandler<FinancePackageFutureResponseVO> handler);
```
### 3. Mapper层
```java
<!--
resultSetType:结果集的游标只能向下滚动
fetchSize:窗口值
-->
<select id="seachDataList" resultMap="SeachDataResultMap" resultSetType="FORWARD_ONLY" fetchSize="1000">
select i.created_date as createdDate, i.orde_order_inside_no as ordeOrderInsideNo from fina_finance_order_item_expense e
</select>
```
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】博客园社区专享云产品让利特惠,阿里云新客6.5折上折
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 一个奇形怪状的面试题:Bean中的CHM要不要加volatile?
· [.NET]调用本地 Deepseek 模型
· 一个费力不讨好的项目,让我损失了近一半的绩效!
· .NET Core 托管堆内存泄露/CPU异常的常见思路
· PostgreSQL 和 SQL Server 在统计信息维护中的关键差异
· CSnakes vs Python.NET:高效嵌入与灵活互通的跨语言方案对比
· DeepSeek “源神”启动!「GitHub 热点速览」
· 我与微信审核的“相爱相杀”看个人小程序副业
· Plotly.NET 一个为 .NET 打造的强大开源交互式图表库
· 上周热点回顾(2.17-2.23)