Hibernate的批量处理
Hibernate完全以面向对象的方式操作数据库,当程序员以面向对象的方式操作持久化对象时,将自动转换为对数据的操作。例如我们Session的delete()方法,来删除持久化对象,Hibernate将负责删除对应的数据记录;当我们执行持久化对象的setter方法时,Hibernate将自动转换为底层的update语句,修改数据库的对应记录。
问题是:如果我们需要同时更新100000条记录,是不是要逐一加载100000条记录,然后依次调用setter方法——这样不仅繁琐,数据访问的性能也十分糟糕。为了面对这种批量处理的场景,Hibernate提供了批量处理的解决方案。下面分别从批量插入,批量更新和批量删除三个方面介绍如何面对这种批量处理的情形。
批量插入:
1 Session session = HibernateSessionFactory.getSession(); 2 Transaction tx = session.beiginTransaction(); 3 //循环100000次插入100000 4 for(int i=0; i<100000; i++){ 5 User u = new User(); 6 session.save(u); 7 } 8 tx.commit(); 9 session.close();
但随着这个程序的运行,总会在某个时候运行失败,并且抛出OutOfMemoryException(内存溢出异常)。这是因为Hibernate的Session持有一个必选的一级缓存,所有的User实例都将在Session级别的缓存区进行缓存的缘故。
为了解决这个问题,有个非常简单的思路:定时将Session缓存的数据刷入数据库,而不是一直在Session级别缓存。可以考虑设计一个累加器,每保存一个User实例,累加器增加1.根据累加器的值决定是否需要将Session缓存的数据刷入数据库。
下面是增加100000个User实例的代码:
1 //打开Session 2 Session session = HibernateSessionFactory.getSession(); 3 //开始事务 4 Transaction tx = session.beginTransaction(); 5 //循环100000次,插入100000条记录 6 for(int i = 0; i < 100000; i++){ 7 User u = new User(); 8 u.setName("XXX"); 9 .... 10 //在session级别缓存Usr实例 11 session.save(u); 12 //每当累加器是20的倍数时,将Session中数据刷入数据库 13 if(i % 20 == 0){ 14 session.fluah(); 15 session.clear(); 16 } 17 } 18 //提交事务 19 tx.commit(); 20 //关闭事务 21 session.close();
上面的代码中 i % 20 == 0时,手动将Session处缓存的数据写入数据库,并且清空Session缓存里的数据。除了要对Session级别缓存进行处理外,换应该通过如下配置来关闭SessionFactory的二级缓存。
1 hibernate.cache.use_second_level_cache false
除了手动清空Session级别的缓存外,最好关闭SessionFactory级别的二级缓存。否则,即使手动flush Session级别的缓存,但因为在SessionFactory还有二级缓存,也可能引发异常。
批量更新
上面的方法同样适用于批量更新数据,如果需要换回多行数据,应该使用scroll()方法,从未可以充分利用服务器游标带来的性能优势。下面是进行批量更新的代码片段。
1 // 打开Session 2 Session session = HibernateSessionFactory.getSession(); 3 // 开始事务 4 Transaction tx = session.beginTransaction(); 5 // 查询User表中的所有记录 6 ScrollableResults users = session.createQuery("from User") 7 .setCacheMode(CacheMode.IGNORE).scroll(ScrollMode.FORWARD_ONLY); 8 int count = 0; 9 //遍历User表中所有的记录 10 while(users.next()){ 11 User = (User)users.get(0); 12 u.setName("新用户名"+count); 13 //当count为20的倍数时 14 //将更新的结果从Session中flush到数据库 15 if(++count % 20 == 0){ 16 session.flush(); 17 session.clear(); 18 } 19 } 20 tx.commit(); 21 session.close();
通过这种方式,虽然可以执行批量更新,但效果非常不好。执行效率不高,需要先执行数据查询,然后在执行数据更新,而且这种更新将是逐行更新,即没更新一行记录,都需要执行一条update语句,性能也非常低下。
为了避免这种情况,Hibernate提供了一种类似于DML语句的批量更新,批量删除的HQL语法。
DML 风格的批量更新/删除
Hibernate提供的HQL也支持批量的UPDATE和DELETE语法
批量 UPDATE 和 DELETE语句的语法格式如下:
1 UPDATE | DELETE FROM? <ClassName> [WHERE WHERE_CONDITIONS]
关于上面的语法格式有如下4点值得注意:
》在FROM字句中,FROM关键字是可选的,即完全可以不写FROM关键字。
》在FROM字句中只能有一个类名,该类名不能有别名。
》不能在批量HQL语句中使用连接,显示或者隐式都不可以。但可以在WHERE字句中使用子查询。
》整个WHERE字句是可选的。WHERE字句的语法和HQL语句中WHERE字句的语法完全相同。
假设对于上面需要批量更改User类实例的name属性,可以采用如下代码片段完成。
1 // 打开Session 2 Session session = HibernateSessionFactory.getSession(); 3 // 开始事务 4 Transaction tx = session.beginTransaction(); 5 //定义批量更新的HQL语句 6 String hqlUpdate = "update User set name = :newName"; 7 //执行更新 8 int rows = session.createQuery(hqlUpdate).setString("newName", "新名字").executeUpdate(); 9 tx.commit(); 10 session.close();
从上面的代码中可以看出,这种语法非常类似于PreparedStatement中的executeUpdate()语法,实际上,HQL的这种批量更新就是直接借鉴了SQL语法的UPDATE语句。
使用这种批量更新语法时,通常只需要执行一次SQL的UPDATE语句,就可以完成所有满足条件记录的更新。但有可能需要执行多条UPDATE语句,这是因为有继承映射等特殊情况,例如有一个Person实例,他有Customer子类实例。当批量更新Person实例时,也需要更新Customer实例。如果采用 joined-subclass或union-subclass映射策略时,Person和Customer实例保存在不同的表中,因此可能需要多条UPDATE语句。
执行HQL DELETE ,同样适用Query.executeUpdate()方法,下面是一次删除上面全部记录的代码片段。
1 1 // 打开Session 2 2 Session session = HibernateSessionFactory.getSession(); 3 3 // 开始事务 4 4 Transaction tx = session.beginTransaction(); 5 5 //定义批量删除的HQL语句 6 6 String hqlDelete = "delete User"; 7 7 //执行删除 8 8 int rows = session.createQuery(hqlDelete).executeUpdate(); 9 9 tx.commit(); 10 10 session.close();
Query.executeUpdate()方法返回一个整数值,改值时受此操作影响的记录数量。我们知道 Hibernate的底层操作实际上都是由JDBC完成的,因此,如果有批量的UPDATE或DELETE操作将被转换成多条UPDATE或DELETE语句,该方法只能返回最后一条SQL语句影响的记录行数。
posted on 2013-09-09 21:10 Arts&Crafts 阅读(533) 评论(0) 编辑 收藏 举报