JDBC核心技术下篇
1 - 数据库事务介绍
2 事务处理(事务操作):保证所有事务都作为一个工作单元来执行,即使出现了故障,都不能改变这种执行方式。当在一个事务中执行多个操作时,要么所有的事务都被提交(commit),那么这些修改就永久地保存下来;要么数据库管理系统将放弃所作的所有修改,整个事务回滚(rollback)到最初状态。-- 事务处理原则
3 为确保数据库中数据的一致性
-
-
数据什么时候意味着提交?
-
当一个连接对象被创建时,默认情况下是自动提交事务:每次执行一个 SQL 语句时,如果执行成功,就会向数据库自动提交,而不能回滚。
-
关闭数据库连接,数据就会自动的提交。如果多个操作,每个操作使用的是自己单独的连接,则无法保证事务。即同一个事务的多个操作必须在同一个连接下。
-
-
JDBC程序中为了让多个 SQL 语句作为一个事务执行:
-
调用 Connection 对象的 setAutoCommit(false); 以取消自动提交事务
-
在所有的 SQL 语句都成功执行后,调用 commit(); 方法提交事务
-
在出现异常时,调用 rollback(); 方法回滚事务
-
[案例:用户AA向用户BB转账100]
package com.lzh.transaction; import com.lzh.util.JDBCUtils; import org.junit.Test; import java.sql.Connection; import java.sql.PreparedStatement; import java.sql.SQLException; /* 事务:一组逻辑操作单元,是数据从一种状态变换到另一种状态 > 一组逻辑操作单元:一个或多个DML操作 数据一旦提交,就不可回滚 那些操作会导致数据自动提交? > DDL一旦执行,都会自动提交 set autocommit = false 对DDL操作失效 > DML默认情况下,一旦执行,就会自动提交,但是我们通过 set autocommit = false 的方式取消DML操作的自动提交 > 默认在关闭连接时,会自动的提交数据 */ public class TransactionTest { @Test // 未考虑数据库事务的情况的转账操作 public void transferTest1(){ /* 针对user_table来说: AA用于给BB用户转账100 update user_table set balance = balance - 100 where user = 'AA'; update user_table set balance = balance + 100 where user = 'BB'; */ String sql1 = "update user_table set balance = balance - 100 where user = ?;"; update1_0(sql1,"AA"); // 模拟网络异常 System.out.println(10/0); String sql2 = "update user_table set balance = balance + 100 where user = ?;"; update1_0(sql2,"BB"); System.out.println("转账成功!"); } // 通用的[增删改]操作 --version 1.0(未考虑事务) public int update1_0(String sql,Object ...args) { // 注意:这里要求SQL中的占位符(?)个数要与参数一致 Connection connection = null; PreparedStatement preparedStatement = null; try { // 1. 获取数据库连接 connection = JDBCUtils.getConnection(); // 2. 预编译SQL语句,返回PreparedStatement的实例 preparedStatement = connection.prepareStatement(sql); // 3. 填充占位符 for (int i = 0; i < args.length; i++) { preparedStatement.setObject(i + 1, args[i]); } // 4. 执行 // 方式2 // preparedStatement.execute(); /* preparedStatement.execute() 方法: 如果执行的是查询操作,有返回结果,则此方法返回true 如果执行的增、删、改操作,没有返回结果,则此方法返回false */ // 方式1 return preparedStatement.executeUpdate(); } catch(Exception e){ e.printStackTrace(); } finally { // 5. 关闭连接和PreparedStatement JDBCUtils.closeResource(connection,preparedStatement); } return 0; } @Test // 考虑数据库事务的转账操作 public void transactionTest2() { Connection connection = null; try { connection = JDBCUtils.getConnection(); // 1.取消数据的自动提交 connection.setAutoCommit(false); String sql1 = "update user_table set balance = balance - 100 where user = ?;"; update2_0(connection,sql1,"AA"); String sql2 = "update user_table set balance = balance + 100 where user = ?;"; update2_0(connection, sql2,"BB"); System.out.println("转账成功!"); // 2.提交数据 connection.commit(); } catch (Exception e) { e.printStackTrace(); // 3.回滚数据 try { connection.rollback(); } catch (SQLException ex) { ex.printStackTrace(); } }finally{ if(connection != null){ JDBCUtils.closeResource(connection,null); } } } // 通用的[增删改]操作 --version 2.0(考虑事务) /* 2.0 版本说明:考虑事务就是共用一个数据库连接,因为数据库连接每次断开连接时,都会自动提交数据,且1.0版本 每次执行完一条SQL语句,就会自动断开连接,并且提交数据,然后继续执行下一条SQL语句 */ public int update2_0(Connection connection,String sql,Object ...args) { // 注意:这里要求SQL中的占位符(?)个数要与参数一致 PreparedStatement preparedStatement = null; try { // 1. 预编译SQL语句,返回PreparedStatement的实例 preparedStatement = connection.prepareStatement(sql); // 2. 填充占位符 for (int i = 0; i < args.length; i++) { preparedStatement.setObject(i + 1, args[i]); } // 3. 执行 // 方式2 // preparedStatement.execute(); /* preparedStatement.execute() 方法: 如果执行的是查询操作,有返回结果,则此方法返回true 如果执行的增、删、改操作,没有返回结果,则此方法返回false */ // 方式1 return preparedStatement.executeUpdate(); } catch(Exception e){ e.printStackTrace(); } finally { // 4. 关闭连接和PreparedStatement JDBCUtils.closeResource(null,preparedStatement); } return 0; } }
2 一致性(Consistency) 事务必须使数据库从一个一致性状态变换到另外一个一致性状态。
3 隔离性(Isolation) 事务的隔离性是指一个事务的执行不能被其他事务干扰,即一个事务内部的操作及使用的数据对并发的其他事务是隔离的,并发执行的各个事务之间不能互相干扰。
4 持久性(Durability)
-
-
脏读: 对于两个事务 T1, T2, T1 读取了已经被 T2 更新但还没有被提交的字段。之后, 若 T2 回滚, T1读取的内容就是临时且无效的。
-
不可重复读: 对于两个事务T1, T2, T1 读取了一个字段, 然后 T2 更新了该字段。之后, T1再次读取同一个字段, 值就不同了。
-
幻读: 对于两个事务T1, T2, T1 从一个表中读取了一个字段, 然后 T2 在该表中插入了一些新的行。之后, 如果 T1 再次读取同一个表, 就会多出几行。
-
-
数据库事务的隔离性: 数据库系统必须具有隔离并发运行各个事务的能力, 使它们不会相互影响, 避免各种并发问题。
-
一个事务与其他事务隔离的程度称为隔离级别。数据库规定了多种事务隔离级别, 不同隔离级别对应不同的干扰程度,
-
Mysql 支持 4 种事务隔离级别。Mysql 默认的事务隔离级别为: REPEATABLE READ。
2
-
-
查看当前的隔离级别:
SELECT @@tx_isolation;
-
设置当前 mySQL 连接的隔离级别:
set transaction isolation level read committed;
-
设置数据库系统的全局的隔离级别:
set global transaction isolation level read committed;
- 补充操作:
-
-
创建mysql数据库用户:
create user tom identified by 'abc123';
-
授予权限
#授予通过网络方式登录的tom用户,对所有库所有表的全部权限,密码设为abc123. grant all privileges on *.* to tom@'%' identified by 'abc123';
#给tom用户使用本地命令行方式,授予atguigudb这个库下的所有表的插删改查的权限。 grant select,insert,delete,update on atguigudb.* to tom@localhost identified by 'abc123';
-
package com.lzh.transaction; import com.lzh.bean.User; import com.lzh.util.JDBCUtils; import org.junit.Test; import java.io.IOException; import java.lang.reflect.Field; import java.sql.*; import java.util.ArrayList; import java.util.List; /* 事务:一组逻辑操作单元,是数据从一种状态变换到另一种状态 > 一组逻辑操作单元:一个或多个DML操作 数据一旦提交,就不可回滚 那些操作会导致数据自动提交? > DDL一旦执行,都会自动提交 set autocommit = false 对DDL操作失效 > DML默认情况下,一旦执行,就会自动提交,但是我们通过 set autocommit = false 的方式取消DML操作的自动提交 > 默认在关闭连接时,会自动的提交数据 */ public class TransactionTest { @Test // 未考虑数据库事务的情况的转账操作 public void transferTest1(){ /* 针对user_table来说: AA用于给BB用户转账100 update user_table set balance = balance - 100 where user = 'AA'; update user_table set balance = balance + 100 where user = 'BB'; */ String sql1 = "update user_table set balance = balance - 100 where user = ?;"; update1_0(sql1,"AA"); // 模拟网络异常 System.out.println(10/0); String sql2 = "update user_table set balance = balance + 100 where user = ?;"; update1_0(sql2,"BB"); System.out.println("转账成功!"); } // 通用的[增删改]操作 --version 1.0(未考虑事务) public int update1_0(String sql,Object ...args) { // 注意:这里要求SQL中的占位符(?)个数要与参数一致 Connection connection = null; PreparedStatement preparedStatement = null; try { // 1. 获取数据库连接 connection = JDBCUtils.getConnection(); // 2. 预编译SQL语句,返回PreparedStatement的实例 preparedStatement = connection.prepareStatement(sql); // 3. 填充占位符 for (int i = 0; i < args.length; i++) { preparedStatement.setObject(i + 1, args[i]); } // 4. 执行 // 方式2 // preparedStatement.execute(); /* preparedStatement.execute() 方法: 如果执行的是查询操作,有返回结果,则此方法返回true 如果执行的增、删、改操作,没有返回结果,则此方法返回false */ // 方式1 return preparedStatement.executeUpdate(); } catch(Exception e){ e.printStackTrace(); } finally { // 5. 关闭连接和PreparedStatement JDBCUtils.closeResource(connection,preparedStatement); } return 0; } @Test // 考虑数据库事务的转账操作 public void transactionTest2() { Connection connection = null; try { connection = JDBCUtils.getConnection(); // 1.取消数据的自动提交 connection.setAutoCommit(false); String sql1 = "update user_table set balance = balance - 100 where user = ?;"; update2_0(connection,sql1,"AA"); String sql2 = "update user_table set balance = balance + 100 where user = ?;"; update2_0(connection, sql2,"BB"); System.out.println("转账成功!"); // 2.提交数据 connection.commit(); } catch (Exception e) { e.printStackTrace(); // 3.回滚数据 try { connection.rollback(); } catch (SQLException ex) { ex.printStackTrace(); } }finally{ if(connection != null){ JDBCUtils.closeResource(connection,null); } } } // 通用的[增删改]操作 --version 2.0(考虑事务) /* 2.0 版本说明:考虑事务就是共用一个数据库连接,因为数据库连接每次断开连接时,都会自动提交数据,且1.0版本 每次执行完一条SQL语句,就会自动断开连接,并且提交数据,然后继续执行下一条SQL语句 */ public int update2_0(Connection connection,String sql,Object ...args) { // 注意:这里要求SQL中的占位符(?)个数要与参数一致 PreparedStatement preparedStatement = null; try { // 1. 预编译SQL语句,返回PreparedStatement的实例 preparedStatement = connection.prepareStatement(sql); // 2. 填充占位符 for (int i = 0; i < args.length; i++) { preparedStatement.setObject(i + 1, args[i]); } // 3. 执行 // 方式2 // preparedStatement.execute(); /* preparedStatement.execute() 方法: 如果执行的是查询操作,有返回结果,则此方法返回true 如果执行的增、删、改操作,没有返回结果,则此方法返回false */ // 方式1 return preparedStatement.executeUpdate(); } catch(Exception e){ e.printStackTrace(); } finally { // 4. 关闭连接和PreparedStatement JDBCUtils.closeResource(null,preparedStatement); } return 0; } // ******************************************************************* // 通用的查询操作,用于返回数据表中的一条记录 version 2.0 考虑事务 public <T> List<T> getInstanceList(Connection connection,Class<T> clazz, String sql, Object ...args){ PreparedStatement preparedStatement = null; ResultSet resultSet = null; try { // 1.获取数据库连接 connection = JDBCUtils.getConnection(); // 2.预编译SQL语句,返回PreparedStatement实例 preparedStatement = connection.prepareStatement(sql); // 3.填充占位符 for(int i = 0;i < args.length;i++){ preparedStatement.setObject(i+1,args[i]); } // 4.执行SQL语句,返回ResultSet结果集 resultSet = preparedStatement.executeQuery(); // 5.处理结果集 ResultSetMetaData resultSetMetaData = resultSet.getMetaData(); // 获取元数据 int columnCount = resultSetMetaData.getColumnCount(); // 获取字段数 // 创建集合对象 ArrayList<T> list = new ArrayList<>(); while (resultSet.next()) { T t = clazz.newInstance(); // 处理结果集一行数据中的每一个列:给t对象 指定的属性赋值 for(int i = 0;i < columnCount;i++){ String columnLabel = resultSetMetaData.getColumnLabel(i+1); // 获取查询字段的别名 Object columnValue = resultSet.getObject(i+1); // 获取字段的值 Field field = clazz.getDeclaredField(columnLabel); field.setAccessible(true); field.set(t,columnValue); } list.add(t); } return list; } catch (Exception e) { e.printStackTrace(); } finally { // 6.关闭资源 JDBCUtils.closeResource(null,preparedStatement,resultSet); } return null; } @Test public void testTransactionSelect() throws SQLException, IOException, ClassNotFoundException { Connection connection = JDBCUtils.getConnection(); // 设置事务隔离级别为 TRANSACTION_READ_COMMITTED // connection.setTransactionIsolation(Connection.TRANSACTION_READ_COMMITTED); // connection.getTransactionIsolation() 获取事务的隔离级别 System.out.println(connection.getTransactionIsolation()); // 设置取消自动提交 connection.setAutoCommit(false); String sql = "select * from test.user_table where user = ?"; List userList = getInstanceList(connection, User.class,sql,"AA"); System.out.println(userList); connection.close(); } @Test public void testTransactionUpdate() throws SQLException, IOException, ClassNotFoundException, InterruptedException { Connection connection = JDBCUtils.getConnection(); // 设置取消自动提交 connection.setAutoCommit(false); String sql = "update user_table set balance = ? where user = ?"; int updateCount = update2_0(connection, sql, 5000, "AA"); Thread.sleep(15000); System.out.println("修改结束"); } }
package com.lzh.doa; import com.lzh.util.JDBCUtils; import java.lang.reflect.Field; import java.sql.*; import java.util.ArrayList; import java.util.List; /* DOA:data(base) access object 封装了针对于数据表的通用操作 */ public abstract class BaseDOA { /** * @author Howie * @date 2020/7/18 8:28 * @param * @Description 通用的增删改操作 * @return */ public int update(Connection connection, String sql, Object ...args) { // 注意:这里要求SQL中的占位符(?)个数要与参数一致 PreparedStatement preparedStatement = null; try { // 1. 预编译SQL语句,返回PreparedStatement的实例 preparedStatement = connection.prepareStatement(sql); // 2. 填充占位符 for (int i = 0; i < args.length; i++) { preparedStatement.setObject(i + 1, args[i]); } // 3. 执行 // 方式2 // preparedStatement.execute(); /* preparedStatement.execute() 方法: 如果执行的是查询操作,有返回结果,则此方法返回true 如果执行的增、删、改操作,没有返回结果,则此方法返回false */ // 方式1 return preparedStatement.executeUpdate(); } catch(Exception e){ e.printStackTrace(); } finally { // 4. 关闭连接和PreparedStatement JDBCUtils.closeResource(null,preparedStatement); } return 0; } /** * @author Howie * @date 2020/7/18 8:29 * @param * @Description 通用的查询操作,用于返回数据表中多条记录构成的集合 version 2.0 考虑事务 * @return */ public <T> List<T> getInstanceList(Connection connection, Class<T> clazz, String sql, Object ...args){ PreparedStatement preparedStatement = null; ResultSet resultSet = null; try { // 1.获取数据库连接 connection = JDBCUtils.getConnection(); // 2.预编译SQL语句,返回PreparedStatement实例 preparedStatement = connection.prepareStatement(sql); // 3.填充占位符 for(int i = 0;i < args.length;i++){ preparedStatement.setObject(i+1,args[i]); } // 4.执行SQL语句,返回ResultSet结果集 resultSet = preparedStatement.executeQuery(); // 5.处理结果集 ResultSetMetaData resultSetMetaData = resultSet.getMetaData(); // 获取元数据 int columnCount = resultSetMetaData.getColumnCount(); // 获取字段数 // 创建集合对象 ArrayList<T> list = new ArrayList<>(); while (resultSet.next()) { T t = clazz.newInstance(); // 处理结果集一行数据中的每一个列:给t对象 指定的属性赋值 for(int i = 0;i < columnCount;i++){ String columnLabel = resultSetMetaData.getColumnLabel(i+1); // 获取查询字段的别名 Object columnValue = resultSet.getObject(i+1); // 获取字段的值 Field field = clazz.getDeclaredField(columnLabel); field.setAccessible(true); field.set(t,columnValue); } list.add(t); } return list; } catch (Exception e) { e.printStackTrace(); } finally { // 6.关闭资源 JDBCUtils.closeResource(null,preparedStatement,resultSet); } return null; } /** * @author Howie * @date 2020/7/18 9:01 * @param * @Description 用于查询特殊值的方法 * @return */ public <E> E getValue(Connection connection,String sql,Object...args) { PreparedStatement preparedStatement = null; ResultSet resultSet = null; try { // 1. 预编译SQL语句,返回PreparedStatement实例 preparedStatement = connection.prepareStatement(sql); // 2. 填充占位符 for(int i = 0;i < args.length;i++){ preparedStatement.setObject(i+1,args[i]); } // 3. 执行SQL语句,返回ResultSet结果集 resultSet = preparedStatement.executeQuery(); // 4. 处理结果集 if(resultSet.next()){ return (E) resultSet.getObject(1); } } catch (Exception e) { e.printStackTrace(); }finally{ // 5. 关闭资源 JDBCUtils.closeResource(null,preparedStatement,resultSet); try { if(connection != null) connection.close(); } catch (SQLException e) { e.printStackTrace(); } } return null; } }
package com.lzh.doa; import com.lzh.bean.Customer; import java.sql.Connection; import java.sql.Date; import java.util.List; /* 此接口用来规范针对于Customer表的常用操作 */ public interface CustomerDOA { /** * @author Howie * @date 2020/7/18 9:19 * @param * @Description 将customer对象添加到数据中 * @return */ void insert(Connection connection, Customer customer); /** * @author Howie * @date 2020/7/18 9:22 * @param * @Description 根据指定的id删除表中的一条记录 * @return */ void deleteById(Connection connection,int id); /** * @author Howie * @date 2020/7/18 9:24 * @param * @Description 针对内存中customer对象,修改数据表中指定的记录 * @return */ void update(Connection connection,Customer customer); /** * @author Howie * @date 2020/7/18 9:32 * @param * @Description 针对指定的id查询得到对应的Customer对象 * @return */ Customer getCustomerById(Connection connection,int id); /** * @author Howie * @date 2020/7/18 9:36 * @param * @Description 查询表中所有记录构成的集合 * @return */ List<Customer> getAll(Connection connection); /** * @author Howie * @date 2020/7/18 9:38 * @param * @Description 返回数据表中的条目数 * @return */ long getCount(Connection connection); /* * @author Howie * @date 2020/7/18 9:40 * @param * @Description 返回数据表中最大的生日 * @return */ Date getMaxBirth(Connection connection); }
package com.lzh.doa; import com.lzh.bean.Customer; import java.sql.Connection; import java.sql.Date; import java.util.List; public class CustomerDOAImpl extends BaseDOA implements CustomerDOA{ @Override public void insert(Connection connection, Customer customer) { String sql = "insert into customers(name,email,birth) values(?,?,?)"; update(connection,sql,customer.getName(),customer.getEmail(),customer.getBirth()); } @Override public void deleteById(Connection connection, int id) { String sql = "delete from customers where id = ?"; update(connection,sql,id); } @Override public void update(Connection connection, Customer customer) { String sql = "update customers set name = ?,email = ?,birth = ? where id = ?"; update(connection,sql,customer.getName(),customer.getEmail(),customer.getBirth(),customer.getId()); } @Override public Customer getCustomerById(Connection connection, int id) { String sql = "select id,name,email,birth from customers where id = ?"; List<Customer> instanceList = getInstanceList(connection, Customer.class, sql, id); return instanceList.get(0); } @Override public List<Customer> getAll(Connection connection) { String sql = "select id,name,email,birth from customers"; return getInstanceList(connection,Customer.class,sql); } @Override public long getCount(Connection connection) { String sql = "select count(*) from customers"; return getValue(connection,sql); } @Override public Date getMaxBirth(Connection connection) { String sql = "select max(birth) from customers"; return getValue(connection,sql); } }
package com.lzh.doa.junit; import com.lzh.bean.Customer; import com.lzh.doa.CustomerDOAImpl; import com.lzh.util.JDBCUtils; import org.junit.Test; import java.sql.Connection; import java.sql.Date; import java.text.SimpleDateFormat; import java.util.List; public class CustomerDOAImplTest { private CustomerDOAImpl customerDOAImpl = new CustomerDOAImpl(); @Test public void testInsert() { Connection connection = null; try { connection = JDBCUtils.getConnection(); String date = "1999-01-09"; SimpleDateFormat simpleDateFormat = new SimpleDateFormat("yyyy-MM-dd"); java.util.Date d = simpleDateFormat.parse(date); Customer customer = new Customer(9,"howie","howie@123.com",new Date(d.getTime())); customerDOAImpl.insert(connection,customer); System.out.println("添加成功!"); } catch (Exception e) { e.printStackTrace(); } finally{ JDBCUtils.closeResource(connection,null); } } @Test public void testDeleteById(){ Connection connection = null; try { connection = JDBCUtils.getConnection(); customerDOAImpl.deleteById(connection,21); System.out.println("删除成功!"); } catch (Exception e) { e.printStackTrace(); } finally{ JDBCUtils.closeResource(connection,null); } } @Test public void testUpdate(){ Connection connection = null; try { connection = JDBCUtils.getConnection(); String date = "1999-01-10"; SimpleDateFormat simpleDateFormat = new SimpleDateFormat("yyyy-MM-dd"); java.util.Date d = simpleDateFormat.parse(date); Customer customer = new Customer(6,"鞠婧祎","jqy@123.com",new Date(d.getTime())); /* 插入中文时会报错,报错原因:UTF-8编码有可能是两个、三个、四个字节。Emoji表情或者某些特殊字符是4个字节,而Mysql的utf8编码最多3个字节,所以数据插不进去。 即名字中有生僻字 解决方法:alter table TABLE_NAME convert to character set utf8mb4 collate utf8mb4_bin; (将TABLE_NAME替换成你的表名) */ customerDOAImpl.update(connection,customer); System.out.println("修改成功"); } catch (Exception e) { e.printStackTrace(); } finally{ JDBCUtils.closeResource(connection,null); } } @Test public void testGetCustomerById(){ Connection connection = null; try { connection = JDBCUtils.getConnection(); Customer customer = customerDOAImpl.getCustomerById(connection,6); System.out.println(customer); } catch (Exception e) { e.printStackTrace(); } finally{ JDBCUtils.closeResource(connection,null); } } @Test public void testGetAll(){ Connection connection = null; try { connection = JDBCUtils.getConnection(); List<Customer> customerList = customerDOAImpl.getAll(connection); for(Customer customer:customerList){ System.out.println(customer); } } catch (Exception e) { e.printStackTrace(); } finally{ JDBCUtils.closeResource(connection,null); } } @Test public void testGetCount(){ Connection connection = null; try { connection = JDBCUtils.getConnection(); long count = customerDOAImpl.getCount(connection); System.out.println("表中的记录总数为:" + count); } catch (Exception e) { e.printStackTrace(); } finally{ JDBCUtils.closeResource(connection,null); } } @Test public void testGetMaxBirth(){ Connection connection = null; try { connection = JDBCUtils.getConnection(); Date maxDate = customerDOAImpl.getMaxBirth(connection); System.out.println("最大的生日为:" + maxDate); } catch (Exception e) { e.printStackTrace(); } finally{ JDBCUtils.closeResource(connection,null); } } }
package com.atguigu.bookstore.dao; import java.lang.reflect.ParameterizedType; import java.lang.reflect.Type; import java.sql.Connection; import java.sql.SQLException; import java.util.List; import org.apache.commons.dbutils.QueryRunner; import org.apache.commons.dbutils.handlers.BeanHandler; import org.apache.commons.dbutils.handlers.BeanListHandler; import org.apache.commons.dbutils.handlers.ScalarHandler; /** * 定义一个用来被继承的对数据库进行基本操作的Dao * * @author HanYanBing * * @param <T> */ public abstract class BaseDao<T> { private QueryRunner queryRunner = new QueryRunner(); // 定义一个变量来接收泛型的类型 private Class<T> type; // 获取T的Class对象,获取泛型的类型,泛型是在被子类继承时才确定 public BaseDao() { // 获取子类的类型 Class clazz = this.getClass(); // 获取父类的类型 // getGenericSuperclass()用来获取当前类的父类的类型 // ParameterizedType表示的是带泛型的类型 ParameterizedType parameterizedType = (ParameterizedType) clazz.getGenericSuperclass(); // 获取具体的泛型类型 getActualTypeArguments获取具体的泛型的类型 // 这个方法会返回一个Type的数组 Type[] types = parameterizedType.getActualTypeArguments(); // 获取具体的泛型的类型· this.type = (Class<T>) types[0]; } /** * 通用的增删改操作 * * @param sql * @param params * @return */ public int update(Connection conn,String sql, Object... params) { int count = 0; try { count = queryRunner.update(conn, sql, params); } catch (SQLException e) { e.printStackTrace(); } return count; } /** * 获取一个对象 * * @param sql * @param params * @return */ public T getBean(Connection conn,String sql, Object... params) { T t = null; try { t = queryRunner.query(conn, sql, new BeanHandler<T>(type), params); } catch (SQLException e) { e.printStackTrace(); } return t; } /** * 获取所有对象 * * @param sql * @param params * @return */ public List<T> getBeanList(Connection conn,String sql, Object... params) { List<T> list = null; try { list = queryRunner.query(conn, sql, new BeanListHandler<T>(type), params); } catch (SQLException e) { e.printStackTrace(); } return list; } /** * 获取一个但一值得方法,专门用来执行像 select count(*)...这样的sql语句 * * @param sql * @param params * @return */ public Object getValue(Connection conn,String sql, Object... params) { Object count = null; try { // 调用queryRunner的query方法获取一个单一的值 count = queryRunner.query(conn, sql, new ScalarHandler<>(), params); } catch (SQLException e) { e.printStackTrace(); } return count; } }
-
-
在主程序(如servlet、beans)中建立数据库连接
-
进行sql操作
-
断开数据库连接
-
-
这种模式开发,存在的问题:
-
普通的JDBC数据库连接使用 DriverManager 来获取,每次向数据库建立连接的时候都要将 Connection 加载到内存中,再验证用户名和密码(得花费0.05s~1s的时间)。需要数据库连接的时候,就向数据库要求一个,执行完成后再断开连接。这样的方式将会消耗大量的资源和时间。数据库的连接资源并没有得到很好的重复利用。若同时有几百人甚至几千人在线,频繁的进行数据库连接操作将占用很多的系统资源,严重的甚至会造成服务器的崩溃。
-
对于每一次数据库连接,使用完后都得断开。否则,如果程序出现异常而未能关闭,将会导致数据库系统中的内存泄漏,最终将导致重启数据库。(回忆:何为Java的内存泄漏?)
-
这种开发不能控制被创建的连接对象数
-
-
-
数据库连接池的基本思想:就是为数据库连接建立一个“缓冲池”。预先在缓冲池中放入一定数量的连接,当需要建立数据库连接时,只需从“缓冲池”中取出一个,使用完毕之后再放回去。
-
数据库连接池负责分配、管理和释放数据库连接,它允许应用程序重复使用一个现有的数据库连接,而不是重新建立一个。
-
数据库连接池在初始化时将创建一定数量的数据库连接放到连接池中,这些数据库连接的数量是由最小数据库连接数来设定的。无论这些数据库连接是否被使用,连接池都将一直保证至少拥有这么多的连接数量。连接池的最大数据库连接数量
3 工作原理
4 数据库连接池技术的优点
由于数据库连接得以重用,避免了频繁创建,释放连接引起的大量性能开销。在减少系统消耗的基础上,另一方面也增加了系统运行环境的平稳性。
2. 更快的系统反应速度
数据库连接池在初始化过程中,往往已经创建了若干数据库连接置于连接池中备用。此时连接的初始化工作均已完成。对于业务请求处理而言,直接利用现有可用连接,避免了数据库连接初始化和释放过程的时间开销,从而减少了系统的响应时间
3. 新的资源分配手段
对于多应用共享同一数据库的系统而言,可在应用层通过数据库连接池的配置,实现某一应用最大可用数据库连接数的限制,避免某一应用独占所有的数据库资源
4. 统一的连接管理,避免数据库连接泄漏
-
-
DBCP 是Apache提供的数据库连接池。tomcat 服务器自带dbcp数据库连接池。速度相对c3p0较快,但因自身存在BUG,Hibernate3已不再提供支持。
-
C3P0 是一个开源组织提供的一个数据库连接池,速度相对较慢,稳定性还可以。hibernate官方推荐使用
-
Proxool 是sourceforge下的一个开源项目数据库连接池,有监控连接池状态的功能,稳定性较c3p0差一点
-
BoneCP 是一个开源组织提供的数据库连接池,速度快
-
Druid 是阿里提供的数据库连接池,据说是集DBCP 、C3P0 、Proxool 优点于一身的数据库连接池,但是速度不确定是否有BoneCP快
-
-
DataSource 通常被称为数据源,它包含连接池和连接池管理两个部分,习惯上也经常把 DataSource 称为连接池
-
DataSource用来取代DriverManager来获取Connection,获取速度快,同时可以大幅度提高数据库访问速度。
-
特别注意:
-
数据源和数据库连接不同,数据源无需创建多个,它是产生数据库连接的工厂,因此整个应用只需要一个数据源即可。
-
1 c3p0数据连接池的使用
①下载c3p0 jar包,下载地址:https://sourceforge.net/projects/c3p0/?source=navbar
②把下载好的文件夹解压好后复制 lib 文件夹下的 c3p0-0.9.5.5.jar 和 mchange-commons-java-0.2.19.jar 两个jar 包,粘贴到项目工程 lib 文件下
③右键项目工程下 lib 点击 Add as library...
④代码实现
方式1:不推荐使用
@Test // 方式1 public void testGetConnection1() throws Exception { // 获取c3p0数据库连接池 ComboPooledDataSource cpds = new ComboPooledDataSource(); cpds.setDriverClass("com.mysql.jdbc.Driver"); //loads the jdbc driver cpds.setJdbcUrl("jdbc:mysql://localhost:3306/test?useSSL=FALSE&serverTimezone=UTC"); cpds.setUser("root"); cpds.setPassword("101323"); // 通过设置相关的参数,对数据库连接池进行管理 // 设置初始时数据库连接池中的连接数 cpds.setInitialPoolSize(10); Connection connection = cpds.getConnection(); System.out.println(connection); connection.close(); // 销毁c3p0数据库连接池 // cpds.close(); }
方式2:使用配置文件
首先需要创建配置文件(c3p0-config.xml),文件内容如下:
<?xml version="1.0" encoding="UTF-8" ?> <c3p0-config> <named-config name="hello_c3p0"> <!-- 提供获取连接的4个基本信息 --> <property name="driverClass">com.mysql.jdbc.Driver</property> <property name="jdbcUrl">jdbc:mysql://localhost:3306/test?useSSL=FALSE&serverTimezone=UTC</property> <property name="user">root</property> <property name="password">101323</property> <!-- 进行数据库连接池管理的基本信息 --> <!-- 当数据库连接池中的连接数不够时,c3p0一次向数据库服务器申请的连接数 --> <property name="acquireIncrement">5</property> <!-- c3p0数据库连接池中初始化时的连接数 --> <property name="initialPoolSize">10</property> <!-- c3p0数据库连接池维护的最少连接数 --> <property name="minPoolSize">10</property> <!-- c3p0数据库连接池维护的最大连接数 --> <property name="maxPoolSize">100</property> <!-- c3p0数据库连接池维护的最多维护的Statement的个数 --> <property name="maxStatements">0</property> <!-- c3p0中每个连接中可以最多使用的Statement的个数 --> <property name="maxStatementsPerConnection">2</property> </named-config> </c3p0-config>
方式2:推荐使用
@Test // 方式2:使用配置文件 public void testGetConnection2() throws Exception{ ComboPooledDataSource cpds = new ComboPooledDataSource("hello_c3p0"); Connection connection = cpds.getConnection(); System.out.println(connection); }
方式2:最终版、封装到 JDBCUtils 工具类下
package com.howie.util; import com.mchange.v2.c3p0.ComboPooledDataSource; import java.sql.Connection; import java.sql.SQLException; public class JDBCUtils { /* * @author Howie * @date 2020/7/18 22:11 * @param * @Description 使用c3p0的数据库连接池技术 * @return */ // 数据库连接池只需提供一个 private static ComboPooledDataSource cpds = new ComboPooledDataSource("hello_c3p0"); public static Connection getConnection() throws SQLException { return cpds.getConnection(); } }
2 -
Druid数据连接池的使用
①下载 Druid jar包,下载地址:https://repo1.maven.org/maven2/com/alibaba/druid/1.1.22/
②把下载好的文件 druid-1.1.22.jar 复制,粘贴到项目工程 lib 文件下
③右键项目工程下 lib 点击 Add as library...
④在项目的src下创建配置文件(druid.properties),文件内容如下:
url=jdbc:mysql://localhost:3306/test?useSSL=FALSE&serverTimezone=UTC&allowPublicKeyRetrieval=true username=root password=101323 driverClassName=com.mysql.cj.jdbc.Driver initialSize=10 maxActive=10
⑤Java代码实现(JDBCUtils.java)
/* * @author Howie * @date 2020/7/19 10:52 * @param * @Description 使用Druid的数据库连接池 * @return */ private static DataSource dataSource; static { try { Properties properties = new Properties(); InputStream inputStream = ClassLoader.getSystemClassLoader().getResourceAsStream("druid.properties"); properties.load(inputStream); dataSource = DruidDataSourceFactory.createDataSource(properties); } catch (Exception e) { e.printStackTrace(); } } public static Connection getConnectionByDruid() throws SQLException { Connection connection = dataSource.getConnection(); return connection; }
⑥详细配置参数介绍
/* | 配置** | **缺省** | **说明** | | ----------------------------- | -------- | ------------------------------------------------------------ | | name | | 配置这个属性的意义在于,如果存在多个数据源,监控的时候可以通过名字来区分开来。 如果没有配置,将会生成一个名字,格式是:”DataSource-” + System.identityHashCode(this) | | url | | 连接数据库的url,不同数据库不一样。例如:mysql : jdbc:mysql://10.20.153.104:3306/druid2 oracle : jdbc:oracle:thin:@10.20.149.85:1521:ocnauto | | username | | 连接数据库的用户名 | | password | | 连接数据库的密码。如果你不希望密码直接写在配置文件中,可以使用ConfigFilter。详细看这里:<https://github.com/alibaba/druid/wiki/%E4%BD%BF%E7%94%A8ConfigFilter> | | driverClassName | | 根据url自动识别 这一项可配可不配,如果不配置druid会根据url自动识别dbType,然后选择相应的driverClassName(建议配置下) | | initialSize | 0 | 初始化时建立物理连接的个数。初始化发生在显示调用init方法,或者第一次getConnection时 | | maxActive | 8 | 最大连接池数量 | | maxIdle | 8 | 已经不再使用,配置了也没效果 | | minIdle | | 最小连接池数量 | | maxWait | | 获取连接时最大等待时间,单位毫秒。配置了maxWait之后,缺省启用公平锁,并发效率会有所下降,如果需要可以通过配置useUnfairLock属性为true使用非公平锁。 | | poolPreparedStatements | false | 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql下建议关闭。 | | maxOpenPreparedStatements | -1 | 要启用PSCache,必须配置大于0,当大于0时,poolPreparedStatements自动触发修改为true。在Druid中,不会存在Oracle下PSCache占用内存过多的问题,可以把这个数值配置大一些,比如说100 | | validationQuery | | 用来检测连接是否有效的sql,要求是一个查询语句。如果validationQuery为null,testOnBorrow、testOnReturn、testWhileIdle都不会其作用。 | | testOnBorrow | true | 申请连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。 | | testOnReturn | false | 归还连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能 | | testWhileIdle | false | 建议配置为true,不影响性能,并且保证安全性。申请连接的时候检测,如果空闲时间大于timeBetweenEvictionRunsMillis,执行validationQuery检测连接是否有效。 | | timeBetweenEvictionRunsMillis | | 有两个含义: 1)Destroy线程会检测连接的间隔时间2)testWhileIdle的判断依据,详细看testWhileIdle属性的说明 | | numTestsPerEvictionRun | | 不再使用,一个DruidDataSource只支持一个EvictionRun | | minEvictableIdleTimeMillis | | | | connectionInitSqls | | 物理连接初始化的时候执行的sql | | exceptionSorter | | 根据dbType自动识别 当数据库抛出一些不可恢复的异常时,抛弃连接 | | filters | | 属性类型是字符串,通过别名的方式配置扩展插件,常用的插件有: 监控统计用的filter:stat日志用的filter:log4j防御sql注入的filter:wall | | proxyFilters | | 类型是List,如果同时配置了filters和proxyFilters,是组合关系,并非替换关系 | */
1 Apache-DBUtils简介
-
-
API介绍:
-
org.apache.commons.dbutils.QueryRunner
-
org.apache.commons.dbutils.ResultSetHandler
-
-
ApacheCommonsDbUtils 1.7 下载地址:http://commons.apache.org/proper/commons-dbutils/download_dbutils.cgi
2 Apache-DBUtils 主要API的使用
DbUtils类
-
public static void close(…) throws java.sql.SQLException: DbUtils类提供了三个重载的关闭方法。这些方法检查所提供的参数是不是NULL,如果不是的话,它们就关闭Connection、Statement和ResultSet。
-
public static void closeQuietly(…): 这一类方法不仅能在Connection、Statement和ResultSet为NULL情况下避免关闭,还能隐藏一些在程序中抛出的SQLEeception。
-
public static void commitAndClose(Connection conn)throws SQLException: 用来提交连接的事务,然后关闭连接
-
public static void commitAndCloseQuietly(Connection conn): 用来提交连接,然后关闭连接,并且在关闭连接时不抛出SQL异常。
-
public static void rollback(Connection conn)throws SQLException:允许conn为null,因为方法内部做了判断
-
public static void rollbackAndClose(Connection conn)throws SQLException
-
rollbackAndCloseQuietly(Connection)
-
-
-
QueryRunner类提供了两个构造器:
-
默认的构造器
-
需要一个 javax.sql.DataSource 来作参数的构造器
-
-
QueryRunner类的主要方法:
-
更新
-
public int update(Connection conn, String sql, Object... params) throws SQLException:用来执行一个更新(插入、更新或删除)操作。
-
......
-
-
插入
-
public <T> T insert(Connection conn,String sql,ResultSetHandler<T> rsh, Object... params) throws SQLException:只支持INSERT语句,其中 rsh - The handler used to create the result object from the ResultSet of auto-generated keys. 返回值: An object generated by the handler.即自动生成的键值
-
....
-
-
批处理
-
public int[] batch(Connection conn,String sql,Object
-
public <T> T insertBatch(Connection conn,String sql,ResultSetHandler<T> rsh,Object
-
.....
-
-
查询
-
public Object query(Connection conn, String sql, ResultSetHandler rsh,Object... params) throws SQLException:执行一个查询操作,在这个查询中,对象数组中的每个元素值被用来作为查询语句的置换参数。该方法会自行处理 PreparedStatement 和 ResultSet 的创建和关闭。
-
-
-
ResultSetHandler 接口提供了一个单独的方法:Object handle (java.sql.ResultSet .rs)。
-
接口的主要实现类:
-
ArrayHandler:把结果集中的第一行数据转成对象数组。
-
ArrayListHandler:把结果集中的每一行数据都转成一个数组,再存放到List中。
-
BeanHandler:将结果集中的第一行数据封装到一个对应的JavaBean实例中。
-
BeanListHandler:将结果集中的每一行数据都封装到一个对应的JavaBean实例中,存放到List里。
-
ColumnListHandler:将结果集中某一列的数据存放到List中。
-
KeyedHandler(name):将结果集中的每一行数据都封装到一个Map里,再把这些map再存到一个map里,其key为指定的key。
-
MapHandler:将结果集中的第一行数据封装到一个Map里,key是列名,value就是对应的值。
-
MapListHandler:将结果集中的每一行数据都封装到一个Map里,然后再存放到List
-
ScalarHandler:
-
代码测试:
package com.howie.dbutils; import com.howie.util.JDBCUtils; import com.lzh.bean.Customer; import org.apache.commons.dbutils.QueryRunner; import org.apache.commons.dbutils.ResultSetHandler; import org.apache.commons.dbutils.handlers.*; import org.junit.Test; import java.sql.Connection; import java.sql.Date; import java.sql.ResultSet; import java.sql.SQLException; import java.util.List; import java.util.Map; /* commons-dbutils 是Apache组织提供的一个开源JDBC工具类,封装了针对于数据库的[增删改]查操作 */ public class QueryRunnerTest { @Test // 测试插入 public void insertTest() { Connection connection = null; try { QueryRunner runner = new QueryRunner(); connection = JDBCUtils.getConnectionByDruid(); String sql = "insert into customers(name,email,birth) values(?,?,?)"; int insertCount = runner.update(connection,sql,"热巴","rb@123.com","1999-1-9"); System.out.println("添加了" + insertCount + "条记录"); } catch (SQLException e) { e.printStackTrace(); } finally{ com.lzh.util.JDBCUtils.closeResource(connection,null); } } @Test // (BeanHandler)测试查询返回一条记录 public void queryTest1() { Connection connection = null; try { QueryRunner runner = new QueryRunner(); connection = JDBCUtils.getConnectionByDruid(); String sql = "select id,name,email,birth from customers where id = ?"; BeanHandler<Customer> handler = new BeanHandler<>(Customer.class); /* @author Howie BeanHandler:是ResultSetHandler接口的实现类,用于封装表中的一条记录。 */ Customer customer = runner.query(connection,sql,handler,6); System.out.println(customer); } catch (SQLException e) { e.printStackTrace(); } finally{ com.lzh.util.JDBCUtils.closeResource(connection,null); } } @Test // (BeanListHandler)测试查询返回多条记录 public void queryTest2() { Connection connection = null; try { QueryRunner runner = new QueryRunner(); connection = JDBCUtils.getConnectionByDruid(); String sql = "select id,name,email,birth from customers where id >= ?"; BeanListHandler<Customer> handler = new BeanListHandler<>(Customer.class); /* BeanListHandler:是ResultSetHandler接口的实现类,用于封装表中的多条条记录。 */ List<Customer> customerList = runner.query(connection,sql,handler,6); for(Customer customer:customerList){ System.out.println(customer); } } catch (SQLException e) { e.printStackTrace(); } finally{ com.lzh.util.JDBCUtils.closeResource(connection,null); } } @Test // (MapHandler)测试查询返回多条记录 public void queryTest3() { Connection connection = null; try { QueryRunner runner = new QueryRunner(); connection = JDBCUtils.getConnectionByDruid(); String sql = "select id,name,email,birth from customers where id = ?"; MapHandler handler = new MapHandler(); /* MapHandler:是ResultSetHandler接口的实现类,对应表中的一条记录,将字段及相应字段的值作为Map中key和value。 */ Map<String,Object> map = runner.query(connection,sql,handler,6); System.out.println(map); } catch (SQLException e) { e.printStackTrace(); } finally{ com.lzh.util.JDBCUtils.closeResource(connection,null); } } @Test // (MapListHandler)测试查询返回多条记录 public void queryTest4() { Connection connection = null; try { QueryRunner runner = new QueryRunner(); connection = JDBCUtils.getConnectionByDruid(); String sql = "select id,name,email,birth from customers where id >= ?"; MapListHandler handler = new MapListHandler(); /* MapListHandler:是ResultSetHandler接口的实现类,对应表中的多条记录,将字段及相应字段的值作为Map中key和value。 将这些Map添加到list中 */ List<Map<String,Object>> customerList = runner.query(connection,sql,handler,6); customerList.forEach(System.out :: println); } catch (SQLException e) { e.printStackTrace(); } finally{ com.lzh.util.JDBCUtils.closeResource(connection,null); } } @Test // (ScalarHandler)测试返回特殊值 public void queryTest5() { Connection connection = null; try { QueryRunner runner = new QueryRunner(); connection = JDBCUtils.getConnectionByDruid(); String sql1 = "select count(*) from customers"; String sql2 = "select max(birth) from customers"; ScalarHandler handler = new ScalarHandler<>(); /* ScalarHandler:是ResultSetHandler接口的实现类,返回特殊值类型(count max min avg等) */ long count = (long) runner.query(connection,sql1,handler); Date maxBirth = (Date) runner.query(connection,sql2,handler); System.out.println("数据表中总记录数:" + count); System.out.println("数据表中最大生日:" + maxBirth); } catch (SQLException e) { e.printStackTrace(); } finally{ com.lzh.util.JDBCUtils.closeResource(connection,null); } } @Test // (ResultSetHandler的匿名实现类) public void queryTest6() { Connection connection = null; try { QueryRunner runner = new QueryRunner(); connection = JDBCUtils.getConnectionByDruid(); String sql = "select id,name,email,birth from customers where id = ?"; // ResultSetHandler的匿名实现类,重写handle方法 ResultSetHandler<Customer> handler = new ResultSetHandler<>(){ @Override public Customer handle(ResultSet resultSet) throws SQLException { if(resultSet.next()){ int id = resultSet.getInt(1); String name = resultSet.getString(2); String email = resultSet.getString(3); Date birth = resultSet.getDate(4); return new Customer(id,name,email,birth); } return null; } }; Customer customer = runner.query(connection,sql,handler,6); System.out.println(customer); } catch (SQLException e) { e.printStackTrace(); } finally{ com.lzh.util.JDBCUtils.closeResource(connection,null); } } }