JDBC

cccs7 Lv5
  2022-10-28 16:38:22 2022-10-28 16:38 Created   2023-06-29 23:12:39 2023-06-29 23:12 Updated      16.3k Words  73 Mins  

JDBC

2022.10.28

JDBC 概述

数据的持久化

  • 持久化（persistence）：把数据保存到可掉电式存储设备中以供之后使用。 绝大多数情况下，特别是企业级应用，数据持久化意味着将内存中的数据保存到硬盘上 加以 “固化”，而持久化的实现过程大多通过各种关系数据库来完成
  • 持久化的主要应用是将内存中的数据存储到关系型数据库中，当然也可以存储在磁盘文件、xml数据文件中

Java 中数据存储技术

  • 在 Java 中，数据库存取技术可分为以下几种
    • JDBC 直接访问数据库
    • JDO 技术
    • 第三方 O/R 工具，如Hibernate、Mybatis
  • JDBC 是 Java 访问数据库的基石，JDO、Hebernate、Mybatis 等只是更好的封装 JDBC

JDBC 介绍

  • JDBC 是一个独立于特定数据库管理系统、通用的 SQL 数据库存取和操作的公共接口（一组 API），定义类用来访问数据库的标准 Java 库，（java.sql, javax.sql）使用这些类库可以以一种标准的方法、方便地访问数据库资源

  • JDBC 为访问不同的数据库提供了一种统一的途径，为开发者屏蔽了一些细节问题

  • JDBC 的目标是使 Java 程序员使用 JDBC 可以连接任何提供了 JDBC 驱动程序的数据库系统，这样就使得程序员无需对特定的数据库系统的TED有过多的了解，从而大大简化和加快了开发过程

  • 如果没有 JDBC，那么 Java 程序访问数据库时是这样的

  • 有了 JDBC ，Java 程序访问数据库是这样的

没有 JDBC 可行，但是 不建议，因为这意味着 Java 程序没有更好的可移植性

JDBC 体系结构

  • JDBC 接口（API）包括两个层次
    • 面向应用的 API：Java API ，抽象接口，供应用程序开发人员（链接数据库，执行 SQL 语句。获得结果）
    • 面向数据库的 API： Java Driver API ，供开发商开发数据库驱动程序用

JDBC是sun公司提供一套用于数据库操作的接口，java程序员只需要面向这套接口编程即可。
不同的数据库厂商，需要针对这套接口，提供不同实现。不同的实现的集合，即为不同数据库的驱动。
————面向接口编程

JDBC 程序编写步骤

补充：ODBC(Open Database Connectivity，开放式数据库连接)，是微软在Windows平台下推出的。使用
者在程序中只需要调用ODBC API，由 ODBC 驱动程序将调用转换成为对特定的数据库的调用请求。

获取数据库连接

要素一：Driver 接口实现类

Driver 接口介绍

  • java.sql.Driver 接口是所有 JDBC 驱动程序需要实现的接口。这个接口是提供给数据库厂商使用的，不同数据库厂商提供不同的实现
  • 在程序中不需要直接去访问实现了 Driver 接口的类，而是由驱动程序管理器类（java.sql.DriverManager) 去调用这些 Driver 实现
    • Oracle的驱动：oracle.jdbc.driver.OracleDriver
    • mySql 的驱动：com.mysql.cj.jdbc.Driver

加载与注册 JDBC 驱动

  • 加载驱动：加载 JDBC 驱动需调用 Class 类的静态方法 forName（），向其传递要加载的 JDBC 驱动的类名

    • Class.forName("com.mysql.cj.jdbc.Driver");

  • 注册驱动： DriverManager 是驱动程序管理器类，负责管理驱动程序

    • 使用 DriverManager.registerDriver(com.mysql.cj.jdbc.Driver) 来注册驱动

    • 通常不用显式调用 DriverManager 类的 registerDriver（）方法来注册驱动程序类的实例，因为 Driver 接口的驱动程序类都包含了 静态代码块，在这个静态代码块，在这个静态代码块中，会调用 DriverManager.registerDriver() 方法来注册自身的一个实例。

要素二：URL

  • JDBC URL 用于标识一个被注册的驱动程序，驱动程序管理器通过这个 URL 选择正确的驱动程序，从而建立数据库的连接

  • JDBC URL 的标准由三部分组成，各部分间用 ： 分割

    • jdbc: 子协议：子名称
    • 协议：JDBC 中的协议总是 jdbc
    • 子协议：子协议用于标识一个数据库驱动程序
    • 子名称：一种标识数据库的方法。子名称可以依不同的子协议而变化，用子协议的目的是为了 定位数据库提供足够的信息。包含主机名（对应服务端的 ip 地址），端口号，数据库名

  • 举例：

  • 几种常用数据库的 JDBC URL

    • MySQL 的连接 URL 编写方式
      • jdbc:mysql://主机名称:mysql服务端口号/数据库名称?参数=值&参数=值
      • jdbc:mysql://localhost:3306/test
      • jdbc:mysql://localhost:3306/test**?useUnicode=true&characterEncoding=utf8**（如果JDBC
        程序与服务器端的字符集不一致，会导致乱码，那么可以通过参数指定服务器端的字符集）
      • jdbc:mysql://localhost:3306/test?user=root&password=123456
    • Oracle 9i的连接URL编写方式：
      • jdbc:oracle:thin:@主机名称:oracle服务端口号:数据库名称
      • jdbc:oracle:thin:@localhost:1521:atguigu
    • SQLServer的连接URL编写方式：
      • jdbc:sqlserver://主机名称:sqlserver服务端口号:DatabaseName=数据库名称
      • jdbc:sqlserver://localhost:1433:DatabaseName=atguigu

要素三：用户名和密码

  • user，password 可以用“属性名=属性值”的方式告诉数据库
  • 可以调用 DriverManager 类的 getCOnnection() 方法建立到数据库的连接

数据库连接方式示例

方式一

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
//方式一
   @Test
   public void testConnection1() throws SQLException {
       // 获取 Driver 实现类对象
       Driver driver = new com.mysql.cj.jdbc.Driver();

       // url:http://localhost:8080/gmall/keyboard.jpg
       // jdbc:mysql:协议
       // localhost:ip地址
       // 3306：默认mysql的端口号
       // mysql:mysql的存储mysql本身一些信息的数据库
       String url = "jdbc:mysql://localhost:3306/test";
       Properties info = new Properties();
       // 将用户名和密码封装在Properties中
       info.setProperty("user","root");
       info.setProperty("password","C020611.");

       Connection conn = driver.connect(url,info);
       System.out.println(conn);
   }

上述代码中显式出现了第三方数据库的 API

方式二

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
// 方式二 : 对方式一 的迭代
   @Test
   public void testConnection2() throws Exception {
       // 获取 Driver 实现类对象：使用 反射
       Class clazz = Class.forName("com.mysql.cj.jdbc.Driver");
       Driver driver = (Driver) clazz.newInstance();

       //2. 提供要连接的数据库
       String url = "jdbc:mysql://localhost:3306/test/";

       //3. 提供连接需要的用户名和密码
       Properties info = new Properties();
       info.setProperty("user","root");
       info.setProperty("password","C020611.");

       //4. 获取连接
       Connection conn = driver.connect(url, info);
       System.out.println(conn);

   }

相较于方式一，这里使用反射实例化 Driver，不在代码中体现第三方 API ，体现了面向接口编程的思想

方式三

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
// 方式三 ： 使用 DriverManager 替换 Driver
    @Test
    public void testConnection3() throws Exception {
        //1. 获取 Driver 实现类的对象
        Class clazz = Class.forName("com.mysql.cj.jdbc.Driver");
        Driver driver = (Driver) clazz.newInstance();

        //2. 注册驱动
        DriverManager.registerDriver(driver);

        //3. 获取连接
        String url = "jdbc:mysql://localhost:3306/test/";
        String user = "root";
        String password = "C020611.";
        DriverManager.getConnection(url,user,password);
    }

使用 DriverManager 实现数据库的连接，体会获取连接必要的4个基本要素

方式四

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
// 方式四 ： 优化三   ：可以只是加载驱动，不用显示注册驱动过了
    @Test
    public void testConnection4() throws Exception {

        // 1.提供另外三个连接的基本信息
        String url = "jdbc:mysql://localhost:3306/test/";
        String user = "root";
        String password = "C020611.";

        //2. 加载 Driver
        Class.forName("com.mysql.cj.jdbc.Driver");
        /*
         相较于方式三 可以省略以下操作
             Driver driver = (Driver) clazz.newInstance();
             //注册驱动
            DriverManager.registerDriver(driver);

            为什么可以省略以上操作呢
                 在 MySQL 的 Driver 实现类中，声明了以下的操作
                static {
                    try {
                        DriverManager.registerDriver(new Driver());
                    } catch (SQLException var1) {
                        throw new RuntimeException("Can't register driver!");
        }
    }
         */

        //3. 获取连接

        Connection connection = DriverManager.getConnection(url, user, password);
        System.out.println(connection);
    }

不必显式的注册驱动了，因为在 DriverManager 的源码中已经存在静态代码块，实现了驱动的注册

方式五

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
// 方式五：将数据库连接所需要的 4 个基本信息声明在配置文件中，通过读取配置文件的方式，获取链接
    @Test
    public void getConnection5() throws Exception{

        //1. 读取配置文件中的 4 个基本信息
        InputStream iS = ConnectionTest.class.getClassLoader().getResourceAsStream("jdbc.properties");

        Properties pros = new Properties();
        pros.load(iS);

        String user = pros.getProperty("user");
        String url = pros.getProperty("url");
        String password = pros.getProperty("password");
        String driverClass = pros.getProperty("driverClass");

        //2.加载驱动
        Class.forName(driverClass);

        //3. 获取连接
        Connection conn = DriverManager.getConnection(url, user, password);
        System.out.println(conn);
    }

其中，properties 配置文件在 resources 目录下【jdbc.properties]

1
2
3
4
user=root
password=C020611.
url=jdbc:mysql://localhost:3306/test?useUnicode=true&characterEncoding=utf-8
driverClass=com.mysql.cj.jdbc.Driver

说明：使用配置文件的方式保存配置信息，在代码中加载配置文件

使用配置文件的好处：

  • 实现了代码和数据的分离，如果需要修改配置信息，直接在配置文件中修改，不需要深入代码
  • 如果修改了配置信息，省去重新编译的过程

使用 PreparedStatement 实现 CRUD 操作

操作和访问数据库

  • 数据库连接被用于向数据库服务器发送命令和 SQL 语句，并接受数据库服务器返回的结果。其实一个数据库连接就是一个 Socket 连接
  • 在 Java.sql 包中有三个接口分别定义了对数据库的调用的不同方式
    • Statement：用于执行静态 SQL 语句并返回它所生成结果的对象
    • PreparedStatement ： SQL 语句被预编译并存储在此对象 中，可以使用次对象多次高效地执行该语句
    • CallableStatement ：用于执行 SQL 存储过程

使用 Statement 操作数据库的弊端

  • 通过调用 Connection 对象的 createStatement（）方法创建对象。该对象用于执行静态的 SQL 语句，并且返回执行结果

  • Statement 接口中定义类下列方法用于执行 SQL语句

    1
    2
    int excuteUpdate(String sql)：执行更新操作INSERT、UPDATE、DELETE
    ResultSet executeQuery(String sql)：执行查询操作SELECT

  • 但是使用 Statement 操作数据表存在弊端

    • 问题一：存在拼串操作，繁琐
    • 问题二：**存在 SQL 注入问题 **

  • SQL 注入是利用某些系统没有对用户输入的数据进行充分的检查，而在用户输入数据中注入非法的 SQL 语句段
    或命令(如：SELECT user, password FROM user_table WHERE user=’a’ OR 1 = ‘ AND password = ‘ OR ‘1’ =
    ‘1’) ，从而利用系统的 SQL 引擎完成恶意行为的做法。

  • 对于 Java 而言，要防范 SQL 注入，只要用 PreparedStatement(从Statement扩展而来) 取代 Statement 就可
    以了。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
public class StatementTest {
// 使用Statement的弊端：需要拼写sql语句，并且存在SQL注入的问题
    @Test
    public void testLogin() {
        Scanner scan = new Scanner(System.in);
        System.out.print("用户名：");
        String userName = scan.nextLine();
        System.out.print("密 码：");
        String password = scan.nextLine();
        // SELECT user,password FROM user_table WHERE USER = '1' or ' AND PASSWORD ='='1' or '1' = '1';
        String sql = "SELECT user,password FROM user_table WHERE USER = '" + userName+ "' AND PASSWORD = '" + password+ "'";
        User user = get(sql, User.class);
        if (user != null) {
            System.out.println("登陆成功!");
        } else {
            System.out.println("用户名或密码错误！");
   	}
} 
    
	// 使用Statement实现对数据表的查询操作
    public <T> T get(String sql, Class<T> clazz) {
        T t = null;
        Connection conn = null;
        Statement st = null;
        ResultSet rs = null;
        try {
            // 1.加载配置文件
            InputStream is =
            StatementTest.class.getClassLoader().getResourceAsStream("jdbc.properties");
            Properties pros = new Properties();
            pros.load(is);
            // 2.读取配置信息
            String user = pros.getProperty("user");
            String password = pros.getProperty("password");
            String url = pros.getProperty("url");
            String driverClass = pros.getProperty("driverClass");
            // 3.加载驱动
            Class.forName(driverClass);
            // 4.获取连接
            conn = DriverManager.getConnection(url, user, password);
            st = conn.createStatement();
            rs = st.executeQuery(sql);
            // 获取结果集的元数据
            ResultSetMetaData rsmd = rs.getMetaData();
            // 获取结果集的列数
            int columnCount = rsmd.getColumnCount();
            if (rs.next()) {
                t = clazz.newInstance();
                for (int i = 0; i < columnCount; i++) {
                // //1. 获取列的名称
                    // String columnName = rsmd.getColumnName(i+1);
                    // 1. 获取列的别名
                    String columnName = rsmd.getColumnLabel(i + 1);
                    // 2. 根据列名获取对应数据表中的数据
                    Object columnVal = rs.getObject(columnName);
                    // 3. 将数据表中得到的数据，封装进对象
                    Field field = clazz.getDeclaredField(columnName);
                    field.setAccessible(true);
                    field.set(t, columnVal);
                  } return t;
              }
          } catch (Exception e) {
              e.printStackTrace();
          } finally {
              // 关闭资源
              if (rs != null) {
                  try {
                    rs.close();
                 } catch (SQLException e) {
                     e.printStackTrace();
                 }
              } 
            if (st != null) {
                try {
                    st.close();
                } catch (SQLException e) {
                    e.printStackTrace();
                }
               }
            if (conn != null) {
                try {
                    conn.close();
                } catch (SQLException e) {
                    e.printStackTrace();
                }
            }
        }
        
        return null;
	}
}

PreparedStatement 的使用

PreparedStatement 介绍

  • 可以通过调用 Connection 对象的 preparedStatement（String sql) 方法来获取 PreparedStatement 对象
  • PreparedStatement 接口是 Statement 的子接口，它表示一条预编译过的 SQL 语句
  • PreparedStatement 对象所代表的 SQL 语句中的参数用 （？）表示，调用 PreparedStatement 对象的 setXxx()方法来设置这些参数，setXxx()方法有两个参数。第一个参数是要设置的 SQL 语句中参数的索引（从 1 开始），第二个是设置的 SQL 语句中的参数的值

PreparedStatement VS Statement

  • 代码的可读性和可维护性
  • PreparedStatement 能最大可能提高性能
    • DBServer会对预编译语句提供性能优化。因为预编译语句有可能被重复调用，所以语句在被DBServer的
      编译器编译后的执行代码被缓存下来，那么下次调用时只要是相同的预编译语句就不需要编译，只要将参数直接传入编译过的语句执行代码中就会得到执行。
    • 在statement语句中,即使是相同操作但因为数据内容不一样,所以整个语句本身不能匹配,没有缓存语句的意
      义.事实是没有数据库会对普通语句编译后的执行代码缓存。这样每执行一次都要对传入的语句编译一次。
      (语法检查，语义检查，翻译成二进制命令，缓存)
  • PreparedStatement 可以防止 SQL 注入

Java 与 SQL 对应数据类型转化

Java类型 SQL类型
boolean BIT
byte TINYINT
short SMALLINT
int INTEGER
long BIGINT
String CHAR,VARCHAR,LONGVARCHAR
byte array BINARY , VAR BINARY
java.sql.Date DATE
java.sql.Time TIME
java.sql.Timestamp TIMESTAMP

使用 PreparedStatement 实现增、删、改操作

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
/**
     * 向 customers 表中添加一条记录
     */
    @Test
    public void testInsert(){
        PreparedStatement pS = null;
        Connection conn = null;
        try{
            //1. 加载配置文件
            InputStream iS = ClassLoader.getSystemClassLoader().getResourceAsStream("jdbc.properties");
            Properties pros = new Properties();
            pros.load(iS);

            String url = pros.getProperty("url");
            String user = pros.getProperty("user");
            String password = pros.getProperty("password");
            String driverClass = pros.getProperty("driverClass");

            //2. 加载驱动
            Class.forName(driverClass);

            //3. 获取连接
            conn = DriverManager.getConnection(url, user, password);

            //4. 预编译 SQL 语句，返回 preparedStatement 的实例
            String sql = "insert into customers(name,email,birth)values(?,?,?)"; //? 占位符
            pS = conn.prepareStatement(sql);

            //5. 填充占位符
            pS.setString(1,"csq");
            pS.setString(2,"cs7eric@outlook.com");
            SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd");
            Date date = sdf.parse("2002-06-11");
            pS.setDate(3,new java.sql.Date(date.getTime()));

            //6. 执行操作
            pS.execute();

        }catch (Exception e){
            e.printStackTrace();
        } finally {
            //7. 资源关闭
            try {
                if (pS != null) {
                    pS.close();
                }
            } catch (Exception e){
                e.printStackTrace();
            }
            try {
                if (conn != null) {
                    conn.close();
                }
            }catch (Exception e){
                e.printStackTrace();
            }
        }
    }

封装数据库连接和关闭操作

获取数据库的连接
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
/**
     * 获取数据库的连接
     * @return 数据库的连接
     */
    public static Connection getConnection(){

        Connection conn = null;
        InputStream iS;

        try {
            iS = ClassLoader.getSystemClassLoader().getResourceAsStream("jdbc.properties");
            Properties pros = new Properties();

            pros.load(iS);

            String url = pros.getProperty("url");
            String user = pros.getProperty("user");
            String password = pros.getProperty("password");
            String driverClass = pros.getProperty("driverClass");

            Class.forName(driverClass);

            conn = DriverManager.getConnection(url, user, password);
        } catch (Exception e) {
            e.printStackTrace();
        }
        return conn;
    }
关闭数据库连接和Statement 的操作
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
/**
     * 关闭数据库连接和 Statement 的操作
     * @param conn 数据库连接
     * @param pS preparedStatement
     */
    public static void closeResource(Connection conn, Statement pS){
        try {
            if(pS != null){
                pS.close();
            }
        } catch (SQLException e) {
            e.printStackTrace();
        }
        try {
            if(conn != null){
                conn.close();
            }
        } catch (SQLException e) {
            e.printStackTrace();
        }
    }
通用的增删改操作
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
/**
    * 通用的增删改操作
    * @param sql 预编译的 sql 语句
    * @param args 填充的占位符 元素
    */
   public void update(String sql,Object ...args){

       Connection conn = null;
       PreparedStatement pS = null;
       try {
           //1. 获取数据库的链接
           conn = JDBCUtils.getConnection();
           //2. 通过 SQL 预编译，获得 preparedStatement  的 实例
           pS = conn.prepareStatement(sql);
           //3. 填充占位符
           for (int i = 0; i < args.length; i++) {
               pS.setObject(i + 1,args[i]);
           }

           //4. 执行
           pS.execute();
       } catch (SQLException e) {
           e.printStackTrace();
       } finally {
           JDBCUtils.closeResource(conn,pS);
       }
   }






@Test
   public void testCommonUpdate(){
       String sql = "update `order` set order_name = ? where order_id = ?";
       update(sql,"DD","4");

说明：使用 PreparedStatement 实现的查询操作可以替换 Statement 实现的查询操作，解决 Statement 拼串和 SQL 注入 问题

ResultSet 与 ResultSetMetaData

ResultSet

  • 查询需要调用 PreparedStatement 的 executeQuery() 方法，查询结果是一个 ResultSet 对象

  • ResultSet 对象以逻辑表格的形式封装类执行数据库操作的结果集，ResultSet 接口由数据库厂商提供实现

  • ResultSet 返回的实际上就是一张数据表。有一个指针指向数据表的第一条记录的前面

  • ResultSet 对象维护了指向当前数据行的游标，初始的时候，游标在第一行之前，可以通过 ResultSet 对象的 next() 方法移动到下一行。调用 next() 方法检测下一行是否有效。若有效，该方法返回 true,且指针下移。相当于 Iterator 对象的 hasNext() 和 next（） 方法的结合体

  • 当指针指向一行时，可以通过调用 getXxx(int index) 或 getXxx（int columnName） 获取每一列的值

    • 例如：getInt(1),getString(“name”)
    • **注意：Java 与 数据库交互涉及到的相关 Java API 的索引都从 1 开始 **

  • ResultSet 接口的常用方法

    • boolean next()
    • getString()
    • …

ResultSetMetaData

  • 可用于获取 ResultSet 对象中列的类型和属性信息的对象
  • ResultSetMetaData meta = rs.getMetaData();
    • getColumnName(int column):获取指定列的名称
    • getColumnLabel(int column):获取指定列的别名
    • getColumnCount():返回当前 ResultSet 对象中的列数
    • getColumnTypeName(int column):检索指定列的数据库特定的类型名称
    • getColumnDisplaySize(int column):指示指定列的最大标准宽度，以字符为单位
    • **isNullable(int column)**： 指示指定列中的值是否可以为 null
    • isAutoIncrement(int column):指定是否自动为指定列进行编号，这样这些列仍然是只读的

问题一：得到结果集后，如何知道该结果集中有哪些序列？列名是什么？

需要使用一个描述 ResultSet 的对象，即 ResultSetMetaData

问题二：关于 ResultSetMetaData

  1. 如何获取 ResultSetMetaData：调用 ResultSet 的 getMetaData() 方法即可
  2. 获取 ResultSet 中有多少列：调用 ResultSetMetaData 的getColumnCount() 方法
  3. 获取 ResultSet 每一列的列的别名是什么：调用 ResultSetMetaData 的 getColumnLabel() 方法

相关代码

针对不同表的通用的查询操作返回多条数据
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
@Test
   public void testGetForList(){

       String sql = "select id,name,email,birth from customers where id < ?";
       List<Customer> list = getForList(Customer.class, sql, 12);
       list.forEach(System.out::println);

   }

   /**
    * 针对不同表的通用的查询操作
    * @param clazz
    * @param sql
    * @param args
    * @param <T>
    * @return
    */
   public <T> List<T> getForList(Class<T> clazz,String sql,Object ...args){

       Connection conn = null;
       PreparedStatement ps = null;
       ResultSet rs = null;
       try {
           conn = JDBCUtils.getConnection();
           ps = conn.prepareStatement(sql);
           for (int i = 0; i < args.length; i++) {
               ps.setObject(i + 1, args[i]);
           }

           rs = ps.executeQuery();
           ResultSetMetaData rsmd = rs.getMetaData();
           int columnCount = rsmd.getColumnCount();
           ArrayList<T> list = new ArrayList<>();
           while (rs.next()) {
               T t = clazz.newInstance();
               for (int i = 0; i < columnCount; i++) {
                   Object columnValue = rs.getObject(i + 1);
                   String columnLabel = rsmd.getColumnLabel(i + 1);

                   Field field = clazz.getDeclaredField(columnLabel);
                   field.setAccessible(true);
                   field.set(t, columnValue);
               }
               list.add(t);
           }
           return list;
       } catch (Exception e) {
           e.printStackTrace();
       } finally {
           JDBCUtils.closeResource(conn,ps,rs);
       }
       return null;
   }
针对于不同的表的通用的查询操作，返回表中的一条记录
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
@Test
   public void testGetInstance() throws Exception {
       String sql = "select order_id orderId,order_name orderName,order_date orderDate from `order` where order_name = ?";
       Order order = getInstance(Order.class, sql, "DD");
       System.out.println(order);
       String sql1 = "select id,name,email,birth from customers where name = ?";
       Customer customer = getInstance(Customer.class, sql1, "csq");
       System.out.println(customer);
   }

   /**
    * 针对不同的表的通用的查询操作，返回表中的一条数据
    * @param clazz
    * @param sql
    * @param args
    * @param <T>
    * @return
    * @throws Exception
    */
   public <T> T getInstance(Class<T> clazz,String sql,Object ...args) throws Exception {

       Connection conn = null;
       PreparedStatement ps = null;
       ResultSet rs = null;
       try {
           //获取链接
           conn = JDBCUtils.getConnection();

           //预编译  SQL 语句，获得  ps 对象
           ps = conn.prepareStatement(sql);

           //填充占位符
           for (int i = 0; i < args.length; i++) {
               ps.setObject(i + 1, args[i]);
           }

           //获取查询结果集
           rs = ps.executeQuery();

           //获取结果集的元数据
           ResultSetMetaData rsmt = rs.getMetaData();

           //获取列数
           int columnCount = rsmt.getColumnCount();
           if(rs.next()) {
               T t = clazz.newInstance();

               //处理结果集中的一行数据中的每一列
               for (int i = 0; i < columnCount; i++) {
                   //获取列值
                   Object columnValue = rs.getObject(i + 1);

                   //获取每一列的列名
                   String columnLabel = rsmt.getColumnLabel(i + 1);

                   //给 t 对象指定的 columnLabel 属性赋值为 columnValue:通过 反射
                   Field field = clazz.getDeclaredField(columnLabel);
                   field.setAccessible(true);
                   field.set(t,columnValue);
               }
               return t;
           }
       } catch (SQLException e) {
           e.printStackTrace();
       } finally {
           JDBCUtils.closeResource(conn,ps,rs);
       }
       return null;
   }
通用的针对于 order 表的查询操作
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
	@Test
    public void testOrderForQuery() throws Exception {
        String sql = "select order_id orderId,order_name orderName,order_date orderDate from `order` where order_id = ?";
        Order order = orderForQuery(sql, 1);
        System.out.println(order);
    }

    public Order orderForQuery(String sql, Object ...args) throws Exception {
        Connection conn = null;
        PreparedStatement ps = null;
        ResultSet resultSet = null;
        try {
            //获取连接
            conn = JDBCUtils.getConnection();
            //预编译 SQL 语句，获取 PreparedStatement 的实例对象
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < args.length; i++) {
                ps.setObject(i + 1, args[i]);
            }

            // 通过 ps 获得 查询的 结果集 ResultSet
            resultSet = ps.executeQuery();

            //获取元数据
            ResultSetMetaData resultSetMetaData = resultSet.getMetaData();

            //获取列数
            int columnCount = resultSetMetaData.getColumnCount();

            if(resultSet.next()){
                Order order = new Order();
                for (int i = 0; i < columnCount; i++) {
                    //获取每个列的列值
                    Object columnValue = resultSet.getObject(i + 1);
                    //通过 ResultSetMetaData
                    //获取列的列名：resultSetMetaData.getColumnName()
                    //获取列的别名：resultSetMetaData.getColumnLabel()
                    String columnLabel = resultSetMetaData.getColumnLabel(i + 1);

                    //通过反射，将对象指定名 columnLabel 的属性赋值为 columnValue
                    Field field = Order.class.getDeclaredField(columnLabel);
                    field.setAccessible(true);
                    field.set(order,columnValue);
                }
                return order;
            }
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,ps,resultSet);
        }
        return null;
    }
}
针对于customers 表的通用查询操作
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
@Test
   public void testQueryForCustomer() throws Exception {

       String sql = "select id,name,birth,email from customers where id = ?";
       Customer customer = queryForCustomers(sql,13);
       System.out.println(customer);
   }
   public Customer queryForCustomers(String sql,Object ...args) throws Exception {

       Connection conn = null;
       PreparedStatement ps = null;
       ResultSet resultSet = null;
       try {
           conn = JDBCUtils.getConnection();

           ps = conn.prepareStatement(sql);

           for (int i = 0; i < args.length; i++) {
               ps.setObject(i + 1, args[i]);
           }

           resultSet = ps.executeQuery();

           //获取结果集的元数据：ResultSetMetaData
           ResultSetMetaData resultSetMetaData = resultSet.getMetaData();

           //通过 ResultSetMetaData 获取结果集中的 列数
           int columnCount = resultSetMetaData.getColumnCount();

           if(resultSet.next()){

               Customer customer = new Customer();
               //处理结果集  一行数据  的  每一个列
               for (int i = 0; i < columnCount; i++) {
                   //获取列值
                   Object columnValue = resultSet.getObject(i + 1);

                   //获取每个列的列名
                   String columnName = resultSetMetaData.getColumnName(i + 1);

                   //给 customer 对象 指定的 columnName属性，赋值为 columnValue  : 通过反射
                   Field field = Customer.class.getDeclaredField(columnName);
                   field.setAccessible(true);
                   field.set(customer,columnValue);
               }
               return customer;
           }
       } catch (SQLException e) {
           e.printStackTrace();
       } finally {
           JDBCUtils.closeResource(conn,ps,resultSet);
       }
       return null;
   }

资源的释放

  • 释放 ResultSet，Statement，Connection
  • 数据库连接（Connection）是非常稀有的资源，用完必须马上释放，如果 Connection 不能及时正确的关闭，将导致系统宕机。Connectiion 的使用原则是 尽量晚创建，尽量早释放
  • 可以在 finally 中关闭，保证即使其他代码异常，资源也一定能被关闭

JDBC API 小结

  • 两种思想
    • 面向接口编程的思想
    • ORM思想（object relational mapping）
      • 一个数据表对应一个 Java 类
      • 表中的 一条记录对应 Java 类的一个对象
      • 表中的一个字段对应Java 的一个属性
  • 两种技术
    • JDBC 结果集的元数据 ResultSetMetaData
      • 获取列数：getColumnCount（）
      • 获取列的别名：getColumnLabel（）
    • 通过反射，创建指定类的对象，获取指定的属性并赋值

操作 BLOB 类型字段

MySQL BLOB 类型

  • MySQL 中，BLOB 是一个二进制大型对象，是一个可以存储大量数据的容器，他能容纳不同大小的数据
  • 插入 BLOB 类型的三个月还有必须使用 PreparedStatement ，因为 BLOB 类型的数据无法使用字符串拼接写的
  • MySQL 的四种 BLOB 类型（除了在存储的最大信息量上不同外，他们是等同的）
    • TinyBlob 最大 255
    • Blob 最大 65K
    • MediumBlob 最大 16 M
    • LongBlob 最大 4G
  • 实际使用中根据需要存入的数据大小定义不同的 BLOB 类型
  • 需要注意的是：如果存储的文件过大，数据库的性能会下降
  • 如果在指定了相关的 BLOB 类型以后，还报错： xxx too large ,那么在 MySQL 的安装目录下，找 my.ini 文件加上如下的配置参数 max_allowed_packet=16M,同时注意：修改了 my.ini 文件之后，需要重新启动 MySQL 服务

向数据表中插入大数据类型

代码示例

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
package com.cs7eric.blob;

import com.cs7eric.preparedstatement.bean.Customer;
import com.cs7eric.preparedstatement.util.JDBCUtils;
import org.junit.Test;

import java.io.*;
import java.sql.*;

/**
 * @author C77eric
 * @version 1.0
 */
public class BlobTest {

    @Test
    public void testInsert() throws Exception {
        Connection conn = JDBCUtils.getConnection();
        String sql = "insert into customers(name,email,birth,photo)values(?,?,?,?)";
        PreparedStatement ps = conn.prepareStatement(sql);

        ps.setObject(1,"马云");
        ps.setObject(2,"mayun@163.com");
        ps.setObject(3,"1960-02-04");
        FileInputStream  is = new FileInputStream(new File("src/BlobTest.png"));
        ps.setObject(4,is);
        ps.execute();
        JDBCUtils.closeResource(conn,ps);
    }

    @Test
    public void testQuery(){

        Connection conn = null;
        PreparedStatement ps = null;
        ResultSet rs = null;
        InputStream is = null;
        FileOutputStream fos = null;
        try {
            conn = JDBCUtils.getConnection();
            String sql = "select id,name,email,birth,photo from customers where id = ?";
            ps = conn.prepareStatement(sql);
            ps.setInt(1,22);
            rs = ps.executeQuery();

            if(rs.next()){
                int id = rs.getInt("id");
                String name = rs.getString("name");
                String email = rs.getString("email");
                Date birth = rs.getDate("birth");

                Customer customer = new Customer(id, name, email, birth);
                System.out.println(customer);

                Blob photo = rs.getBlob("photo");
                is = photo.getBinaryStream();
                byte[] buffer = new byte[1024];
                fos = new FileOutputStream("1.png");
                int len;
                while((len = is.read(buffer)) != -1){
                    fos.write(buffer, 0, len);
                }
            }
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,ps,rs);
            if(is != null){
                try {
                    is.close();
                } catch (IOException e) {
                    e.printStackTrace();
                }
            }
            if(fos != null){
                try {
                    fos.close();
                } catch (IOException e) {
                    e.printStackTrace();
                }
            }
        }
    }
}

向数据表中插入大数据类型

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
//获取连接
Connection conn = JDBCUtils.getConnection();

String sql = "insert into customers(name,email,birth,photo)values(?,?,?,?)";
PreparedStatement ps = conn.prepareStatement(sql);

// 填充占位符
ps.setString(1, "徐海强");
ps.setString(2, "xhq@126.com");
ps.setDate(3, new Date(new java.util.Date().getTime()));

// 操作Blob类型的变量
FileInputStream fis = new FileInputStream("xhq.png");
ps.setBlob(4, fis);

//执行
ps.execute();
fis.close();
JDBCUtils.closeResource(conn, ps);

修改数据表中的 Blob类型字段

1
2
3
4
5
6
7
8
9
10
11
12
13
14
Connection conn = JDBCUtils.getConnection();
String sql = "update customers set photo = ? where id = ?";
PreparedStatement ps = conn.prepareStatement(sql);

// 填充占位符
// 操作Blob类型的变量
FileInputStream fis = new FileInputStream("coffee.png");
ps.setBlob(1, fis);
ps.setInt(2, 25);

ps.execute();

fis.close();
JDBCUtils.closeResource(conn, ps);

从数据表中读取大数据类型

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
String sql = "SELECT id, name, email, birth, photo FROM customer WHERE id = ?";
conn = getConnection();
ps = conn.prepareStatement(sql);

ps.setInt(1, 8);
rs = ps.executeQuery();
if(rs.next()){
    Integer id = rs.getInt(1);
    String name = rs.getString(2);
    String email = rs.getString(3);
    Date birth = rs.getDate(4);
    Customer cust = new Customer(id, name, email, birth);
    System.out.println(cust);
    //读取Blob类型的字段
    Blob photo = rs.getBlob(5);
    InputStream is = photo.getBinaryStream();
    OutputStream os = new FileOutputStream("c.jpg");
    byte [] buffer = new byte[1024];
    int len = 0;
    while((len = is.read(buffer)) != -1){
        os.write(buffer, 0, len);
	} 
    JDBCUtils.closeResource(conn, ps, rs);
	if(is != null){
		is.close();
	} 
    if(os != null){
	os.close();
}
}

批量插入

批量执行 SQL 语句

当需要成批插入或者更新记录，可以采用 Java 的批量更新机制，这一机制允许多条语句一次性提交给数据库批量处理。通常情况下比单独提交更有效率

JDBC 批量处理语句包括以下三个方法：

  • addBatch(String) :添加需要批量处理的 SQL 语句或是参数
  • executeBatch(): 批量处理语句
  • clearBatch(): 清空缓存的数据

通常情况下我们会遇到两种批量执行 SQL 语句的情况

  • 多条 SQL 语句的批量处理
  • 一个 SQL 语句的批量传参

高效的批量插入

举例：向数据表中插入 20000 条数据

  • 数据库中提供一个 goods 表。创建如下
1
2
3
4
CREATE TABLE goods(
id INT PRIMARY KEY AUTO_INCREMENT,
NAME VARCHAR(20)
);

实现层次一：使用 Statement

1
2
3
4
5
6
Connection conn = JDBCUtils.getConnection();
Statement st = conn.createStatement();
for(int i = 1;i <= 20000;i++){
    String sql = "insert into goods(name) values('name_' + "+ i +")";
    st.executeUpdate(sql);
}

实现层次二：使用 PreparedStatement

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
//批量插入的方式二：使用 preparedStatement
    @Test
    public void testInsert1(){
        Connection conn = null;
        PreparedStatement ps = null;
        try {
            long start = System.currentTimeMillis();
            conn = JDBCUtils.getConnection();
            String sql = "insert into goods(name)values(?)";
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < 20000; i++) {
                ps.setObject(1,"name_" + i);

                ps.execute();
            }

            long end = System.currentTimeMillis();
            System.out.println("耗时：" + (end - start));
        } catch (Exception e) {
            e.printStackTrace();
        } finally {

            JDBCUtils.closeResource(conn,ps);
        }
    }

实现层次三：批处理

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
//批量插入的方式三：

    /**
     * addBatch()   executeBatch()   clearBatch()
     * MySQL 服务器是默认关闭批处理的，我们需要通过一个参数，让 MySQL 开启 批处理的支持
     *                           ?rewriteBatchedStatement=true   写在配置文件后面
     * 使用更新过的 MySQL 驱动
     */
    @Test
    public void testInsert2(){
        Connection conn = null;
        PreparedStatement ps = null;
        try {
            long start = System.currentTimeMillis();
            conn = JDBCUtils.getConnection();
            String sql = "insert into goods(name)values(?)";
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < 1000000; i++) {
                ps.setObject(1,"name_" + i);

                //1. 攒 sql
                ps.addBatch();
                if(i % 500 == 0){
                    //2. 执行 sql
                    ps.executeBatch();

                    //3. 清空 batch
                    ps.clearBatch();
                }
            }

            long end = System.currentTimeMillis();
            System.out.println("耗时：" + (end - start));
        } catch (Exception e) {
            e.printStackTrace();
        } finally {

            JDBCUtils.closeResource(conn,ps);
        }
    }

实现层次四：设置连接 不允许自动提交数据

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
/**
     * 层次四：在层次三的基础上操作
     * 使用 Connection 的  setAutoCommit(false) / commit()
     */
    @Test
    public void testInsert3(){
        Connection conn = null;
        PreparedStatement ps = null;
        try {
            long start = System.currentTimeMillis();
            conn = JDBCUtils.getConnection();

            //1. 设置为 不自动提交
            conn.setAutoCommit(false);
            String sql = "insert into goods(name)values(?)";
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < 1000000; i++) {
                ps.setObject(1,"name_" + i);

                //1. 攒 sql
                ps.addBatch();
                if(i % 500 == 0){
                    //2. 执行 sql
                    ps.executeBatch();

                    //3. 清空 batch
                    ps.clearBatch();
                }
            }

            //2. 提交数据
            conn.commit();

            long end = System.currentTimeMillis();
            System.out.println("耗时：" + (end - start));
        } catch (Exception e) {
            e.printStackTrace();
        } finally {

            JDBCUtils.closeResource(conn,ps);
        }
    }

数据库事务

数据库事务介绍

  • 事务：一组逻辑操作单元，使数据从一种状态变换到另一种状态
  • 事务处理（事务操作）：保证所有事务都作为一个工作单元来执行，即使出了故障，都不能改变这种执行方式。当在一个事务中执行多个操作时，要么所有的事务都被 提交（commit），那么这些修改就永久地保存下来，要么数据库管理系统将放弃所作的所有修改，整个事务回滚（rollback)到最初状态。
  • 为确保数据库中数据的一致性，数据的操纵应当是离散的成组的逻辑单元：当他全部完成时，数据的一致性可以保持，而当这个单元中的一部分操作失败，整个事务应当全部视为错误，所有从起始点以后的操作应全部回退到最开始状态

JDBC 事务处理

  • 数据一旦提交，就不可回滚
  • 数据什么时候意味着提交？
    • 当一个连接对象被创建时，默认情况下是自动提交事务：每执行一个 SQL 语句，如果执行成功，就会向数据库自动提交，而不能自动回滚
    • 关闭数据库连接，数据就会自动的提交。如果多个操作，每个操作使用的是自己单独的连接，则无法保证事务。即同一个事务的多个操作必须在同一个连接下
  • JDBC 程序中为了让多个 SQL 语句作为一个事务执行
    • 调用 Connection 对象的 setAutoCommit(false)； 以取消自动提交事务
    • 在所有的 SQL 语句都执行成功后，调用 commit(); 方法提交事务
    • 在出现异常时，调用 rollback(); 方法回滚事务

若此时 Connection 没有被关闭，还可能被重复使用，则需要恢复其自动提交状态

setAutoCommit(true) 尤其是在使用 数据库连接池技术时，执行 close（） 方法前，建议恢复自动提交状态

【案例：用户 AA 向 用户 BB 转账 100】

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
package com.cs7eric.transaction;

/**
 * @author C77eric
 * @version 1.0
 */


import com.cs7eric.preparedstatement.util.JDBCUtils;
import org.junit.Test;

import java.lang.reflect.Field;
import java.sql.*;

/**
 * 那些操作会导致数据的自动提交
 * > DDL 操作一旦执行，都会自动提交
 *       >  set autocommit = false 对 DDL 无效
 * > DML 默认情况下，一旦执行，就会自动提交
 *       > 我们可以通过 set  autocommit = false; 的方式取消 DML 操作的自动提交
 */
public class TransactionTest {
    //*********************** 未考虑数据库事务情况下的转账操作 ************************
    /**
     * 针对 user_table 来说
     * AA 向 BB 转账 100
     *
     * update user_table set balance = balance - 100 where user = 'AA';
     * update user_table set balance = balance + 100 where user = 'BB';
     */
    @Test
    public void testUpdate(){
        String sql = "update user_table set balance = balance - 100 where user = ?";
        update(sql,"AA");

        //模拟网络故障
        System.out.println(10/0);

        String sql1 = "update user_table set balance = balance + 100 where user = ?";
        update(sql1,"BB");
    }

    //通用的 update 操作
    public int update(String sql,Object ...args){

        Connection conn = null;
        PreparedStatement ps = null;
        try {
            conn = JDBCUtils.getConnection();

            ps = conn.prepareStatement(sql);
            for (int i = 0; i < args.length; i++) {
                ps.setObject(i + 1,args[i]);
            }
            return ps.executeUpdate();
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,ps);
        }
        return 0;
    }

    // ***************** 考虑数据库事务后的转账操作 *********************
    @Test
    public void testUpdateWithTransaction(){
        Connection conn = null;
        try {
            conn = JDBCUtils.getConnection();
            System.out.println(conn.getAutoCommit());

            //1. 取消 数据的自动提交
            conn.setAutoCommit(false);

            String sql = "update user_table set balance = balance - 100 where user = ?";
            update2(conn,sql,"AA");

            //模拟网络故障
            //System.out.println(10/0);

            String sql1 = "update user_table set balance = balance + 100 where user = ?";
            update2(conn,sql1,"BB");

            System.out.println("转账成功");

            //2.提交数据
            conn.commit();
        } catch (SQLException e) {
            e.printStackTrace();
            //3. 回滚数据
            try {
                conn.rollback();
            } catch (SQLException ex) {
                ex.printStackTrace();
            }

        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }

    public int update2(Connection conn,String sql,Object ...args){

        PreparedStatement ps = null;
        try {
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < args.length; i++) {
                ps.setObject(i + 1,args[i]);
            }
            return ps.executeUpdate();
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            try {
                conn.setAutoCommit(true);
            } catch (SQLException e) {
                e.printStackTrace();
            }
            JDBCUtils.closeResource(null,null);
        }
        return 0;
    }

    @Test
    public void testTransactionSelect() throws SQLException {

        Connection conn = JDBCUtils.getConnection();

        //获取当前连接的隔离级别
        System.out.println(conn.getTransactionIsolation());

        //设置数据库的隔离级别
        conn.setTransactionIsolation(Connection.TRANSACTION_READ_COMMITTED);

        //取消自动提交数据
        conn.setAutoCommit(false);

        String sql = "select user,password,balance from user_table where user = ?";
        User user = getInstance(conn, sql, User.class, "AA");
        System.out.println(user);

    }


    public <T> T getInstance(Connection conn,String sql,Class<T> clazz,Object ...args){

        PreparedStatement ps = null;
        ResultSet rs = null;
        try {
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < args.length; i++) {
                ps.setObject(i + 1,args[i]);
            }

            rs = ps.executeQuery();
            ResultSetMetaData  rsmd = rs.getMetaData();
            int columnCount = rsmd.getColumnCount();
            if(rs.next()) {
                T t = clazz.newInstance();
                for (int i = 0; i < columnCount; i++) {
                    Object columnValue = rs.getObject(i + 1);
                    String columnLabel = rsmd.getColumnLabel(i + 1);

                    Field field = clazz.getDeclaredField(columnLabel);
                    field.setAccessible(true);
                    field.set(t,columnValue);
                }
                return t;
            }
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(null,ps,rs);
        }
        return null;
    }
}

事务的 ACID 属性

  • 原子性（Atomicity）：原子性是指事务是一个不可分割的工作单位，事务中的操作要么都发生，要么都不发生
  • 一致性（Consistency）：事务必须使数据库从一个一致性状态变换到另一个一致性状态
  • 隔离性（Isolation）：事务的隔离性是指一个事务的执行不能被其他事务干扰即一个事务内部的操作及使用的数据对并发的其他事务是隔离的，并发执行的各个事务之间不能相互干扰
  • 持久性（Durability）：持久性是指一个事务一旦被提交，他对数据库中的数据的改变就是永久性的，接下来的其他操作和数据库故障不应该对其有任何影响

数据库的并发问题

  • 对于同时运行的多个事务, 当这些事务访问数据库中相同的数据时, 如果没有采取必要的隔离机制, 就会导致各种并发问题:
    • 脏读: 对于两个事务 T1, T2, T1 读取了已经被 T2 更新但还没有被提交的字段。之后, 若 T2 回滚, T1读取的内容就是临时且无效的。
    • 不可重复读: 对于两个事务T1, T2, T1 读取了一个字段, 然后 T2 更新了该字段。之后, T1再次读取同一个字段, 值就不同了。
    • 幻读: 对于两个事务T1, T2, T1 从一个表中读取了一个字段, 然后 T2 在该表中插入了一些新的行。之后, 如果 T1 再次读取同一个表, 就会多出几行。
  • 数据库事务的隔离性: 数据库系统必须具有隔离并发运行各个事务的能力, 使它们不会相互影响, 避免各种并发问题。
  • 一个事务与其他事务隔离的程度称为隔离级别。数据库规定了多种事务隔离级别, 不同隔离级别对应不同的干扰程度, 隔离级别越高, 数据一致性就越好, 但并发性越弱。

四种隔离级别

  • 数据库提供的四种事务隔离级别

  • Oracle 支持的 2 种事务隔离级别：READ COMMITED, SERIALIZABLE。 Oracle 默认的事务隔离级别为:READ COMMITED 。

  • Mysql 支持 4 种事务隔离级别。Mysql 默认的事务隔离级别为: REPEATABLE READ****。

在 MySQL 中设置隔离级别

  • 每启动一个 mysql 程序, 就会获得一个单独的数据库连接. 每个数据库连接都有一个全局变量 @@tx_isolation, 表示当前的事务隔离级别。

  • 查看当前的隔离级别: 

    1
    SELECT @@tx_isolation;

  • 设置当前 mySQL 连接的隔离级别: 

    1
    set  transaction isolation level read committed;

  • 设置数据库系统的全局的隔离级别:

    1
    set global transaction isolation level read committed;

  • 补充操作：

    • 创建mysql数据库用户：

      1
      create user tom identified by 'abc123';

    • 授予权限

      1
      2
      3
      4
      5
      6
      #授予通过网络方式登录的tom用户，对所有库所有表的全部权限，密码设为abc123.
      grant all privileges on *.* to tom@'%'  identified by 'abc123'; 

       #给tom用户使用本地命令行方式，授予atguigudb这个库下的所有表的插删改查的权限。
      grant select,insert,delete,update on atguigudb.* to tom@localhost identified by 'abc123';

DAO 及相关实现类

  • DAO ：Data Access Object 访问数据信息的类和接口，包括了对数据的 CRUD （Create、Retrial、Update、Delete ），而不包含任何业务相关的信息。有时也称作 ： BaseDAO
  • 作用：为了实现功能的模块化，更有利于代码的维护和升级

BaseDAO

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
package com.cs7eric.DAO;

import com.cs7eric.preparedstatement.util.JDBCUtils;

import java.lang.reflect.Field;
import java.lang.reflect.ParameterizedType;
import java.lang.reflect.Type;
import java.sql.*;
import java.util.ArrayList;
import java.util.List;

/**
 * @author C77eric
 * @version 1.0
 */
public abstract class BaseDAO<T> {

    private Class<T> clazz;

    {
        //获取当前 BaseDAO 的子类继承的父类中的泛型
        Type genericSuperclass = this.getClass().getGenericSuperclass();
        ParameterizedType paramType = (ParameterizedType) genericSuperclass;

        Type[] typeArguments = paramType.getActualTypeArguments(); // 获取了父类的泛型参数
        clazz = (Class<T>) typeArguments[0]; //泛型的第一个参数
    }

    // 通用的 增删改操作 --- version 2.0 考虑事务
    public int update(Connection conn, String sql,Object ...args){

        PreparedStatement ps = null;
        try {
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < args.length; i++) {
                ps.setObject(i + 1, args[i]);
            }
            return ps.executeUpdate();
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(null,ps);
        }
        return 0;
    }

    //通用的查询操作，用于返回表中的一条记录 version 2.0 考虑事务
    public T getInstance(Connection conn, String sql,Object ...args){
        PreparedStatement ps = null;
        ResultSet rs = null;
        try {
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < args.length; i++) {
                ps.setObject(i + 1,args[i]);
            }
            rs = ps.executeQuery();
            ResultSetMetaData rsmd = rs.getMetaData();
            int columnCount = rsmd.getColumnCount();
            if(rs.next()) {
                T t = clazz.newInstance();
                for (int i = 0; i < columnCount; i++) {
                    Object columnValue = rs.getObject(i + 1);

                    String columnLabel = rsmd.getColumnLabel(i + 1);
                    Field field = clazz.getDeclaredField(columnLabel);
                    field.setAccessible(true);
                    field.set(t,columnValue);
                }
                return t;
            }
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(null,ps,rs);
        }
        return null;
    }

    //通用的查询操作，用于返回数据表中多条记录构成的集合 version 2.0 考虑事务
    public List<T> getForList(Connection conn, String sql,Object ...args){
        PreparedStatement ps = null;
        ResultSet rs = null;
        try {
            ps = conn.prepareStatement(sql);
            for (int i = 0; i < args.length; i++) {
                ps.setObject(i + 1, args[i]);
            }
            rs = ps.executeQuery();
            ResultSetMetaData rsmd = rs.getMetaData();
            int columnCount = rsmd.getColumnCount();
            ArrayList<T> list = new ArrayList<>();
            while(rs.next()) {
                T t = clazz.newInstance();
                for (int i = 0; i < columnCount; i++) {
                    Object columnValue = rs.getObject(i + 1);
                    String columnLabel = rsmd.getColumnLabel(i + 1);

                    Field field = clazz.getDeclaredField(columnLabel);
                    field.setAccessible(true);
                    field.set(t,columnValue);
                }
                list.add(t);
            }
            return list;
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(null,ps,rs);
        }
        return null;
    }

    //用于查询特殊值的通用的方法
    public <E> E getValue(Connection conn,String sql,Object...args){
        PreparedStatement ps = null;
        ResultSet rs = null;
        try {
            ps = conn.prepareStatement(sql);
            for(int i = 0;i < args.length;i++){
                ps.setObject(i + 1, args[i]);
            }
            rs = ps.executeQuery();
            if(rs.next()){
                return (E) rs.getObject(1);
            }
        } catch (SQLException e) {
            e.printStackTrace();
        }finally{
            JDBCUtils.closeResource(null, ps, rs);
        }
        return null;
    }
}

CustomerDAO

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
package com.cs7eric.DAO;

/**
 * @author C77eric
 * @version 1.0
 */

import com.cs7eric.preparedstatement.bean.Customer;

import java.sql.Connection;
import java.sql.Date;
import java.util.List;

/**
 * 此接口用于规范针对于 customer 表的常用操作
 */
public interface CustomerDAO {

    /**
     *  将 cust 对象添加到数据库中
     * @param conn
     * @param cust
     */
    void insert(Connection conn, Customer cust);

    /**
     * 针对指定的 id ，删除表中的一条记录
     * @param conn
     * @param id
     */
    void deleteById(Connection conn,int id);

    /**
     * 针对内存中的 cust 对象，去修改数据表中指定的记录
     * @param conn
     * @param cust
     */
    void update(Connection conn,Customer cust);

    /**
     * 针对指定的id 查询得到对应的 customer 对象
     * @param conn
     * @param id
     * @return
     */
    Customer getCustomerById(Connection conn,int id);

    /**
     * 查询表中的所有记录构成的集合
     * @param conn
     * @return
     */
    List<Customer> getAll(Connection conn);

    /**
     * 返回数据表中的条目数
     * @param conn
     * @return
     */
    Long getCount(Connection conn);

    /**
     * 返回数据表中的最大的生日
     * @param conn
     * @return
     */
    Date getMaxBirth(Connection conn);
}

CustomerDAOImpl

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
package com.cs7eric.DAO;

import com.cs7eric.preparedstatement.bean.Customer;

import java.sql.Connection;
import java.sql.Date;
import java.util.List;

/**
 * @author C77eric
 * @version 1.0
 */
public class CustomerDAOImpl extends BaseDAO<Customer> implements CustomerDAO{
    @Override
    public void insert(Connection conn, Customer cust) {
        String sql = "insert into customers(name,email,birth)values(?,?,?)";
        update(conn,sql,cust.getName(),cust.getEmail(),cust.getBirth());
    }

    @Override
    public void deleteById(Connection conn, int id) {
        String sql = "delete from customers where id = ?";
        update(conn,sql,id);
    }

    @Override
    public void update(Connection conn, Customer cust) {
        String sql = "update customers set name = ?,email = ?,birth = ? where id = ?";
        update(conn,sql,cust.getName(),cust.getEmail(),cust.getBirth(),cust.getId());
    }

    @Override
    public Customer getCustomerById(Connection conn, int id) {
        String sql = "select name,email,birth from customers where id = ?";
         return  getInstance(conn, sql, id);
    }

    @Override
    public List<Customer> getAll(Connection conn) {
        String sql = "select id,name,email,birth from customers";
        return getForList(conn,sql);
    }

    @Override
    public Long getCount(Connection conn) {
        String sql = "select count(*) from customers";
        return getValue(conn, sql);
    }

    @Override
    public Date getMaxBirth(Connection conn) {
        String sql = "select max(birth) from customers";
        return getValue(conn, sql);
    }
}

CustomerDAOImplTest

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
package com.cs7eric.DAO.junit;

import com.cs7eric.DAO.CustomerDAOImpl;
import com.cs7eric.preparedstatement.bean.Customer;
import com.cs7eric.preparedstatement.util.JDBCUtils;
import org.junit.Test;

import java.sql.Connection;
import java.sql.Date;
import java.util.ArrayList;
import java.util.List;
import java.util.Scanner;

/**
 * @author C77eric
 * @version 1.0
 */
public class CustomerDAOImplTest{

    private CustomerDAOImpl dao = new CustomerDAOImpl();

    @Test
    public void testInsert(){
        Connection conn = null;
        try {
            conn = JDBCUtils.getConnection();
            Customer customer = new Customer(1, "csq", "cs7eric@outlook.com", new Date(324234234323L));
            dao.insert(conn,customer);
            System.out.println("添加成功");
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }

    @Test
    public void  testDeleteById(){

        Connection conn = null;
        try {
            conn = JDBCUtils.getConnection();
            Scanner scanner = new Scanner(System.in);
            int id = scanner.nextInt();
            dao.deleteById(conn,id);
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }

    @Test
    public void testGetAll(){
        Connection conn = null;
        try {
            conn = JDBCUtils.getConnection();
            List<Customer> list = new ArrayList<>();
            list = dao.getAll(conn);
            list.forEach(System.out::println);
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }
}

数据库连接池

JDBC 数据库连接池的必要性

  • 在使用开发基于数据库的web 程序时，传统的模式基本是按以下步骤：
    • 在主程序（servlet、beans)建立数据库连接
    • 进行 SQL 操作
    • 断开数据库连接
  • 这种模式开发，存在的问题：
    • 普通的 JDBC 数据库连接使用 DriverManager 来获取，每次向数据库建立连接的时候都要将 Connection 加载到内存中，再验证用户名和密码（得花费 0.05s - 1 s的时间）。需要数据库连接的时候，就向数据库要求一个，执行完成之后再断开连接。这样的方式将会消耗大量的资源和时间。数据库的连接资源并没有得到很好的重复利用。若同时有几百个人甚至几千个人在线，频繁的进行数据库连接将占用很多的系统资源，严重的甚至会造成服务器的崩溃
    • 对应每一次数据库连接，使用完后都得断开。否则，如果程序出现异常而未能关闭，将会导致数据库系统中的内存泄漏，最终将导致重启数据库
    • 这种开发不能控制被创建的连接对象数，系统资源会被毫无顾忌的分配出去，如连接过多，也可能导致内存泄漏，服务器崩溃

数据库连接技术

  • 为解决传统开发中的数据库连接问题，可以采用数据库连接技术

  • 数据库连接技术的基本思想：就是为数据库连接建立一个”缓冲池“。预先在缓冲池中放入一定数量的连接，当需要建立数据库连接时，只需”缓冲池“中取出一个，使用完毕之后再放回去

  • 数据库连接池负责 分配、管理和释放数据库连接，他允许应用程序重复使用一个现有的数据库连接，而不是重新建立一个

  • 数据库连接池在初始化时将创建一定数量的数据库连接放到连接池中，这些数据库连接的数量是由 最小数据库连接数来设定的，无论这些数据库连接是否被使用，连接池都将一直保证至少拥有这么多的连接数量。连接池的 最大数据库连接数量限定了这个连接池能占有的最大连接数，当应用程序向连接池请求的连接数超过最大连接数量时，这些请求将被加入到等待队列中。

  • 工作原理

  • 数据库连接池技术的优点

    • 1. 资源重用

      由于数据库连接得以重用，避免了频繁创建，释放连接引起的大量性能开销。在减少系统消耗的基础上，另一方面也增加了系统运行环境的平稳性。

    • 2. 更快的系统反应速度

      数据库连接池在初始化过程中，往往已经创建了若干数据库连接置于连接池中备用。此时连接的初始化工作均已完成。对于业务请求处理而言，直接利用现有可用连接，避免了数据库连接初始化和释放过程的时间开销，从而减少了系统的响应时间

    • 3. 新的资源分配手段

      对于多应用共享同一数据库的系统而言，可在应用层通过数据库连接池的配置，实现某一应用最大可用数据库连接数的限制，避免某一应用独占所有的数据库资源

    • 4. 统一的连接管理，避免数据库连接泄漏

      在较为完善的数据库连接池实现中，可根据预先的占用超时设定，强制回收被占用连接，从而避免了常规数据库连接操作中可能出现的资源泄露

多种开源的数据库连接池

  • JDBC 的数据库连接池使用 javax.sql.DataSource 来表示，DataSource 只是一个接口，该接口通常由服务器(Weblogic, WebSphere, Tomcat)提供实现，也有一些开源组织提供实现：
    • DBCP 是Apache提供的数据库连接池。tomcat 服务器自带dbcp数据库连接池。速度相对c3p0较快，但因自身存在BUG，Hibernate3已不再提供支持。
    • C3P0 是一个开源组织提供的一个数据库连接池，速度相对较慢，稳定性还可以。hibernate官方推荐使用
    • Proxool 是sourceforge下的一个开源项目数据库连接池，有监控连接池状态的功能，稳定性较c3p0差一点
    • BoneCP 是一个开源组织提供的数据库连接池，速度快
    • Druid 是阿里提供的数据库连接池，据说是集DBCP 、C3P0 、Proxool 优点于一身的数据库连接池，但是速度不确定是否有BoneCP快
  • DataSource 通常被称为数据源，它包含连接池和连接池管理两个部分，习惯上也经常把 DataSource 称为连接池
  • DataSource用来取代DriverManager来获取Connection，获取速度快，同时可以大幅度提高数据库访问速度。
  • 特别注意：
    • 数据源和数据库连接不同，数据源无需创建多个，它是产生数据库连接的工厂，因此整个应用只需要一个数据源即可。
    • 当数据库访问结束后，程序还是像以前一样关闭数据库连接：conn.close(); 但conn.close()并没有关闭数据库的物理连接，它仅仅把数据库连接释放，归还给了数据库连接池。

C3P0 数据库连接池

获取连接方式一
java 代码
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
package com.cs7eric.connection;

import com.mchange.v2.c3p0.ComboPooledDataSource;
import org.junit.Test;

import java.sql.Connection;
import java.sql.SQLException;

/**
 * @author C77eric
 * @version 1.0
 */
public class C3P0Test {

    //方式一：
    @Test
    public void testGetConnection() throws Exception {
        //获取 C3P0 数据库连接池
        ComboPooledDataSource comboPooledDataSource = new ComboPooledDataSource();
        comboPooledDataSource.setDriverClass("com.mysql.cj.jdbc.Driver");
        comboPooledDataSource.setJdbcUrl("jdbc:mysql://localhost:3306/test");
        comboPooledDataSource.setUser("root");
        comboPooledDataSource.setPassword("C020611.");

        //通过设置相关的参数，对数据库连接池进行管理
        //设置初始时数据库连接池中的 连接数
        comboPooledDataSource.setInitialPoolSize(10);

        Connection conn = comboPooledDataSource.getConnection();
        System.out.println(conn);

        //销毁 C3P0 数据库连接池
//        DataSources.destroy(comboPooledDataSource);
    }

    @Test
    public void testGetConnection2() throws SQLException {
        ComboPooledDataSource cpds = new ComboPooledDataSource("c3p0_config");
        Connection conn = cpds.getConnection();
        System.out.println(conn);
    }
}

c3p0_config.xml 文件
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
<?xml version="1.0" encoding="UTF-8"?>
<c3p0-config>

    <named-config name="c3p0_config">
        <!-- 提供获取连接的 4 个基本信息 -->
        <property name="driverClass">com.mysql.cj.jdbc.Driver</property>
        <property name="jdbcUrl">jdbc:mysql:///test</property>
        <property name="user">root</property>"
        <property name="password">C020611.</property>

        <!-- 进行数据库连接池管理的基本信息-->
        <!-- 当数据库连接池中的连接数不够时，c3p0 一次性向数据库服务器申请的连接数 -->
        <property name="acquireIncrement">5</property>
        <!-- c3p0数据库连接池中初始化时的连接数 -->
        <property name="initialPoolSize">10</property>
        <!-- c3p0数据库连接池维护的最少连接数 -->
        <property name="minPoolSize">10</property>
        <!-- c3p0数据库连接池维护的最多的连接数 -->
        <property name="maxPoolSize">100</property>
        <!-- c3p0数据库连接池最多维护的Statement的个数 -->
        <property name="maxStatements">50</property>
        <!-- 每个连接中可以最多使用的Statement的个数 -->
        <property name="maxStatementsPerConnection">2</property>


    </named-config>
</c3p0-config>

DBCP 数据库连接池

  • DBCP 是 Apache 软件基金组织下的开源组织的开源连接池实现，该连接池依赖该组织下的另一个开源系统：Common-pool。如需使用该连接池实现，应该系统中增加如下两个 jar 文件
    • Commons-dbcp.jar :连接池的实现
    • Commons-pool.jar：连接池实现的依赖库
  • Tomcat 的连接池正是采用该连接池来实现的。该数据库连接池既可以与应用服务器整合，也可由应用程序独立使用
  • 数据源和数据库连接不同，数据源无需创建多个，它是产生数据库连接的工厂，因此整个应用只需要一个数据源即可
  • 当数据库访问结束后，程序还是像以前一样关闭数据库连接：conn.close(); 但上面的代码并没有关闭数据库的物理连接，它仅仅把数据库连接释放，归还给了数据库连接池
  • 配置属性说明
属性 默认值 说明
initialSize 0 连接池启动时创建的初始化连接数量
maxActive 8 连接池中可同时连接的最大的连接数
maxIdle 8 连接池中最大的空闲的连接数，超过的空闲连接将被释放，如果设置为负数表示不限制
minIdle 0 连接池中最小的空闲的连接数，低于这个数量会被创建新的连接。该参数越接近maxIdle，性能越好，因为连接的创建和销毁，都是需要消耗资源的；但是不能太大。
maxWait 无限制 最大等待时间，当没有可用连接时，连接池等待连接释放的最大时间，超过该时间限制会抛出异常，如果设置-1表示无限等待
poolPreparedStatements false 开启池的Statement是否prepared
maxOpenPreparedStatements 无限制 开启池的prepared 后的同时最大连接数
minEvictableIdleTimeMillis 连接池中连接，在时间段内一直空闲， 被逐出连接池的时间
removeAbandonedTimeout 300 超过时间限制，回收没有用(废弃)的连接
removeAbandoned false 超过removeAbandonedTimeout时间后，是否进 行没用连接（废弃）的回收
获取方式一：
1
2
3
4
5
6
7
8
9
10
11
@Test
    public void testGetConnection1() throws SQLException {
        BasicDataSource source = new BasicDataSource();
        source.setDriverClassName("com.mysql.cj.jdbc.Driver");
        source.setUrl("jdbc:mysql:///test");
        source.setUsername("root");
        source.setPassword("C020611.");
        source.setInitialSize(10);
        Connection conn = source.getConnection();
        System.out.println(conn);
    }
获取方式二：
Java 代码
1
2
3
4
5
6
7
8
9
@Test
    public void testGetConnection() throws Exception {
        Properties pros = new Properties();
        InputStream is = ClassLoader.getSystemClassLoader().getResourceAsStream("dbcp.properties");
        pros.load(is);
        DataSource source = BasicDataSourceFactory.createDataSource(pros);
        Connection conn = source.getConnection();
        System.out.println(conn);
    }
Java 代码2
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
private static DataSource source;
   static{
       try {
           Properties pros = new Properties();
           //FileInputStream fis = new FileInputStream(new File("dbcp.properties"));
           InputStream is = ClassLoader.getSystemClassLoader().getResourceAsStream("dbcp.properties");
           pros.load(fis);
           source = BasicDataSourceFactory.createDataSource(pros);
       } catch (Exception e) {
           e.printStackTrace();
       }
   }
   public static Connection getConnectionDBCP() throws SQLException {
       Connection conn = source.getConnection();
       return conn;
   }
dbcp.properties 配置文件
1
2
3
4
5
driverClassName=com.mysql.cj.jdbc.Driver
url=jdbc:mysql://localhost:3306/test?rewriteBatchedStatements=true&useServerPrepStmts=false
username=root
password=C020611.
initialSize=10

Druid(德鲁伊)数据库链接池

Druid 是阿里巴巴开源平台上一个数据库连接池实现，他结合了 C3P0、DBCP、Proxool 等DB池的优点，同时加入了 日志监控，可以很好的监控 DB池连接 和 SQL 的执行情况，可以说是针对监控而生的 DB 连接池，可以说是目前最好的连接池之一

获取方式
Java 代码
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
/**
     * 使用  Druid  数据库连接池技术
     */
    private static DataSource sourceDruid;
    static{
        try {
            Properties pross = new Properties();
            InputStream iss = ClassLoader.getSystemClassLoader().getResourceAsStream("druid.properties");
            pross.load(iss);
            sourceDruid = BasicDataSourceFactory.createDataSource(pross);
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    /**
     * 使用 Druid 数据库连接池技术
     * @return
     * @throws SQLException
     */
    public static Connection getDruidConnection() throws SQLException {

        Connection conn = sourceDruid.getConnection();
        return conn;


    }
druid.properties 配置文件
1
2
3
4
5
6
7
8
url=jdbc:mysql://localhost:3306/test?rewriteBatchedStatements=true
username=root
password=C020611.
driverClassName=com.mysql.cj.jdbc.Driver
initialSize=10
maxActive=20
maxWait=1000
filters=wall
详细配置参数
配置 缺省 说明
name 配置这个属性的意义在于，如果存在多个数据源，监控的时候可以通过名字来区分开来。 如果没有配置，将会生成一个名字，格式是：”DataSource-” + System.identityHashCode(this)
url 连接数据库的url，不同数据库不一样。例如：mysql : jdbc:mysql://10.20.153.104:3306/druid2 oracle : jdbc:oracle:thin:@10.20.149.85:1521:ocnauto
username 连接数据库的用户名
password 连接数据库的密码。如果你不希望密码直接写在配置文件中，可以使用ConfigFilter。详细看这里：https://github.com/alibaba/druid/wiki/%E4%BD%BF%E7%94%A8ConfigFilter
driverClassName 根据url自动识别 这一项可配可不配，如果不配置druid会根据url自动识别dbType，然后选择相应的driverClassName(建议配置下)
initialSize 0 初始化时建立物理连接的个数。初始化发生在显示调用init方法，或者第一次getConnection时
maxActive 8 最大连接池数量
maxIdle 8 已经不再使用，配置了也没效果
minIdle 最小连接池数量
maxWait 获取连接时最大等待时间，单位毫秒。配置了maxWait之后，缺省启用公平锁，并发效率会有所下降，如果需要可以通过配置useUnfairLock属性为true使用非公平锁。
poolPreparedStatements false 是否缓存preparedStatement，也就是PSCache。PSCache对支持游标的数据库性能提升巨大，比如说oracle。在mysql下建议关闭。
maxOpenPreparedStatements -1 要启用PSCache，必须配置大于0，当大于0时，poolPreparedStatements自动触发修改为true。在Druid中，不会存在Oracle下PSCache占用内存过多的问题，可以把这个数值配置大一些，比如说100
validationQuery 用来检测连接是否有效的sql，要求是一个查询语句。如果validationQuery为null，testOnBorrow、testOnReturn、testWhileIdle都不会其作用。
testOnBorrow true 申请连接时执行validationQuery检测连接是否有效，做了这个配置会降低性能。
testOnReturn false 归还连接时执行validationQuery检测连接是否有效，做了这个配置会降低性能
testWhileIdle false 建议配置为true，不影响性能，并且保证安全性。申请连接的时候检测，如果空闲时间大于timeBetweenEvictionRunsMillis，执行validationQuery检测连接是否有效。
timeBetweenEvictionRunsMillis 有两个含义： 1)Destroy线程会检测连接的间隔时间2)testWhileIdle的判断依据，详细看testWhileIdle属性的说明
numTestsPerEvictionRun 不再使用，一个DruidDataSource只支持一个EvictionRun
minEvictableIdleTimeMillis
connectionInitSqls 物理连接初始化的时候执行的sql
exceptionSorter 根据dbType自动识别 当数据库抛出一些不可恢复的异常时，抛弃连接
filters 属性类型是字符串，通过别名的方式配置扩展插件，常用的插件有： 监控统计用的filter:stat日志用的filter:log4j防御sql注入的filter:wall
proxyFilters 类型是List，如果同时配置了filters和proxyFilters，是组合关系，并非替换关系

Apache-DBUtils

Apache-DBUtils 简介

  • commons-dbutils 是 apache 组织提供的一个开源 JDBC 工具类库，它是对 JDBC 的简单封装，学习成本极低，并且使用 DBUtlis 能极大简化 JDBC 编码的工作量，同时也不会影响程序的性能
  • API 介绍
    • org.apache.commons.dbutils.QueryRunner
    • org.apache.commons.dbutils.ResultSetHandler
    • 工具类：org.apache.commons.dbutils.DbUti

QueryRunner

提供数据库操作的一系列重载的 update（） 和 query（）操作

ResultSetHandler

此接口用于处理数据库查询操作得到的结果集。不同的结果集的情形，由其不同的子类来实现

主要 API 的使用

DbUtils

  • DbUtils：提供比如关闭连接、装载 JDBC 驱动程序等常规工作的工具类，里面的方法都是静态的。主要方法如下
    • **public static void close(…) throws SQLException:**DbUtils 类提供了三个重载的关闭方法。这些方法检查所提供的参数是不是 null，如果不是的话，他们就关闭 connection、statement和 ResultSet
    • public static void closeQuietly(…) 这一类方法不仅能在 Connection、Statement 和 ResultSet 为 null情况下避免关闭，还能隐藏一些在程序中抛出的 SQLException
    • public static void commitAndClose(Connection conn):用来提交连接的事务，然后关闭连接
    • public static void rollback(Connection conn)throws SQLException :允许 conn 为 null,因为方法内部做了判断
    • public static void rollbackAndClose(Connection conn)throws SQLException
    • rollbackAndCloseQuietly(Connection)
    • public static boolean loadDriver(java.lang.String driverClassName)：这一方装载并注册JDBC驱动程序，如果成功就返回true。使用该方法，你不需要捕捉这个异常ClassNotFoundException。

QueryRunner 类

  • 该类简单化了 SQL 查询，它与 ResultSetHandler 组合在一起使用可以完成大部分的数据库操作，能够大大减少编码量
  • QueryRunner 类提供了两个构造器
    • 默认的构造器
    • 需要一个 javax.sql.DataSource 来作参数的构造器
  • QueryRunner 类主要方法：
    • 更新
      • public int update(Connection conn,String sql,Object …params) throws SQLException:用来执行一个更新（插入、更新、删除）操作
      • … …
    • 插入
      • public T insert(Connection conn,String sql,ResultSetHandler rsh, Object… params) throwsSQLException：只支持INSERT语句，其中 rsh - The handler used to create the result object fromthe ResultSet of auto-generated keys. 返回值: An object generated by the handler.即自动生成的
        键值
      • … …
    • 批处理
      • public int[] batch(Connection conn,String sql,Object[][] params)throws SQLException： INSERT,UPDATE, or DELETE语句
      • public T insertBatch(Connection conn,String sql,ResultSetHandler rsh,Object[][] params)throws SQLException：只支持INSERT语句
      • … …
    • 查询
      • public Object query(Connection conn, String sql, ResultSetHandler rsh,Object… params) throws SQLException：执行一个查询操作，在这个查询中，对象数组中的每个元素值被用来作为查询语句的置换参数。该方法会自行处理 PreparedStatement 和 ResultSet 的创建和关闭。
代码示例
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
@Test
    public void testInsert(){

        Connection conn = null;
        try {
            QueryRunner runner = new QueryRunner();
            conn = JDBCUtils.getDruidConnection();
            String sql = "insert into customers(name,email,birth)values(?,?,?)";
            int insertCount = runner.update(conn, sql, "cxk", "cxk@126.com", "1990-09-11");
            System.out.println("添加了" + insertCount + "条记录");
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }

    }

ResultSetHandler 接口及其实现类

  • 该接口用于处理 java.sql.ResultSet，将数据按要求转换为另一种形式。
  • ResultSetHandler 接口提供了一个单独的方法：Object handle (java.sql.ResultSet .rs)。
  • 接口的主要实现类：
    • ArrayHandler：把结果集中的第一行数据转成对象数组。
    • ArrayListHandler：把结果集中的每一行数据都转成一个数组，再存放到List中。
    • BeanHandler****：将结果集中的第一行数据封装到一个对应的JavaBean实例中。**
    • BeanListHandler：将结果集中的每一行数据都封装到一个对应的JavaBean实例中，存放到List里。
    • ColumnListHandler：将结果集中某一列的数据存放到List中。
    • KeyedHandler(name)：将结果集中的每一行数据都封装到一个Map里，再把这些map再存到一个map里，其key为指定的key。
    • MapHandler：将结果集中的第一行数据封装到一个Map里，key是列名，value就是对应的值。
    • MapListHandler：将结果集中的每一行数据都封装到一个Map里，然后再存放到List
    • ScalarHandler：查询单个值对象
代码示例
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
package com.cs7eric.dbutils;

import com.cs7eric.preparedstatement.bean.Customer;
import com.cs7eric.preparedstatement.util.JDBCUtils;
import org.apache.commons.dbutils.QueryRunner;
import org.apache.commons.dbutils.ResultSetHandler;
import org.apache.commons.dbutils.handlers.*;
import org.junit.Test;

import java.sql.Connection;
import java.sql.Date;
import java.sql.ResultSet;
import java.sql.SQLException;
import java.util.List;
import java.util.Map;

/**
 * @author C77eric
 * @version 1.0
 */
public class TestDbUtils {

    @Test
    public void testInsert(){

        Connection conn = null;
        try {
            QueryRunner runner = new QueryRunner();
            conn = JDBCUtils.getDruidConnection();
            String sql = "insert into customers(name,email,birth)values(?,?,?)";
            int insertCount = runner.update(conn, sql, "cxk", "cxk@126.com", "1990-09-11");
            System.out.println("添加了" + insertCount + "条记录");
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }


    /**
     * BeanHandler 是ResulrSetHandler 接口的实现类，用于封装表中的一天记录
     * @throws SQLException
     */
    @Test
    public void testQuery1() throws SQLException {
        Connection conn = null;
        try {
            QueryRunner runner = new QueryRunner();
            conn = JDBCUtils.getDruidConnection();
            String sql = "select id,name,email,birth from customers where id = ?";
            BeanHandler<Customer> handler = new BeanHandler<>(Customer.class);
            Customer customer = runner.query(conn, sql, handler, 25);
            System.out.println(customer);
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }


    /**
     * BeanListHandler 是  ResultSetHandler 接口的实现类，用于封装表中多条记录构成的集合
     * @throws SQLException
     */
    @Test
    public void testQuery2() throws SQLException {
        Connection conn = null;
        try {
            conn = JDBCUtils.getDruidConnection();
            QueryRunner runner = new QueryRunner();
            String sql = "select id,name,email,birth from customers where id < ?";
            BeanListHandler<Customer> handler = new BeanListHandler<>(Customer.class);
            List<Customer> list = runner.query(conn, sql, handler, 25);
            list.forEach(System.out::println);
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }

    /**
     * MapHander:是ResultSetHandler接口的实现类，对应表中的一条记录。
     * 	 * 将字段及相应字段的值作为map中的key和value
     */
    @Test
    public void testQuery3(){
        Connection conn = null;
        try {
            conn = JDBCUtils.getDruidConnection();
            QueryRunner runner = new QueryRunner();
            String sql = "SELECT id,name,email,birth FROM customers WHERE id = ?";
            MapHandler mapHandler = new MapHandler();
            Map<String, Object> map = runner.query(conn, sql, mapHandler, 25);
            System.out.println(map);
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }

    /**
     * MapListHandler 是 ResultSetHandler 的实现类，对应表中的多条记录
     * 将字段及相应字段的值作为 map 中的 key  和 value ，将这些 map 添加到 list 中
     */
    @Test
    public void testQuery4(){
        Connection conn = null;
        try {
            QueryRunner runner = new QueryRunner();
            conn = JDBCUtils.getDruidConnection();
            String sql = "SELECT id,name,email,birth FROM customers WHERE id < ?";
            MapListHandler listHandler = new MapListHandler();
            List<Map<String, Object>> mapList = runner.query(conn, sql, listHandler, 25);
            mapList.forEach(System.out::println);
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }

    /**
     *  ScalarHandler 用于查询特殊值
     */
    @Test
    public void testQuery5(){
        Connection conn = null;
        try {
            QueryRunner queryRunner = new QueryRunner();
            conn = JDBCUtils.getDruidConnection();
            String sql = "SELECT COUNT(*) FROM customers";
            ScalarHandler scalarHandler = new ScalarHandler();
            Long count = (Long)queryRunner.query(conn, sql, scalarHandler);
            System.out.println(count);
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(conn,null);
        }
    }


    /**
     * 自定义 ResultSetHandler 实现类
     */
    @Test
    public void testQuery6(){
        Connection druidConnection = null;
        try {
            QueryRunner queryRunner = new QueryRunner();
            druidConnection = JDBCUtils.getDruidConnection();
            String sql = "SELECT id,name,email,birth FROM customers WHERE id = ?";
            ResultSetHandler<Customer> handler = new ResultSetHandler<Customer>() {
                @Override
                public Customer handle(ResultSet rs) throws SQLException {
    //                return null;
                    if(rs.next()){
                        int id = rs.getInt("id");
                        String name = rs.getString("name");
                        String email = rs.getString("email");
                        Date birth = rs.getDate("birth");
                        Customer customer = new Customer(id, name, email, birth);
                        return customer;
                    }
                    return null;
                }
            };
            Customer customer = queryRunner.query(druidConnection, sql, handler, 25);
            System.out.println(customer);
        } catch (SQLException e) {
            e.printStackTrace();
        } finally {
            JDBCUtils.closeResource(druidConnection,null);
        }
    }
}

​ —2022.11.02

  • Title: JDBC
  • Author: cccs7
  • Created at: 2022-10-28 16:38:22
  • Updated at: 2023-06-29 23:12:39
  • Link: https://blog.cccs7.icu/2022/10/28/JDBC/
  • License: This work is licensed under CC BY-NC-SA 4.0.
 Comments
On this page
JDBC
  1. JDBC 概述
    1. 数据的持久化
    2. Java 中数据存储技术
    3. JDBC 介绍
    4. JDBC 体系结构
    5. JDBC 程序编写步骤
  2. 获取数据库连接
    1. 要素一：Driver 接口实现类
      1. Driver 接口介绍
      2. 加载与注册 JDBC 驱动
    2. 要素二：URL
    3. 要素三：用户名和密码
    4. 数据库连接方式示例
      1. 方式一
      2. 方式二
      3. 方式三
      4. 方式四
      5. 方式五
  3. 使用 PreparedStatement 实现 CRUD 操作
    1. 操作和访问数据库
    2. 使用 Statement 操作数据库的弊端
    3. PreparedStatement 的使用
      1. PreparedStatement 介绍
      2. PreparedStatement VS Statement
      3. Java 与 SQL 对应数据类型转化
      4. 使用 PreparedStatement 实现增、删、改操作
      5. 封装数据库连接和关闭操作
        1. 获取数据库的连接
        2. 关闭数据库连接和Statement 的操作
        3. 通用的增删改操作
    4. ResultSet 与 ResultSetMetaData
      1. ResultSet
      2. ResultSetMetaData
      3. 相关代码
        1. 针对不同表的通用的查询操作返回多条数据
        2. 针对于不同的表的通用的查询操作，返回表中的一条记录
        3. 通用的针对于 order 表的查询操作
        4. 针对于customers 表的通用查询操作
    5. 资源的释放
    6. JDBC API 小结
  4. 操作 BLOB 类型字段
    1. MySQL BLOB 类型
    2. 向数据表中插入大数据类型
      1. 代码示例
      2. 向数据表中插入大数据类型
      3. 修改数据表中的 Blob类型字段
      4. 从数据表中读取大数据类型
  5. 批量插入
    1. 批量执行 SQL 语句
    2. 高效的批量插入
      1. 实现层次一：使用 Statement
      2. 实现层次二：使用 PreparedStatement
      3. 实现层次三：批处理
      4. 实现层次四：设置连接 不允许自动提交数据
  6. 数据库事务
    1. 数据库事务介绍
    2. JDBC 事务处理
    3. 事务的 ACID 属性
      1. 数据库的并发问题
      2. 四种隔离级别
      3. 在 MySQL 中设置隔离级别
  7. DAO 及相关实现类
    1. BaseDAO
      1. CustomerDAO
      2. CustomerDAOImpl
      3. CustomerDAOImplTest
  8. 数据库连接池
    1. JDBC 数据库连接池的必要性
    2. 数据库连接技术
    3. 多种开源的数据库连接池
      1. C3P0 数据库连接池
        1. 获取连接方式一
          1. java 代码
          2. c3p0_config.xml 文件
      2. DBCP 数据库连接池
        1. 获取方式一：
        2. 获取方式二：
          1. Java 代码
          2. Java 代码2
          3. dbcp.properties 配置文件
      3. Druid(德鲁伊)数据库链接池
        1. 获取方式
          1. Java 代码
          2. druid.properties 配置文件
        2. 详细配置参数
  9. Apache-DBUtils
    1. Apache-DBUtils 简介
      1. QueryRunner
      2. ResultSetHandler
    2. 主要 API 的使用
      1. DbUtils
      2. QueryRunner 类
        1. 代码示例
      3. ResultSetHandler 接口及其实现类
        1. 代码示例