使用原生JDBC循环读取文件并持久化到数据库
先上代码：
package com.demo.common.service; import java.io.File; import java.io.FileInputStream; import java.io.FileOutputStream; import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.ResultSet; import java.sql.SQLException; import java.util.ArrayList; import java.util.List; import java.util.Map; import java.util.Properties; public class ReadFileService { private static Integer counts = 0; private static Connection conn = null; private static PreparedStatement pre = null; //基础信息 public static void getBase(String strPath) { File dir = new File(strPath); File[] files = dir.listFiles(); // 该文件目录下文件全部放入数组 List<String> filelist = new ArrayList<String>(); if (files != null ) { for (int i = 0; i < files.length; i++) { String fileName = files[i].getName(); String filetype = ""; String filePath = ""; String xmmc = ""; if (files[i].isDirectory()) { // 判断是否文件夹，如果是文件夹则一直遍历 getBase(files[i].getAbsolutePath()); } else { // 判断文件后缀 filelist.add(fileName); filePath = files[i].getAbsolutePath().substring(0, files[i].getAbsolutePath().lastIndexOf("\\")+1); if(!"".equals(filePath))filelist.add(filePath); xmmc = fileName.substring(fileName.indexOf("年")-4, fileName.indexOf(".")); if(!"".equals(xmmc))filelist.add(xmmc); if(fileName.endsWith("pdf")){ filetype = "12"; }else{ filetype = "11"; } filelist.add(filetype); String sql = "insert into g_files_db values (sys_guid(), ?, ?, ?, ?, to_char(sysdate,'yyyy-MM-dd'))"; try { //int result = DataBaseHelper.update(sql, new Object[]{fileName,filePath,xmmc,filetype}); pre = conn.prepareStatement(sql); pre.setString(1, fileName); pre.setString(2, filePath); pre.setString(3, xmmc); pre.setString(4, filetype); int result = pre.executeUpdate(); counts = counts + result; } catch (Exception e) { e.printStackTrace(); counts = -1; return; } } } } } //坐标信息 public static void getCoordinate(String strPath) { File dir = new File(strPath); File[] files = dir.listFiles(); // 该文件目录下文件全部放入数组 List<String> filelist = new ArrayList<String>(); if (files != null ) { for (int i = 0; i < files.length; i++) { String fileName = files[i].getName(); String filetype = ""; String filePath = ""; String xmmc = ""; if (files[i].isDirectory()) { // 判断是否文件夹，如果是文件夹则一直遍历 getCoordinate(files[i].getAbsolutePath()); } else { // 判断文件后缀 filelist.add(fileName); filePath = files[i].getAbsolutePath().substring(0, files[i].getAbsolutePath().lastIndexOf("\\")+1); if(!"".equals(filePath))filelist.add(filePath); xmmc = fileName.substring(fileName.indexOf("年")-4, fileName.indexOf(".")); if(!"".equals(xmmc))filelist.add(xmmc); if(fileName.endsWith("prj")){ filetype = "32"; }else if(fileName.endsWith("dbf")){ filetype = "33"; }else if(fileName.endsWith("sbn")){ filetype = "34"; }else if(fileName.endsWith("sbx")){ filetype = "35"; }else if(fileName.endsWith("shp")){ filetype = "31"; }else if(fileName.endsWith("shp.xml")){ filetype = "36"; }else if(fileName.endsWith("shx")){ filetype = "37"; }else{ filetype = "40"; } filelist.add(filetype); String sql = "insert into g_files_db values (sys_guid(), ?, ?, ?, ?, to_char(sysdate,'yyyy-MM-dd'))"; try { //int result = DataBaseHelper.update(sql, new Object[]{fileName,filePath,xmmc,filetype}); pre = conn.prepareStatement(sql); pre.setString(1, fileName); pre.setString(2, filePath); pre.setString(3, xmmc); pre.setString(4, filetype); int result = pre.executeUpdate(); counts = counts + result; } catch (Exception e) { e.printStackTrace(); counts = -2; return; } } } } } //1,首先需要找到目录为“项目清单”的文件夹 public static void getDirectory(String strPath) { File dir = new File(strPath); File[] files = dir.listFiles(); // 该文件目录下文件全部放入数组 //String fileDirectory = ""; if (files != null ) { for (int i = 0; i < files.length; i++) { String fileName = files[i].getName(); if (files[i].isDirectory()) { // 判断是否是对应的目录 if(fileName.contains("项目清单")){ getType(files[i].getAbsolutePath()); //调用方法，查找是否包含“项目调查表”、“坐标”文件夹。 } else getDirectory(files[i].getAbsolutePath()); }else{ continue; } } } } //2.找到基础信息目录和坐标目录，文件夹需要创建合理 public static void getType(String strPath) { File dir = new File(strPath); File[] files = dir.listFiles(); // 该文件目录下文件全部放入数组 if (files != null ) { for (int i = 0; i < files.length; i++) { String fileName = files[i].getName(); if (files[i].isDirectory()) { // 判断是文件还是文件夹 if(fileName.contains("项目调查表")){ getBase(files[i].getAbsolutePath()); }else if(fileName.contains("坐标")){ getCoordinate(files[i].getAbsolutePath()); }else getType(files[i].getAbsolutePath()); }else{ continue; } } } } //将所有shp格式的文件写入到文件中 public static void writeSHP(String path){ File file = new File(path); String sql = "select filepath || regexp_substr(filename, '[^.]+', 1, 1) filename from G_FILES_DB where type = '31'"; try { if(!file.exists()){ file.createNewFile(); } FileOutputStream outStream = new FileOutputStream(file,true); pre = conn.prepareStatement(sql); ResultSet re = pre.executeQuery(); while(re.next()){ outStream.write(re.getString(1).getBytes("utf-8")); outStream.write("\r\n".getBytes("utf-8")); } outStream.close(); //counts = 0; } catch (Exception e) { e.printStackTrace(); } counts = 0; } //方法入口 public static void main(String[] args) { Properties prop = read(); String path = prop.getProperty("file.path"); String savePath = prop.getProperty("file.savePath"); String url = prop.getProperty("file.url"); String user = prop.getProperty("file.user"); String psd = prop.getProperty("file.password"); conn = getConn(url, user, psd); getDirectory(path); if(counts < 0){ System.out.println("数据已存在，再次插入失败！"); }else{ System.out.println("更新了"+counts+"条数据"); writeSHP(savePath); closeConn(); } } //获取连接 public static Connection getConn(String url,String user,String psd){ try { Class.forName("oracle.jdbc.driver.OracleDriver"); } catch (Exception e) { e.printStackTrace(); } try { conn = DriverManager.getConnection(url,user,psd); } catch (Exception e1) { e1.printStackTrace(); } return conn; } //关闭所有连接 public static void closeConn (){ try { if(pre != null){ pre.close(); pre = null; } if(conn != null){ conn.close(); conn = null; } } catch (Exception e) { e.printStackTrace(); } } //获取配置文件访问对象 public static Properties read() { Properties pro = new Properties(); File file = new File("C:\\EIfilePath\\application.properties"); try { FileInputStream in = new FileInputStream(file); pro.load(in); } catch (Exception e) { System.out.println(e); } return pro; } }
1，类中的方法主要是根据需要遍历的目的文件夹进行遍历，根据类型的不同，存入到数据库中，同时也包括了JDBC对象的创建、使用、关闭。同时将部分数据写入到txt文件中。
2，除了Java文件外，还需要创建一个配置文件，配置文件中配置了遍历目的文件夹，数据库信息，写入字符串到哪个文件。
在eclipse等IDE中直接运行主函数即可。
3，如果使用cmd窗口直接运行class文件，则需要注意以下几点：
1），在cmd中输入：javac -encoding utf-8 ReadFileService.java //ReadFileService是类名；-encoding utf-8设置编码格式，如果不设置，且类中有中文，则会报错。
2），编译完成后，再执行命令：java ReadFileService //执行命令前，要确保Java文件同目录下有对应的配置文件，且在配置文件中，所需配置都配置无误。
4，说下环境变量配置问题，由于使用cmd运行class文件，且类中涉及与数据库交互问题，则需要在classpath中配置驱动jar包路径，这里以Oracle为例吧。
.;%JAVA_HOME%\lib;%JAVA_HOME%\lib\tools.jar;C:\ojdbc6.jar // .; 注意不要忘记
.class文件，.properties配置文件一定在同一目录下，因为程序中使用的是通过获取.class文件的路径然后获取.properties文件的。
5，application.properties中的属性配置
file.path=C:\\EIfilePath file.url=jdbc:oracle:thin:@172.16.1.23:1521:orcl file.user=nfb_Devs_v5 file.password=1qazxsw2 file.savePath = C:\\EIfilePath\\SHP.txt
类似如此的循环遍历功能，需要文件夹及文件的命名规则要一直，要保持一定的统一标准。
