Java解析之纠结的DBF文件

待我称王封你为后i 2022-04-14 05:53 414阅读 0赞

\[b\]\[color=green\]\[size=x-large\]明天，持续更新Lucene系列博文,欢迎收看!  
Lucene群交流:324714439  
  
下面进入正题  
\[/size\]\[/color\]\[/b\]  
  
\[b\]\[color=green\]\[size=x-large\]最近客户提了个新的需求，需要我们的程序支持如下几种文件的解析  
\[table\]  
|编号|文件格式  
|1|XML  
|2|Excel  
|3|Access  
|4|DBF  
|5|MDB  
\[/table\]  
可能有些朋友，不知道DBF这种格式的文件是什么东西，在这之前，散仙，先小小科普下这种古董级的数据库格式,来看下百度百科是怎么介绍的。  
  
一种特殊的文件格式！表示数据库文件，Foxbase,Dbase,Visual FoxPro,等数据库处理系统所产生的数据库文件!  
DBF 数据库可以分为 dBase III 、foxpro 格式两类。  
DBF 数据库是常用的桌面型数据库，它曾经被各企业、事业单位广泛使用。现在，虽然已经有了很多的各种各样的小、中、大型数据库，DBF 数据库依然被很多单位用于数据交换。  
  
下面我们来看下Foxbase DBF的截图.  
\[/size\]\[/color\]\[/b\]  
  
\[img\]http://dl2.iteye.com/upload/attachment/0089/2421/c549b16b-bb4a-3b10-8736-65de6ddcc804.png\[/img\]  
\[b\]\[color=green\]\[size=x-large\]  
  
DBF,以及Access都是微软支持的数据库产品，解析时使用jdbc-odbc桥接的方式，可以很方便解析。  
关于MDB，其实是SQL Server分离后的数据库，这个直接可以直接导入数据库使用，然后使用Java的JDBC读取即可，这个需求很简单，散仙在这里就不用多演示了，下面，我们来重点看下其他4种文件的Java解析方法  
  
  
\[/size\]\[/color\]\[/b\]  
  
\[b\]\[color=green\]\[size=x-large\]1.解析XML，散仙使用的是jdom2，解析起来也比较方便快捷，XML格式如下\[/size\]\[/color\]\[/b\]  
  
\[img\]http://dl2.iteye.com/upload/attachment/0089/2423/97790208-59ac-3e57-87c8-997c991e6db7.jpg\[/img\]  
\[b\]\[color=red\]\[size=x-large\]核心代码如下\[/size\]\[/color\]\[/b\]

File f = new File("E:\\data\\test.xml");              
    				 Document doc=sax.build(f);//解析file的xml文件
    				 Element root=doc.getRootElement();//获取根节点
    				 List<Element> eles= root.getChildren();//获取根节点下面子节点的集合
    				// System.out.println(eles.size());
    				 List<XmlEntity> xmls=new ArrayList<XmlEntity>();
    				 for(Element e:eles){
       
    					 String ui=e.getChildText("ui");
    					 String ti=e.getChildText("ti");
    					 String ta=e.getChildText("ta");
    					 String dp=e.getChildText("dp");
    					 String vi=e.getChildText("vi");
    					 String ip=e.getChildText("ip");
    					 String pg=e.getChildText("pg");
    					 String mh=e.getChildText("mh");
    					 xmls.add(new XmlEntity(ui, ti, ta, dp, vi, ip, pg, mh));
    //					 System.out.println(e.getChildText("ui"));
    //					 System.out.println(e.getChildText("ti"));
    //					 System.out.println(e.getChildText("ta"));
    //					 System.out.println(e.getChildText("dp"));
    //					 System.out.println(e.getChildText("vi"));
    //					 System.out.println(e.getChildText("ip"));
    //					 System.out.println(e.getChildText("pg"));
    //					 System.out.println(e.getChildText("mh"));
    
    					// System.out.println("=================================");
    
    				 }
    				 DAO.add(xmls);//持久化到数据库中
    				 System.out.println("添加成功!");
    				 // System.out.println("获取根节点的名字 :"+root.getName());

\[b\]\[color=green\]\[size=x-large\]2,使用POI解析Excel,格式如下  
\[/size\]\[/color\]\[/b\]  
  
\[img\]http://dl2.iteye.com/upload/attachment/0089/2425/b3644f20-7f34-3fd2-af90-2db50108a870.jpg\[/img\]  
\[b\]\[color=green\]\[size=x-large\]核心代码如下  
\[/size\]\[/color\]\[/b\]

/**
    	 * 判断单元格格式
    	 * **/
    	 private static String getCellValue(HSSFCell cell) {  
    	        String cellValue = "";  
    	        DecimalFormat df = new DecimalFormat("#");  
    
    	        switch (cell.getCellType()) {  
    	        case HSSFCell.CELL_TYPE_STRING:  
    	            cellValue = cell.getRichStringCellValue().getString().trim();  
    	            break;  
    	        case HSSFCell.CELL_TYPE_NUMERIC:  
    	            cellValue = df.format(cell.getNumericCellValue()).toString();  
    	            break;  
    	        case HSSFCell.CELL_TYPE_BOOLEAN:  
    	            cellValue = String.valueOf(cell.getBooleanCellValue()).trim();  
    	            break;  
    	        case HSSFCell.CELL_TYPE_FORMULA:  
    	            cellValue = cell.getCellFormula();  
    	            break;  
    	        default:  
    	            cellValue = "";  
    	        }  
    	        return cellValue;  
    	    } 
    
    
     /**
    	  * 读取Excel
    	  * **/
    	 public static List<ExcelEntity> readExcel(String filePath) throws Exception {
       
    
    		  FileInputStream fis = new FileInputStream(filePath); // 根据excel文件路径创建文件流
    		  POIFSFileSystem fs = new POIFSFileSystem(fis); // 利用poi读取excel文件流
    		  HSSFWorkbook wb = new HSSFWorkbook(fs); // 读取excel工作簿
    		  HSSFSheet sheet = wb.getSheetAt(0); // 读取excel的sheet，0表示读取第一个、1表示第二个.....
    
    		  // 获取sheet中总共有多少行数据sheet.getPhysicalNumberOfRows()
    		//  System.out.println(sheet.getPhysicalNumberOfRows());
    		  List<ExcelEntity> excels=new ArrayList<ExcelEntity>();
    		  for (int i = 0; i < sheet.getPhysicalNumberOfRows(); i++) {
       
    		   HSSFRow row = sheet.getRow(i+1); //忽略首行，标题行            取出sheet中的某一行数据
    		   if (row != null) {
       
    		    // 获取该行中总共有多少列数据row.getLastCellNum()
    
    			   ExcelEntity excel=new ExcelEntity();
    			   HashMap<Integer, String> map=new HashMap<>();
    		    for (int j = 0; j < row.getLastCellNum(); j++) {
       
    		    	//System.out.println(row.getLastCellNum());
    		    	//System.exit(0);
    		     HSSFCell cell = row.getCell(j); // 获取该行中的一个单元格对象
    		    if(cell==null){
       
    		    	cell=row.createCell(j);//如果某个单元格为空的话，就创建一个，否则会报异常
    		    }
    		   String str=   getCellValue(cell);
    		   map.put(j, str);
    		  // System.out.println(str);
    
    		     //}
    		    }

\[b\]\[color=green\]\[size=x-large\]3，使用JDBC-ODBC桥接方式读取Access文件,使用Acces  
与DBF都需要配置桥接模式，在控制面板里，选择管理工具里配置\[/size\]\[/color\]\[/b\]  
  
\[img\]http://dl2.iteye.com/upload/attachment/0089/2447/ce5a11c9-d8da-308e-832d-30176a714238.jpg\[/img\]  
\[b\]\[color=green\]\[size=x-large\]核心代码如下,\[/size\]\[/color\]\[/b\]

try {
       
    				Class.forName("sun.jdbc.odbc.JdbcOdbcDriver");
    				con = DriverManager.getConnection("jdbc:odbc:ss",  bulidPath, "");//加载驱动，默认密码，空字符串即可
    				//System.out.println("Access连接："+con);
    			} catch (Exception e) {
       
    				e.printStackTrace();
    			}

AccessBase ab=new AccessBase();
    	 Connection con=ab.getConnection("zdbz.mdb");
    	 String sql="select * from test";//查询表
    	 PreparedStatement ps=con.prepareStatement(sql);
    	 ResultSet rs=ps.executeQuery();
    	  //ResultSetMetaData s=rs.getMetaData();
    	 // int i=s.getColumnCount();
    	  //System.out.println(i);
    	 List<ExcelEntity> list=new ArrayList<ExcelEntity>();
    	  while(rs.next()){
       
    		ExcelEntity xml=new ExcelEntity();
    		 xml.setUi(rs.getString(1));
    		 xml.setTi(rs.getString(2));
    		 xml.setTa(rs.getString(3));
    		 xml.setDp(rs.getString(4));
    		 xml.setVi(rs.getString(5));
    		 xml.setIp(rs.getString(6));
    		 xml.setPg(rs.getString(7));
    		 xml.setAb(rs.getString(8));
    		 xml.setKw(rs.getString(9));
    		 xml.setMh(rs.getString(10));
    		 list.add(xml);
    
    
    	  }
    
    
    	  DAO.addAccess(list);
    	 // System.out.println(i);
    	  rs.close();
    	  ps.close();
    	  con.close();

\[b\]\[color=olive\]\[size=x-large\]4,最后在来说一下，比较纠结的DBF的解析，关于这个东西，散仙以前也没用过，现在客户有这种需求，自然得做好，于是乎Google了一把，效果似乎还不错，第一页上基本全是有关于，JAVA解析DBF格式的，当时我还在想，得来全不费工夫，于是，找了一篇，看起来似乎挺靠谱的解析博客，拷贝了其中的代码，拿过来使用，结果报了各种异常，这种方式是用流读取的，然后直接解析流，提取每一行数据，还附带一个jar包，散仙后面会把jar给传上来，我们先看下这种方式的代码：\[/size\]\[/color\]\[/b\]

package com.dbhelper;
    
    import java.io.FileInputStream;
    import java.io.InputStream;
    
    import com.hexiong.jdbf.DBFReader;
    
    
    
    
    
    
    public class ParseDBF {
       
    
    	public static void main(String[] args) {
       
    
    		readDBF("C:\\Users\\cuichao\\Desktop\\zdbz\\test.DBF");
    	}
    
    	public static void readDBF(String path)
    
    	{
       
    
    		InputStream fis = null;
    
    		try
    
    		{
       
    
    			// 读取文件的输入流
    
    			fis = new FileInputStream(path);
    
    			// 根据输入流初始化一个DBFReader实例，用来读取DBF文件信息
    
    			 DBFReader reader = new DBFReader(fis);
    
    			//DBFReader reader=new DBFReader("C:\\Users\\cuichao\\Desktop\\zdbz\\test.DBF");
                  // System.out.println(reader);
    			// 调用DBFReader对实例方法得到path文件中字段的个数
    
    			int fieldsCount = reader.getFieldCount();
                 System.out.println(fieldsCount);
    
                 Object[] s= reader.nextRecord();
    
                  while(reader.nextRecord()!=null&&reader.nextRecord().length>0){
       
    
                	  for(int i=0;i<reader.nextRecord().length;i++){
       
                		  System.out.println(reader.nextRecord()[i]);
    
                	  }
                  }
    		}
    
    		catch (Exception e)
    
    		{
       
    
    			e.printStackTrace();
    
    		}
    
    		finally
    
    		{
       
    
    			try {
       
    
    			//	fis.close();
    
    			} catch (Exception e) {
       
    			}
    
    		}
    
    	}
    
    }

\[b\]\[size=x-large\]\[color=green\]这种流读取的方式，散仙也看了下源码，代码比较繁琐，而且有好多限制不能用，比如说，读取某列的字符长度不能大于8，或者包含某个C或D的字符的不能用，等等。散仙，猜想这个发博客的人，是根据自己的业务定义的，这也不能怪人家，各个业务的需求都不一样，难免会出现这种情况。 下面，我们来看看，最王道，最通用的解析方法， 既然，它是数据库，那么我们为什么不按数据库的方式来搞呢？ 用流读取的方式，不通用，而且异常百出，按数据库的方式，解决，才是最完美的方法。  
  
首先配置好的桥接，截图如下  
\[/color\]\[/size\]\[/b\]  
  
\[img\]http://dl2.iteye.com/upload/attachment/0089/2454/ec89bc05-5892-3ec2-af12-fcc001e218a5.jpg\[/img\]  
  
\[b\]\[color=cyan\]\[size=x-large\]核心代码如下\[/size\]\[/color\]\[/b\]

Class.forName("sun.jdbc.odbc.JdbcOdbcDriver");//加载驱动
    		 	            try {
       
    		 	                //conn = DriverManager.getConnection(DB_URL);
    		 	                conn = DriverManager.getConnection("jdbc:odbc:ss","test.dbf","");//无密码则空字符串
    		 	                pstm = conn.prepareStatement("select * from test"); // 此处的XXB 为DBF数据文件的名字
    
    		 	                rs = pstm.executeQuery();

\[b\]\[color=green\]\[size=x-large\]至此，完美解决DBF数据库文件读取。网上的东西，太杂了，所以，我们要理智判断，取其精华，去其糟粕，为我所用。\[/size\]\[/color\]\[/b\]