Java读取大文件方法

需求：实际开发中读取文本文件的需求还是很多，如读取两个系统之间FTP发送文件，读取后保存到数据库中或日志文件的数据库中保存等。

目前成都创新互联已为上千多家的企业提供了网站建设、域名、网络空间、网站托管、服务器托管、企业网站设计、武定网站维护等服务，公司将坚持客户导向、应用为本的策略，正道将秉承"和谐、参与、激情"的文化，与客户和合作伙伴齐心协力一起成长，共同发展。

为了测试首先利用数据库SQL生成大数据文件。

规则是编号|姓名|手机号，如 10|张10|13900000010

利用下面语句可以生成10,000,000条数据。

SELECT LEVEL||'|'||'张'||LEVEL||'|'||(13900000000+LEVEL) FROM DUAL CONNECT BY LEVEL < 1000000;

实现如下：

  
 
   
  package com.test.common.util; 
   
   
   
  import java.io.BufferedReader; 
   
  import java.io.File; 
   
  import java.io.FileInputStream; 
   
  import java.io.FileNotFoundException; 
   
  import java.io.FileReader; 
   
  import java.io.IOException; 
   
  import java.util.Scanner; 
   
   
   
  import org.apache.commons.io.FileUtils; 
   
  import org.apache.commons.io.LineIterator; 
   
   
   
  public class HandleTextFile { 
   
       
   
      // 使用commons-io.jar包的FileUtils的类进行读取 
   
      public static void readTxtFileByFileUtils(String fileName) { 
   
          File file = new File(fileName); 
   
          try { 
   
              LineIterator lineIterator = FileUtils.lineIterator(file, "UTF-8"); 
   
              while (lineIterator.hasNext()) { 
   
                  String line = lineIterator.nextLine(); 
   
                  System.out.println(line); 
   
              } 
   
          } catch (IOException e) { 
   
              e.printStackTrace(); 
   
          } 
   
      } 
   
       
   
      // 使用Scanner进行读取 
   
      public static void readTxtByScanner(String fileName) { 
   
          FileInputStream fileInputStream = null;  
   
          Scanner scanner = null; 
   
           
   
          try { 
   
              fileInputStream = new FileInputStream(fileName); 
   
              scanner = new Scanner(fileInputStream, "UTF-8"); 
   
              while (scanner.hasNext()) { 
   
                  String line = scanner.nextLine(); 
   
                  System.out.println(line); 
   
              } 
   
          } catch (FileNotFoundException e) { 
   
              e.printStackTrace(); 
   
          } finally { 
   
              if (fileInputStream != null) { 
   
                  try { 
   
                      fileInputStream.close(); 
   
                  } catch (IOException e) { 
   
                      e.printStackTrace(); 
   
                  } 
   
              } 
   
              if (scanner != null) { 
   
                  scanner.close(); 
   
              } 
   
          } 
   
           
   
      } 
   
   
   
      // 使用cache进行读取 
   
      public static void readTxtByStringBuffer(String fileName) throws IOException { 
   
          File file = new File(fileName); 
   
           
   
          BufferedReader reader = null; 
   
           
   
          try { 
   
              reader = new BufferedReader(new FileReader(file), 10 * 1024 * 1024); 
   
              String stringMsg = null; 
   
              while ((stringMsg = reader.readLine()) != null) { 
   
                  System.out.println(stringMsg); 
   
              } 
   
              reader.close(); 
   
          } catch (FileNotFoundException e) { 
   
              e.printStackTrace(); 
   
          }  
   
      } 
   
       
   
      public static void main(String[] args) { 
   
          try { 
   
              HandleTextFile.readTxtByStringBuffer("D:\\test\\customer_info.txt"); 
   
          } catch (IOException e) { 
   
              e.printStackTrace(); 
   
          } 
   
      } 
   
  }

参考文件：读取大文件性能测试

标题名称：Java读取大文件方法
文章位置：http://www.shufengxianlan.com/qtweb/news38/289388.html

网站建设、网络推广公司-创新互联，是专注品牌与效果的网站制作，网络营销seo公司；服务项目有等

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源：创新互联

猜你还喜欢下面的内容