java io读取写入文件效率比较

本贴最后更新于 2807 天前,其中的信息可能已经时过境迁
public class ReadTxtJson {
	
	public static String readTxtFile(String FileName) throws Exception {
		BufferedInputStream bufferedInputStream = null;
		ByteArrayOutputStream memStream = null;
		byte[] data = null;
		try {
			bufferedInputStream = new BufferedInputStream(new FileInputStream(FileName));
		    memStream = new ByteArrayOutputStream();
	        byte[] buffer = new byte[1024];
	        int len = 0;
	        while ((len = bufferedInputStream.read(buffer)) != -1){
	            memStream.write(buffer, 0, len);
	        }
	        data = memStream.toByteArray();        
		} catch (Exception e) {
			e.printStackTrace();
		}finally{
			try {  
	           	if(memStream != null){
	 				memStream.close();
	 			}
	 			if(bufferedInputStream != null){
	 				bufferedInputStream.close();
	 			}
           } catch (IOException e) {  
               e.getStackTrace();  
           }  
		}
		
		String s = new String(data);
		if(s != null){
			bufferedWriter(s,"D:\\FtpFile\\test1.txt");
        }
        return new String(data);
    }
	
	
	/** 
     * 以行为单位读写文件内容 
     *  
     * @param filePath 
     */  
    public static String readTxtFileJson(String filePath) throws Exception{
        File file = new File(filePath);  
        InputStreamReader read = null;
        StringBuffer sb = null;
        try {  
        	//判断文件是否存在
        	if(file.isFile() && file.exists()){ 
                read = new InputStreamReader(new FileInputStream(file),"utf-8");
                BufferedReader bufferedReader = new BufferedReader(read);
                sb = new StringBuffer();
                String lineTxt = null;
                while((lineTxt = bufferedReader.readLine()) != null){
                    sb.append(lineTxt);
                }
		    }else{
		        System.out.println("找不到指定的文件");
		    }
        } catch (Exception e) {  
            e.getStackTrace();  
        } finally {  
            if (read != null) {  
                try {  
                	 read.close();
                } catch (IOException e) {  
                    e.getStackTrace();  
                }  
            }  
        }  
        
        if(sb != null){
        	bufferedWriter(sb.toString(),"D:\\FtpFile\\test2.txt");
        }
        return sb != null ? sb.toString() : null; // GsonUtil.transJsonStrToObject(sb.toString(), KubeData.class)
    }  
	
    /**
     * 缓冲字符写入文件,写字符串,数组或字符数据
     * @param content
     * @throws Exception
     */
    public static void bufferedWriter(String content,String filePath) throws Exception{
    	FileWriter fw = null;
    	BufferedWriter bw = null;
    	try {
		   fw = new FileWriter(new File(filePath).getAbsoluteFile());
		   bw = new BufferedWriter(fw);
		   bw.write(content);
		} catch (Exception e) {
			e.printStackTrace();
		} finally{
			try {
				if(bw != null){
					bw.close(); 
				}
			} catch (IOException e) {
				e.printStackTrace();
			}
		}
    }
    
    /**
     * 文件输出流,必须将数据转换为字节,并保存到文件
     * @param content
     * @throws Exception
     */
    public static void fileOutputStream(String content,String filePath) throws Exception{
    	FileOutputStream fop = null;
    	try {
    	   fop = new FileOutputStream(new File(filePath));
		   byte[] contentInBytes = content.getBytes();
		   fop.write(contentInBytes);
		   fop.flush();
		} catch (Exception e) {
			e.printStackTrace();
		} finally{
		   try {
			    if (fop != null) {
			    	fop.close();
			    }
		   } catch (IOException e) {
		    e.printStackTrace();
		   }
		}
    }
    
    /**
     * 测试1:
     * 文件大小:2m
     * 读取:readTxtFileJson 行读,写入:bufferedWriter 缓冲字符写入
     * 用时:51秒
     * 
     * 读取:readTxtFile 缓冲读取,写入:bufferedWriter 缓冲字符写入
     * 用时:31秒
     * 
     * 测试2:
     * 文件大小:10m
     * 读取:readTxtFileJson 行读,写入:fileOutputStream 文件输出流写入
     * 用时:501秒
     * 
     * 读取:readTxtFile 缓冲读取,写入:fileOutputStream 文件输出流写入
     * 用时:172秒
     * 
     * 文件大小:10m
     * 读取:readTxtFileJson 行读,写入:bufferedWriter 缓冲字符写入
     * 用时:293秒
     * 
     * 读取:readTxtFile 缓冲读取,写入:bufferedWriter 缓冲字符写入
     * 用时:132秒
     * 
     * 总结:
     * 不按格式读取效率高写入文件后大小比源文件小:readTxtFile 缓冲读取,bufferedWriter 缓冲字符写入
     * 按格式读取效率偏低(是第一种方式的一倍左右)写入文件后大小比源文件大小相当:readTxtFileJson 行读 ,bufferedWriter 缓冲字符写入
     * @param args
     */
	public static void main(String[] args) {
		try {
			long date1 = System.currentTimeMillis();
			String s = readTxtFileJson("D://FtpFile//get_services.txt");
			//System.out.println(s);
			System.out.println(System.currentTimeMillis()-date1);
			
//			if(Util.isNotNull(kubeData)){
//				System.out.println(kubeData.getKind()+"=="+kubeData.getApiVersion());
//			}
			
			long date2 = System.currentTimeMillis();
			String s1 = readTxtFile("D://FtpFile//get_services.txt");
			//System.out.println(s1);
			System.out.println(System.currentTimeMillis()-date2);
		} catch (Exception e) {
			e.printStackTrace();
		}
	}
}
  • Java

    Java 是一种可以撰写跨平台应用软件的面向对象的程序设计语言,是由 Sun Microsystems 公司于 1995 年 5 月推出的。Java 技术具有卓越的通用性、高效性、平台移植性和安全性。

    3169 引用 • 8207 回帖 • 1 关注

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
  • 88250

    很细致哦,有的时候确实要实验才能更直观~

  • ouzhouyou

    JDK7 中加入了新的 IO API, 各种顺序读写

推荐标签 标签

  • OAuth

    OAuth 协议为用户资源的授权提供了一个安全的、开放而又简易的标准。与以往的授权方式不同之处是 oAuth 的授权不会使第三方触及到用户的帐号信息(如用户名与密码),即第三方无需使用用户的用户名与密码就可以申请获得该用户资源的授权,因此 oAuth 是安全的。oAuth 是 Open Authorization 的简写。

    36 引用 • 103 回帖 • 8 关注
  • CAP

    CAP 指的是在一个分布式系统中, Consistency(一致性)、 Availability(可用性)、Partition tolerance(分区容错性),三者不可兼得。

    11 引用 • 5 回帖 • 566 关注
  • Git

    Git 是 Linux Torvalds 为了帮助管理 Linux 内核开发而开发的一个开放源码的版本控制软件。

    205 引用 • 357 回帖
  • ActiveMQ

    ActiveMQ 是 Apache 旗下的一款开源消息总线系统,它完整实现了 JMS 规范,是一个企业级的消息中间件。

    19 引用 • 13 回帖 • 626 关注
  • 星云链

    星云链是一个开源公链,业内简单的将其称为区块链上的谷歌。其实它不仅仅是区块链搜索引擎,一个公链的所有功能,它基本都有,比如你可以用它来开发部署你的去中心化的 APP,你可以在上面编写智能合约,发送交易等等。3 分钟快速接入星云链 (NAS) 测试网

    3 引用 • 16 回帖
  • PostgreSQL

    PostgreSQL 是一款功能强大的企业级数据库系统,在 BSD 开源许可证下发布。

    22 引用 • 22 回帖 • 1 关注
  • Hexo

    Hexo 是一款快速、简洁且高效的博客框架,使用 Node.js 编写。

    21 引用 • 140 回帖 • 30 关注
  • sts
    2 引用 • 2 回帖 • 152 关注
  • Node.js

    Node.js 是一个基于 Chrome JavaScript 运行时建立的平台, 用于方便地搭建响应速度快、易于扩展的网络应用。Node.js 使用事件驱动, 非阻塞 I/O 模型而得以轻量和高效。

    138 引用 • 268 回帖 • 192 关注
  • AngularJS

    AngularJS 诞生于 2009 年,由 Misko Hevery 等人创建,后为 Google 所收购。是一款优秀的前端 JS 框架,已经被用于 Google 的多款产品当中。AngularJS 有着诸多特性,最为核心的是:MVC、模块化、自动化双向数据绑定、语义化标签、依赖注入等。2.0 版本后已经改名为 Angular。

    12 引用 • 50 回帖 • 427 关注
  • 开源中国

    开源中国是目前中国最大的开源技术社区。传播开源的理念,推广开源项目,为 IT 开发者提供了一个发现、使用、并交流开源技术的平台。目前开源中国社区已收录超过两万款开源软件。

    7 引用 • 86 回帖
  • WebSocket

    WebSocket 是 HTML5 中定义的一种新协议,它实现了浏览器与服务器之间的全双工通信(full-duplex)。

    48 引用 • 206 回帖 • 394 关注
  • 开源

    Open Source, Open Mind, Open Sight, Open Future!

    396 引用 • 3416 回帖
  • React

    React 是 Facebook 开源的一个用于构建 UI 的 JavaScript 库。

    192 引用 • 291 回帖 • 440 关注
  • 前端

    前端技术一般分为前端设计和前端开发,前端设计可以理解为网站的视觉设计,前端开发则是网站的前台代码实现,包括 HTML、CSS 以及 JavaScript 等。

    247 引用 • 1347 回帖 • 1 关注
  • 酷鸟浏览器

    安全 · 稳定 · 快速
    为跨境从业人员提供专业的跨境浏览器

    3 引用 • 59 回帖 • 23 关注
  • VirtualBox

    VirtualBox 是一款开源虚拟机软件,最早由德国 Innotek 公司开发,由 Sun Microsystems 公司出品的软件,使用 Qt 编写,在 Sun 被 Oracle 收购后正式更名成 Oracle VM VirtualBox。

    10 引用 • 2 回帖 • 6 关注
  • Oracle

    Oracle(甲骨文)公司,全称甲骨文股份有限公司(甲骨文软件系统有限公司),是全球最大的企业级软件公司,总部位于美国加利福尼亚州的红木滩。1989 年正式进入中国市场。2013 年,甲骨文已超越 IBM,成为继 Microsoft 后全球第二大软件公司。

    103 引用 • 126 回帖 • 446 关注
  • danl
    64 关注
  • Sandbox

    如果帖子标签含有 Sandbox ,则该帖子会被视为“测试帖”,主要用于测试社区功能,排查 bug 等,该标签下内容不定期进行清理。

    370 引用 • 1215 回帖 • 582 关注
  • ZooKeeper

    ZooKeeper 是一个分布式的,开放源码的分布式应用程序协调服务,是 Google 的 Chubby 一个开源的实现,是 Hadoop 和 HBase 的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。

    59 引用 • 29 回帖 • 23 关注
  • Flume

    Flume 是一套分布式的、可靠的,可用于有效地收集、聚合和搬运大量日志数据的服务架构。

    9 引用 • 6 回帖 • 596 关注
  • 知乎

    知乎是网络问答社区,连接各行各业的用户。用户分享着彼此的知识、经验和见解,为中文互联网源源不断地提供多种多样的信息。

    10 引用 • 66 回帖
  • Spark

    Spark 是 UC Berkeley AMP lab 所开源的类 Hadoop MapReduce 的通用并行框架。Spark 拥有 Hadoop MapReduce 所具有的优点;但不同于 MapReduce 的是 Job 中间输出结果可以保存在内存中,从而不再需要读写 HDFS,因此 Spark 能更好地适用于数据挖掘与机器学习等需要迭代的 MapReduce 的算法。

    74 引用 • 46 回帖 • 547 关注
  • Eclipse

    Eclipse 是一个开放源代码的、基于 Java 的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。

    75 引用 • 258 回帖 • 624 关注
  • PHP

    PHP(Hypertext Preprocessor)是一种开源脚本语言。语法吸收了 C 语言、 Java 和 Perl 的特点,主要适用于 Web 开发领域,据说是世界上最好的编程语言。

    164 引用 • 407 回帖 • 524 关注
  • Electron

    Electron 基于 Chromium 和 Node.js,让你可以使用 HTML、CSS 和 JavaScript 构建应用。它是一个由 GitHub 及众多贡献者组成的活跃社区共同维护的开源项目,兼容 Mac、Windows 和 Linux,它构建的应用可在这三个操作系统上面运行。

    15 引用 • 136 回帖 • 5 关注