知识大全 调整 JavaTM I/O 性能
Posted 文件
篇首语:坚硬的城市里没有柔软的爱情,生活不是林黛玉,不会因为忧伤而风情万种。本文由小常识网(cha138.com)小编为大家整理,主要介绍了知识大全 调整 JavaTM I/O 性能相关的知识,希望对你有一定的参考价值。
调整 JavaTM I/O 性能 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧!
调整 JavaTM I/O 性能 Glen McCluskey 翻译 cherami 这篇文章讨论和阐明了提供 JavaTM I/O 性能的多种技术 大多技术围绕调整磁盘文件 I/O 但是有些内容也同样适合网络 I/O 和窗口输出 第一部分技术讨论底层的I/O问题 然后讨论诸如压缩 格式化和串行化等高级I/O问题 然而这个讨论没有包含应用设计问题 例如搜索算法和数据结构 也没有讨论系统级的问题 例如文件高速缓冲 当我们讨论Java I/O时 值得注意的是Java语言采取两种截然不同的磁盘文件结构 一个是基于字节流 另一个是字符序列 在Java语言中一个字符有两个字节表示 而不是像通常的语言如c语言那样是一个字节 因此 从一个文件读取字符时需要进行转换 这个不同在某些情况下是很重要的 就像下面的几个例子将要展示的那样 低级 I/O 问题 加速I/O的基本规则 缓冲 读写文本文件 格式化的代价 随机访问 高级I/O问题 压缩 高速缓冲 分解 串行化 获取文件信息 更多信息 加速I/O的基本规则 作为这个讨论的开始 这里有几个如何加速I/O的基本规则: 避免访问磁盘 避免访问底层的操作系统 避免方法调用 避免个别的处理字节和字符 很明显这些规则不能在所有的问题上避免 因为如果能够的话就没有实际的I/O被执行 考虑下面的计算文件中的新行符( \\n )的三部分范例 方法 : read方法 第一个方法简单的使用FileInputStream的read方法: import java io *; public class intro public static void main(String args[]) if (args length != ) System err println( missing filename ); System exit( ); try FileInputStream fis = new FileInputStream(args[ ]); int cnt = ; int b; while ((b = fis read()) != ) if (b == \\n ) cnt++; fis close(); System out println(cnt); catch (IOException e) System err println(e); 然而这个方法触发了大量的底层运行时系统调用--FileInputStream read--返回文件的下一个字节的本机方法 方法 : 使用大缓冲区 第二种方法使用大缓冲区避免了上面的问题: import java io *; public class intro public static void main(String args[]) if (args length != ) System err println( missing filename ); System exit( ); try FileInputStream fis = new FileInputStream(args[ ]); BufferedInputStream bis = new BufferedInputStream(fis); int cnt = ; int b; while ((b = bis read()) != ) if (b == \\n ) cnt++; bis close(); System out println(cnt); catch (IOException e) System err println(e); BufferedInputStream read 从输入缓冲区获取下一个字节 仅仅只访问了一次底层系统 方法 : 直接缓冲 第三种方法避免使用 BufferedInputStream 而直接缓冲 因此排除了 read 方法的调用: import java io *; public class intro public static void main(String args[]) if (args length != ) System err println( missing filename ); System exit( ); try FileInputStream fis = new FileInputStream(args[ ]); byte buf[] = new byte[ ]; int cnt = ; int n; while ((n = fis read(buf)) != ) for (int i = ; i < n; i++) if (buf[i] == \'\\n\') cnt++; fis.close(); System.out.println(cnt); catch (IOException e) System.err.println(e); 对于一个1 MB 的输入文件,以秒为单位的执行时间是: intro1 6.9 intro2 0.9 intro3 0.4 或者说在最慢的方法和最快的方法间是17比1的不同。wIngWIt.Com 这个巨大的加速并不能证明你应该总是使用第三种方法,即自己做缓冲。这可能是一个错误的倾向特别是在处理文件结束事件时没有仔细的实现。在可读性上它也没有其它方法好。但是记住时间花费在哪儿了以及在必要的时候如何矫正是很有用。 方法2 或许是对于大多应用的 "正确" 方法. 缓冲 方法 2 和 3 使用了缓冲技术, 大块文件被从磁盘读取,然后每次访问一个字节或字符。缓冲是一个基本而重要的加速I/O 的技术,而且有几个类支持缓冲(BufferedInputStream 用于字节, BufferedReader 用于字符)。 一个明显得问题是: 缓冲区越大I/O越快吗?典型的Java缓冲区长1024 或者 2048 字节,一个更大的缓冲区有可能加速 I/O但是只能占很小的比重,大约5 到10%。 方法4: 整个文件 缓冲的极端情况是事先决定整个文件的长度,然后读取整个文件: import java.io.*; public class readfile public static void main(String args[]) if (args.length != 1) System.err.println("missing filename"); System.exit(1); try int len = (int)(new File(args[0]).length()); FileInputStream fis = new FileInputStream(args[0]); byte buf[] = new byte[len]; fis.read(buf); fis.close(); int cnt = 0; for (int i = 0; i < len; i++) if (buf[i] == \'\\n\') cnt++; System.out.println(cnt); catch (IOException e) System.err.println(e); 这个方法很方便,在这里文件被当作一个字节数组。但是有一个明显得问题是有可能没有读取一个巨大的文件的足够的内存。 缓冲的另一个方面是向窗口终端的文本输出。缺省情况下, System.out ( 一个PrintStream) 是行缓冲的,这意味着在遇到一个新行符后输出缓冲区被提交。对于交互来说这是很重要的,在那种情况下你可能喜欢在实际的输出前显示一个输入提示。 方法 5: 关闭行缓冲 行缓冲可以被禁止,像下面的例子那样: import java.io.*; public class bufout public static void main(String args[]) FileOutputStream fdout = new FileOutputStream(FileDescriptor.out); BufferedOutputStream bos = new BufferedOutputStream(fdout, 1024); PrintStream ps = new PrintStream(bos, false); System.setOut(ps); final int N = 100000; for (int i = 1; i <= N; i++) System.out.println(i); ps.close(); cha138/Article/program/Java/JSP/201311/19573相关参考
JavaI/OAPI之性能分析(下) 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧! 四注册与处理
测量磁盘I/O 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧!我怎样分离OracleI/O来使得性能
Java网络编程从入门到精通(31):非阻塞I/O简介 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧
分析JavaI/O的工作机制 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧! 网络I/O优化 网
Java网络编程从入门到精通(32):一个非阻塞I/O的例子 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看
减少ORACLE中的磁盘I/O 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧! 使用Muliple
I/O柜端子排拆线接线作业的危险点和控制措施如下:步骤或活动:I/O柜端子拆、接线危险点工具不合格或使用不当(伤害类型:触电)控制措施1、使用工具前应进行检查,不完整的工具不准使用。2、认真检查仪器仪
I/O柜端子排拆线接线作业的危险点和控制措施如下:步骤或活动:I/O柜端子拆、接线危险点工具不合格或使用不当(伤害类型:触电)控制措施1、使用工具前应进行检查,不完整的工具不准使用。2、认真检查仪器仪
JavaI/O流 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧! 面向字节的流类 一预定义的流对
不同平台的数据库异步I/O的使用 以下文字资料是由(全榜网网www.cha138.com)小编为大家搜集整理后发布的内容,让我们赶快一起来看一下吧! 一般说来异步I/