当前位置:首页 > 服务端 > perl读取大文件out of memory

perl读取大文件out of memory

perl读取大文件out of memory

工作需要用perl写了一个脚本读取1G多的文件,直接报out of memory,对perl不是很熟悉就上网查了资料,后来发现是因为写的读取文件内容时直接将所有文件内容读入数组导致这个问题。

1  open (FILE_IN , " <xxx.txt> " ); 
2  foreach   $perIns ( < FILE_IN > )
3  {
4     # done 
5  }

 

 

这里将1G多的文件都写到了一个临时的数组中了,只要需要改写一下读取文件的方式,读一行处理一行。 

 while(defined(<FILE_IN>))  is OK

 

1  open (FILE_IN , " <xxx.txt> " ); 
2  while ( defined ( $perIns   =   < FILE_IN > ))
3  {
4     # done 
5 

作者:lucyjiayou
来源链接:https://www.cnblogs.com/lucyjiayou/archive/2012/09/13/2682801.html

版权声明:
1、Java侠(https://www.javaxia.com)以学习交流为目的,由作者投稿、网友推荐和小编整理收藏优秀的IT技术及相关内容,包括但不限于文字、图片、音频、视频、软件、程序等,其均来自互联网,本站不享有版权,版权归原作者所有。

2、本站提供的内容仅用于个人学习、研究或欣赏,以及其他非商业性或非盈利性用途,但同时应遵守著作权法及其他相关法律的规定,不得侵犯相关权利人及本网站的合法权利。
3、本网站内容原作者如不愿意在本网站刊登内容,请及时通知本站(javaclubcn@163.com),我们将第一时间核实后及时予以删除。





本文链接:https://www.javaxia.com/server/125662.html

标签: out of memory
分享给朋友:

“perl读取大文件out of memory” 的相关文章