perl处理大容量文件

工作中,经常会遇到一些大容量的文件需要处理,如果逐行处理可能消耗比较大,需要一段一段处理。

use strict;  
open my $fh,"<","your_file";  
my @lines;  
while (<$fh>) {  
    chomp;  
    push @lines,$_;  
    if (not $.%2) {  
        do_your_thing(@lines);  
        @lines = ();  
    }  
}  
close $fh;  
sub do_your_thing {  
    my @lines = @_;  
    .  
    .  
    .  
}

这个方法就可以先读取两行,处理一下,然后再读两行,再处理,从而实现分段处理。

来源:

http://blog.csdn.net/ace_fei/article/details/6342345

相关文章

1. 如何去重 #!/usr/bin/perl use strict; my %hash; while(...
最近写了一个perl脚本,实现的功能是将表格中其中两列的数据...
表的数据字典格式如下:如果手动写MySQL建表语句,确认麻烦,...
巡检类工作经常会出具日报,最近在原有日报的基础上又新增了...
在实际生产环境中,常常需要从后台日志中截取报文,报文的形...
最近写的一个perl程序,通过关键词匹配统计其出现的频率,让...