perl v5.10.0 built for i386-linux-thread-multi
OS: Fedora 9 (Linux localhost.localdomain 2.6.25.11-97.fc9.i686 #1 SMP Mon Jul 21 01:31:09 EDT 2008 i686 athlon i386 GNU/Linux)
巨大なテキストファイルの最終行を効率良く取得する方法を探しています。
検索を駆使して 6 日 6 晩試行錯誤したのですが、遂に見付けられなかった為、此所で質問させて頂きます。
私が知っている方法は以下の 3 つですが、何れも環境に依存するか、或いは効率が悪い等の理由で不完全です。
----------------
#!/usr/bin/perl
my $filename = './47GiB.txt';
my $file;
# 1.
print `tail -n 1 $filename`;
# 2.
open $file, $filename;
print +(<$file>)[- 1]; # print pop @{[<$file>]};
close $file;
# 3.
open $file, $filename;
my $pos = 0;
while (<$file>) {
$pos = tell $file unless eof $file;
}
seek $file, $pos, 0;
print <$file>;
close $file;
----------------
tail コマンドの様に、瞬時に最終行を読み出す方法は無いのでしょうか ?
御回答宜しくお願いします。
No.3ベストアンサー
- 回答日時:
すみません, 「1回は読まないといけない」はウソです.
一度ファイルの最後までシークして, あとは
・適当な分だけ戻る
・read かなにかで読み込む
・改行があったら, そこからあとを「最後の行」とする
という感じでいけると思います. これだと実行時間はファイル全体の大きさに関係なく, 最後の行の長さにのみ依存するはずです. 最後の行に改行があるかないかまで考えるとちょっと嫌ですが.
以下の様なコードを書いて見ました。
----------------
use feature qw(:5.10);
my $filename = './47GiB.txt';
my $final;
open my $file, $filename or die "$filename: $!\n";
for (my $i = - 2;; $i --) {
last if eof $file;
seek $file, $i, 2;
my $line = <$file>;
next unless defined $line;
chomp $line;
last if $line eq '';
$final = $line;
}
say $final;
close $file;
----------------
最終行が空行の場合に $final は空文字列に成るべきかも知れませんが、一先ず実用上は問題無さそうです。
御回答有難う御座いました。
No.5
- 回答日時:
File::Readbacwards
を使うってのは駄目なんだろうか.
seekして最後から探してくれるCPANモジュール.
PurePerlだし,必要な処理だけ移植するのも
難しくなさそう.
PerlHacksで紹介されてるくらいだから
きっと便利なものでしょう.
File::ReadBackwards を使う事にします。
御回答有難う御座いました。
大変貴重なモジュールを御紹介頂き、重ねて感謝申し上げます。
http://search.cpan.org/dist/File-ReadBackwards/R …
http://perldoc.jp/docs/modules/File-ReadBackward …
----------------
use File::ReadBackwards;
print File::ReadBackwards->new('./47GiB.txt')->readline;
No.4
- 回答日時:
No.1
- 回答日時:
こんなのありましたけど(参考URL参照)。
2. が単純な形で最も効率がいいように思いますけどなんかダメ
だったんでしょうか。
参考URL:http://tuka.s12.xrea.com/index.xcg?p=Perl#p5
この回答への補足
御回答誠に有難う御座います。
質問文の 3. のコードは、其のサイトのコードから着想を得て書いた物です。然し、速度が遅いです。
現在手元に件のテキストファイルが有るのですが、最終行を取得するのに可也の時間が掛かって仕舞って居ます。
より速いアルゴリズムはないのでしょうか ?
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
似たような質問が見つかりました
- CGI htmlからパラメータで、cgiに渡したい。 1 2023/02/06 16:15
- Perl perlのflock関数でロックをかけたままopen関数で何度もファイルを開きなおすことはできますか 3 2023/05/01 22:25
- その他(プログラミング・Web制作) Pythonを勉強しています。 5 2023/08/25 09:51
- その他(プログラミング・Web制作) python 2 2022/12/23 09:06
- UNIX・Linux Linuxの実行結果を修正したいです。 6 2022/11/22 12:57
- Visual Basic(VBA) vbaのエラー対応(実行時エラー7:メモリが不足しています) 4 2023/04/24 00:20
- C言語・C++・C# #include <stdio.h>int main(void) { int buf[100] = 6 2022/11/01 22:45
- C言語・C++・C# c言語の問題の説明、各所ごとに 5 2023/07/26 11:03
- その他(プログラミング・Web制作) python flask から fastapiへの移行時のエラー対処 1 2023/02/05 12:26
- Ruby 教えてください 2 2023/01/04 17:50
このQ&Aを見た人はこんなQ&Aも見ています
関連するカテゴリからQ&Aを探す
このQ&Aを見た人がよく見るQ&A
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
VBA テキストファイルを読み取...
-
Firefox で file:// で始まる U...
-
window.open でのファイル指定方法
-
perlで画像をダウンロードしよ...
-
awk '{print $1}' file をもっ...
-
フォルダ内のファイルを全て開...
-
read() on unopened filehandle...
-
並び方、
-
python renameについて
-
perlによる ファイル内容 検...
-
MATLABのm-fileについて
-
perlのソケットがうまく作動し...
-
VBAコードを張り付け後のエクセ...
-
perlでMail::Mbox::MessagePars...
-
csvファイルの横方向への改行に...
-
perlのDigest::MD5;でのMD5算出...
-
Cでのファイルからの入力および...
-
fopenでディレクトリ内の全ファ...
-
バッチファイルの作り方(CSV→...
-
ReadLineでの読み出し行を指定する
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
window.open でのファイル指定方法
-
csvファイルの横方向への改行に...
-
fgets で値が取得できない
-
MATLABのm-fileについて
-
JSP URLに表示される拡張子 .jsp
-
drtファイルはどうしたら開...
-
PerlでのUseless use...
-
python renameについて
-
巨大なテキストの最終行を取得...
-
ファイル全てを .xlsm に変更し...
-
Firefox で file:// で始まる U...
-
VBAコードを張り付け後のエクセ...
-
perl ファイルが開かない
-
ファイルの存在の有無を確かめ...
-
AutoNts
-
VBA テキストファイルを読み取...
-
fopen64について
-
行を指定して削除する方法PERL
-
文字列をカウントする方法
-
read() on unopened filehandle...
おすすめ情報