☰

awk：コマンド。行：1：（FILENAME = file2split FNR = 1666）致命的：「CCTGGCAG_GATATAAC_HAP1」にリダイレクトできません（操作は許可されていません）。

tag-icon • tag-icon awk
awk：コマンド。行：1：（FILENAME = file2split FNR = 1666）致命的：「CCTGGCAG_GATATAAC_HAP1」にリダイレクトできません（操作は許可されていません）。

を使用してファイルの最初の列の値に基づいてファイルを複数のファイルに分割したいのですが、zcat file2split.gz | awk '{print>$1}'次のエラーが発生します。

awk: cmd. line:1: (FILENAME=file2split FNR=1666) fatal: can't redirect to `CCTGGCAG_GATATAAC_HAP1' (Operation not permitted)

どんなアイデアがありますか？ありがとうございます！

zipデータサイズは25Mbで、ここからダウンロードできます。 https://drive.google.com/file/d/1Qjq-ibdiyemBfuqpoC2h0VDhw09PS0ao/view?usp=sharing

ベストアンサー1

現在の出力ファイル名が変更されるたびに古いファイル名を閉じると、開かれたファイル制限が発生するのを防ぎます。例えば

awk '{ out=$1;
       if (out != lastfile) {
         if (lastfile != "") { close(lastfile) };
         lastfile = out
     };
     print > out'

ファイルを閉じて再度開くよりもはるかに優れています。すべて書く。最後に作成されてから名前が変更された場合にのみファイルを閉じます。ファイルがフィールド 1 でソートされると、ファイルを再度開く必要はありません。 「ほとんどソート」の場合、ファイルを再度開く必要はほとんどありません。

注：同じファイル名が複数回表示される場合隣接しないprint >> out行がある場合は、代わりに出力を追加する必要がありますprint > out。それ以外の場合、ファイルもう一度開く書き込みの場合、書き込み前に完全に上書きされます（つまり、ゼロサイズに切り捨てられます）。

（しかし、これが書き込み操作のたびにファイルが自動的に閉じられない理由の1つです。awkもちろん、もう1つの主な理由は、そうしないと、同じファイルを書き込むたびに閉じて再開すると多くの時間がかかるためです。 。

awkスクリプトの特定の実行で初めてファイルを上書きし、同じ実行で同じファイルが再び表示された場合は、追加する場合は少し複雑です。例えば

awk '{ out=$1;
       if (out != lastfile) {
         if (lastfile != "") { close(lastfile) };
         lastfile = out
     };

     if (seen[out]++) {
       print >> out
     } else {
       print > out
     }'

このバージョンでは、連想配列を使用して、seen以前に特定のファイル名を見たことがないかどうかを追跡します。その場合は追加してください。それ以外の場合は上書きします。

おすすめ記事