約30GBのファイルがあります。使っている、
awk ' $1 <= 2000 ' myfile.txt >> myfile_new.txt
ただし、しばらくするとこのエラーが発生します。
awk: read error (Bad address)
どうやらファイルが大きすぎてそうだと思います。これを克服する方法はありますか？私はまた何ができますか？私がしなければならないことは簡単です。列から2000未満の値を持つすべてのレコードを抽出する必要があります。
ベストアンサー1
mawk特に、大量のデータを処理するときに、このようなエラーを引き起こす可能性があるいくつかの最適化機能を使用している可能性があります。gawk同じ方法で実行すると、これらの問題は発生しない可能性があります。