☰

URLを含むテキストファイルのカールページソース

tag-icon • tag-icon curl cat xargs url
URLを含むテキストファイルのカールページソース

最大100個のURLを含むテキストファイルがあります。以下を使用してページソースを取得できます。

cat /path/to/url.txt|xargs curl -o /path/to/output.txt

output.txtこれにより、すべてのURLのページソースがダウンロードされますが（コマンドラインに示すように）、リストの上部にあるURLのページソースのみが保存されます。

各URLのページソースを同じテキストファイルまたは必要に応じて別々のテキストファイルに保存するにはどうすればよいですか？

ありがとう、

ベストアンサー1

GNU Parallelを使用すると、複数のURLを並列に取得でき、出力の混在について心配する必要はありません。

cat /path/to/url.txt | parallel curl > /path/to/output.txt

おすすめ記事