wgetにrobots.txtの背後にあるcgiファイルをダウンロードさせる方法は?

wgetにrobots.txtの背後にあるcgiファイルをダウンロードさせる方法は?

たとえば -http://aok.heavengames.com/cgi-bin/aokcgi/display.cgi?action=t&fn=22

robots.txtの制限を克服する方法を見つけましたが、それでも何も読み取れないバイナリファイルだけをダウンロードするだけです。

ベストアンサー1

wget --user-agent=Mozilla \
  "http://aok.heavengames.com/cgi-bin/aokcgi/display.cgi?action=t&fn=22"

おすすめ記事