私のコンピュータはいくつかのファイルを自動的にダウンロードしたいと思います。これは必ずしも非常に効率的ではありません。だから私はこれのためにbashスクリプトを使うことにしました。
これまでのURLをエンコードするのにほとんど問題はありませんでした。しかし、不規則な順序でファイルを検索したいと思い、単純な変数を使用すると思いました。変数に乱数を入れるには?
私の方法
data_link0="https://example.com/target1.html"
data_link1="https://example.com/target2.html"
data_link2="https://example.com/target3.html"
data_link3="https://example.com/target4.html"
useragent0="Mozilla/5.0 (iPhone; CPU iPhone OS 10_0_1 like Mac OS X) AppleWebKit/602.1.50 (KHTML, like Gecko) Version/10.0 Mobile/14A403 Safari/602.1"
useragent1="Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_3) AppleWebKit/604.5.6 (KHTML, like Gecko) Version/11.0.3 Safari/604.5.6"
useragent3="Mozilla/5.0 (Windows 7; ) Gecko/geckotrail Firefox/firefoxversion"
wget --user-agent="$user_agent[$((RANDOM % 3))]" "$datei_link$((RANDOM % 3))"
残念ながら動作しません。
ベストアンサー1
すべてのURLを検索する必要がある場合は、次の方法を使用することをお勧めします。シェン(GNU/linux coreutils) (またはsort -R
coreutils):
shuf file | xargs wget
文書:
$ cat file
"https://example.com/target1.html"
"https://example.com/target2.html"
"https://example.com/target3.html"
"https://example.com/target4.html"
man 1 shuf
名前
shuf - ランダムな順列の生成
新しいコメント、新しい要件、新しいコード:
(任意のユーザーエージェントが必要)
$ cat uas
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/28.0.1500.52 Safari/537.36
Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/28.0.1500.52 Safari/537.36 OPR/15.0.1147.100
Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; AS; rv:11.0) like Gecko
パスワード:
shuf file | while read url; do
wget --user-agent="$(shuf -n1 uas)" "$url"
done
独自の方法で維持するには(URL):
data_link=(
"https://example.com/target1.html"
"https://example.com/target2.html"
"https://example.com/target3.html"
"https://example.com/target4.html"
)
user_agent=(
"Mozilla/5.0 (iPhone; CPU iPhone OS 10_0_1 like Mac OS X) AppleWebKit/602.1.50 (KHTML, like Gecko) Version/10.0 Mobile/14A403 Safari/602.1"
"Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_3) AppleWebKit/604.5.6 (KHTML, like Gecko) Version/11.0.3 Safari/604.5.6"
"Mozilla/5.0 (Windows 7; ) Gecko/geckotrail Firefox/firefoxversion"
)
wget --user-agent="${user_agent[RANDOM % ${#user_agent[@]} ]}" "${data_link[RANDOM % ${#data_link[@]}]}"
すべてのURLとユーザーエージェントの方法(すべてランダム):
for i in $(seq 0 $((${#data_link[@]} -1)) | shuf); do
wget -U "${user_agent[RANDOM % ${#user_agent[@]}]}" "${data_link[i]}"
done