☰

Python のリクエストライブラリを使用して「ユーザーエージェント」を送信する 質問する

tag-icon • tag-icon python web-crawler python-requests
Python のリクエストライブラリを使用して「ユーザーエージェント」を送信する 質問する

Python リクエストを使用して Web ページをリクエストするときに値を送信したいのですが、"User-agent"以下のコードのように、これをヘッダーの一部として送信してもよいかどうかわかりません。

debug = {'verbose': sys.stderr}
user_agent = {'User-agent': 'Mozilla/5.0'}
response  = requests.get(url, headers = user_agent, config=debug)

デバッグ情報には、リクエスト中に送信されるヘッダーが表示されません。

この情報をヘッダーで送信しても問題ありませんか? できない場合は、どのように送信すればよいですか?

ベストアンサー1

はuser-agentヘッダー内のフィールドとして指定する必要があります。

がここにありますHTTP ヘッダーフィールドのリスト、そしておそらくあなたは興味があるでしょうリクエスト固有のフィールド、これには が含まれますUser-Agent。

リクエストv2.13以降を使用している場合

必要なことを実行する最も簡単な方法は、次のように辞書を作成し、ヘッダーを直接指定することです。

import requests

url = 'SOME URL'

headers = {
    'User-Agent': 'My User Agent 1.0',
    'From': '[email protected]'  # This is another valid field
}

response = requests.get(url, headers=headers)

リクエストv2.12.x以前を使用している場合

古いバージョンではrequestsデフォルトのヘッダーが上書きされるため、デフォルトのヘッダーを保持して独自のヘッダーを追加するには、次の手順を実行する必要があります。

import requests

url = 'SOME URL'

# Get a copy of the default headers that requests would use
headers = requests.utils.default_headers()

# Update the headers with your custom ones
# You don't have to worry about case-sensitivity with
# the dictionary keys, because default_headers uses a custom
# CaseInsensitiveDict implementation within requests' source code.
headers.update(
    {
        'User-Agent': 'My User Agent 1.0',
    }
)

response = requests.get(url, headers=headers)

おすすめ記事