Bagaimana saya bisa melihat seluruh permintaan HTTP yang dikirim oleh aplikasi Python saya?

Dalam kasus saya, saya menggunakan requestsperpustakaan untuk memanggil API PayPal melalui HTTPS. Sayangnya, saya mendapatkan pesan kesalahan dari PayPal, dan dukungan PayPal tidak dapat menemukan apa kesalahannya atau apa penyebabnya. Mereka ingin saya "Harap berikan seluruh permintaan, termasuk tajuk".

Bagaimana saya bisa melakukan itu?

Metode sederhana: aktifkan masuk dalam versi terbaru dari Permintaan (1.x dan lebih tinggi.)

Permintaan menggunakan http.clientdan loggingkonfigurasi modul untuk mengontrol verbositas logging, seperti dijelaskan di sini .

Demonstrasi

Kode dikutip dari dokumentasi tertaut:

import requests
import logging

# These two lines enable debugging at httplib level (requests->urllib3->http.client)
# You will see the REQUEST, including HEADERS and DATA, and RESPONSE with HEADERS but without DATA.
# The only thing missing will be the response.body which is not logged.
try:
    import http.client as http_client
except ImportError:
    # Python 2
    import httplib as http_client
http_client.HTTPConnection.debuglevel = 1

# You must initialize logging, otherwise you'll not see debug output.
logging.basicConfig()
logging.getLogger().setLevel(logging.DEBUG)
requests_log = logging.getLogger("requests.packages.urllib3")
requests_log.setLevel(logging.DEBUG)
requests_log.propagate = True

requests.get('https://httpbin.org/headers')

Contoh Output

$ python requests-logging.py 
INFO:requests.packages.urllib3.connectionpool:Starting new HTTPS connection (1): httpbin.org
send: 'GET /headers HTTP/1.1\r\nHost: httpbin.org\r\nAccept-Encoding: gzip, deflate, compress\r\nAccept: */*\r\nUser-Agent: python-requests/1.2.0 CPython/2.7.3 Linux/3.2.0-48-generic\r\n\r\n'
reply: 'HTTP/1.1 200 OK\r\n'
header: Content-Type: application/json
header: Date: Sat, 29 Jun 2013 11:19:34 GMT
header: Server: gunicorn/0.17.4
header: Content-Length: 226
header: Connection: keep-alive
DEBUG:requests.packages.urllib3.connectionpool:"GET /headers HTTP/1.1" 200 226

r = requests.get('https://api.github.com', auth=('user', 'pass'))

radalah tanggapan. Ini memiliki atribut permintaan yang memiliki informasi yang Anda butuhkan.

r.request.allow_redirects  r.request.headers          r.request.register_hook
r.request.auth             r.request.hooks            r.request.response
r.request.cert             r.request.method           r.request.send
r.request.config           r.request.params           r.request.sent
r.request.cookies          r.request.path_url         r.request.session
r.request.data             r.request.prefetch         r.request.timeout
r.request.deregister_hook  r.request.proxies          r.request.url
r.request.files            r.request.redirect         r.request.verify

r.request.headers memberi header:

{'Accept': '*/*',
 'Accept-Encoding': 'identity, deflate, compress, gzip',
 'Authorization': u'Basic dXNlcjpwYXNz',
 'User-Agent': 'python-requests/0.12.1'}

Kemudian r.request.datamemiliki tubuh sebagai pemetaan. Anda dapat mengonversi ini dengan urllib.urlencodejika mereka lebih suka:

import urllib
b = r.request.data
encoded_body = urllib.urlencode(b)

tergantung pada jenis responsnya, .data-atribut mungkin tidak ada dan .body-atribut ada di sana.

Anda dapat menggunakan HTTP Toolkit untuk melakukan hal ini.

Ini sangat berguna jika Anda perlu melakukan ini dengan cepat, tanpa perubahan kode: Anda dapat membuka terminal dari HTTP Toolkit, menjalankan kode Python dari sana seperti biasa, dan Anda akan dapat melihat konten lengkap dari setiap HTTP / HTTPS minta segera.

Ada versi gratis yang dapat melakukan semua yang Anda butuhkan, dan 100% open source.

Saya pencipta HTTP Toolkit; Saya benar-benar membangunnya sendiri untuk menyelesaikan masalah yang sama persis untuk saya beberapa waktu lalu! Saya juga mencoba men-debug integrasi pembayaran, tetapi SDK mereka tidak berfungsi, saya tidak tahu mengapa, dan saya perlu tahu apa yang sebenarnya terjadi untuk memperbaikinya dengan benar. Ini sangat membuat frustrasi, tetapi bisa melihat lalu lintas mentah sangat membantu.

Jika Anda menggunakan Python 2.x, coba instal pembuka urllib2 . Itu akan mencetak header Anda, meskipun Anda mungkin harus menggabungkannya dengan pembuka lain yang Anda gunakan untuk menekan HTTPS.

import urllib2
urllib2.install_opener(urllib2.build_opener(urllib2.HTTPHandler(debuglevel=1)))
urllib2.urlopen(url)

The verbosepilihan konfigurasi mungkin memungkinkan Anda untuk melihat apa yang Anda inginkan. Ada contoh dalam dokumentasi .

CATATAN: Baca komentar di bawah ini: Opsi konfigurasi verbose tampaknya tidak tersedia lagi.