Python İstekleri modülü üzerinden HTTP istekleri yapmak, kıvrımın yapıldığı proxy ile çalışmaz mı? Niye ya?

Question

ben Bash

den

curl -v -u z:secret_key --proxy http://proxy.net:80 \ 
-H "Content-Type: application/json" https://service.com/data.json 

I have already seen this other post on proxies with the Requests module

arıyorum yanıtını almak mümkün bu kıvırın komutunu kullanarak Duyunca Python kodumu formüle yardımcı ama bir proxy aracılığıyla talepte gerekir . Bununla birlikte, uygun proxyleri sağlarken bile çalışmıyor. Belki sadece bir şey görmüyorum?

>>> requests.request('GET', 'https://service.com/data.json', \ 
>>> headers={'Content-Type':'application/json'}, \ 
>>> proxies = {'http' : "http://proxy.net:80",'https':'http://proxy.net:80'}, \ 
>>> auth=('z', 'secret_key')) 

Ayrıca, aynı python konsolunda bir istekte bulunabilmek için urllib'i kullanabilirim. Yalnızca bir https olmayan adresindeki istekleri denemek bile başarısız oluyor.

>>> requests.get('http://www.httpbin.org') 
Traceback (most recent call last): 
File "<stdin>", line 1, in <module> 
File "/Library/Python/2.6/site-packages/requests/api.py", line 79, in get 
    return request('get', url, **kwargs) 
File "/Library/Python/2.6/site-packages/requests/api.py", line 66, in request 
    prefetch=prefetch 
File "/Library/Python/2.6/site-packages/requests/sessions.py", line 191, in request 
    r.send(prefetch=prefetch) 
File "/Library/Python/2.6/site-packages/requests/models.py", line 454, in send 
    raise ConnectionError(e) 
requests.exceptions.ConnectionError: Max retries exceeded for url: 

İstekler çok zarif ve harika ancak bu örnekte nasıl başarısız olabilir? urllib/urllib2/httplib -

Answer 1

sorun aslında Python standart url erişim kütüphaneleri aittir. Hangi kütüphanenin tam suçlu olduğunu hatırlayamıyorum, ama basitlik adına, sadece urllib olarak adlandıralım. Ne yazık ki, urllib bir http (s) proxy'si üzerinden bir https sitesine erişim için gerekli olan HTTP Connect yöntemini uygulamamaktadır. Urllib kullanarak işlevselliği ekleme çabalarım başarılı olmadı (denediğimden beri bir süre geçti). Ne yazık ki, çalıştığımı bildiğim tek seçenek bu dava için pycurl kullanmaktır.

Ancak, piton istekleri aynı API neredeyse tam olduğunu nispeten temiz bir çözümdür, ama bir pycurl arka uç yerine piton standart kütüphaneleri kullanır.

kütüphane human_curl denir. Onu kendim kullandım ve harika sonuçlar aldım.

Answer 2

cevap yukarıda believeing ​​biz urllib3 Zaman aşımına uğradı Request gibi, Max url ile aşıldı tekrar indirilmesi doğru hataları verdi oysa

human_curl , Bilinmeyen hataları gibi hatalar verdi human_curl çalıştı.

Yani, biz geri urllib3 gitti urllib3 parçacığı güvenlidir. Şimdi biz buna sunucu/vekil, Ama emin değilim ile ilgisi olabilir Tahmin , Biz bunu çözmek olamaz, "Max aşıldı tekrar indirilmesi" olsun urllib3

Tek sorun ile mutluyuz.