Wie man Python-Anfragen über den SOCKS-Proxy zum Laufen bringt

Question 1

Ich benutze die große Anfragen Bibliothek in meinem Python-Skript:

import requests
r = requests.get("some-site.com")
print r.text

Ich möchte den Socks-Proxy verwenden. Aber Requests unterstützt jetzt nur den HTTP-Proxy.

Wie kann ich das machen?

Question 2

Der moderne Weg:

pip install -U requests[socks]

dann

import requests

resp = requests.get('http://go.to', 
                    proxies=dict(http='socks5://user:pass@host:port',
                                 https="socks5://user:pass@host:port"))

Question 3

Ab requests Ausführung 2.10.0, veröffentlicht am 2016-04-29, requests unterstützt SOCKEN.

Es benötigt PySocks, die mit installiert werden kann pip install pysocks.

Beispielnutzung:

import requests
proxies = {'http': "socks5://myproxy:9191"}
requests.get('http://example.org', proxies=proxies)

Question 4

Falls jemand all diese älteren Antworten ausprobiert hat und immer noch auf Probleme stößt wie:

requests.exceptions.ConnectionError: 
   SOCKSHTTPConnectionPool(host="myhost", port=80): 
   Max retries exceeded with url: /my/path 
   (Caused by NewConnectionError('<requests.packages.urllib3.contrib.socks.SOCKSConnection object at 0x106812bd0>: 
   Failed to establish a new connection: 
   [Errno 8] nodename nor servname provided, or not known',))

Es kann daran liegen, dass standardmäßig requests ist so konfiguriert, dass DNS-Abfragen auf aufgelöst werden lokal Seite der Verbindung.

Versuchen Sie, Ihre Proxy-URL von zu ändern socks5://proxyhost:1234 zu socks5h://proxyhost:1234. Beachten Sie das Extra h (es steht für Hostnamenauflösung).

Die Standardeinstellung des PySocks-Paketmoduls ist die Remoteauflösung, und ich bin mir nicht sicher, warum Anfragen gestellt wurden ihre Integration dies obskur divergierend, aber hier sind wir.

Question 5

Sie müssen installieren Pysocks , meine Version ist 1.0 und der Code funktioniert für mich:

import socket
import socks
import requests
ip='localhost' # change your proxy's ip
port = 0000 # change your proxy's port
socks.setdefaultproxy(socks.PROXY_TYPE_SOCKS5, ip, port)
socket.socket = socks.socksocket
url = u'http://ajax.googleapis.com/ajax/services/search/images?v=1.0&q=inurl%E8%A2%8B'
print(requests.get(url).text)

Question 6

Sobald Python requests wird mit verschmolzen SOCKS5 Pull Request wird es so einfach wie die Verwendung tun proxies Wörterbuch:

#proxy
        # SOCKS5 proxy for HTTP/HTTPS
        proxies = {
            'http' : "socks5://myproxy:9191",
            'https' : "socks5://myproxy:9191"
        }

        #headers
        headers = {

        }

        url="http://icanhazip.com/"
        res = requests.get(url, headers=headers, proxies=proxies)

Sehen SOCKS-Proxy-Unterstützung

Eine weitere Option, falls Sie nicht warten können request um bereit zu sein, wenn Sie nicht verwenden können requesocks – wie bei GoogleAppEngine aufgrund des Fehlens von pwd eingebautes Modul, zu verwenden PySocks das wurde oben erwähnt:

Packe die socks.py Datei aus dem Repo und legen Sie eine Kopie in Ihrem Stammordner ab;
Hinzufügen import socks und import socket

Konfigurieren und binden Sie an dieser Stelle den Socket, bevor Sie ihn verwenden urllib2 – im folgenden Beispiel:

import urllib2
import socket
import socks

socks.set_default_proxy(socks.SOCKS5, "myprivateproxy.net",port=9050)
socket.socket = socks.socksocket
res=urllib2.urlopen(url).read()

Question 7

Sie können Ihr Skript einfach mit ausführen https_proxy Umgebungsvariable.

Installieren Sie bei Bedarf die Sockenunterstützung.

pip install PySocks
pip install pysocks5

Umgebungsvariable einrichten

export https_proxy=socks5://<hostname or ip>:<port>

Führen Sie Ihr Skript aus. Dieses Beispiel stellt eine Anfrage über einen Proxy und zeigt die IP-Adresse:

echo Your real IP
python -c 'import requests;print(requests.get("http://ipinfo.io/ip").text)'

echo IP with socks-proxy
python -c 'import requests;print(requests.get("https://ipinfo.io/ip").text)'

Question 8

# SOCKS5 proxy for HTTP/HTTPS
proxiesDict = {
    'http' : "socks5://1.2.3.4:1080",
    'https' : "socks5://1.2.3.4:1080"
}

# SOCKS4 proxy for HTTP/HTTPS
proxiesDict = {
    'http' : "socks4://1.2.3.4:1080",
    'https' : "socks4://1.2.3.4:1080"
}

# HTTP proxy for HTTP/HTTPS
proxiesDict = {
    'http' : "1.2.3.4:1080",
    'https' : "1.2.3.4:1080"
}