Đưa ra yêu cầu bằng Python qua Tor

Question 1

Tôi muốn thực hiện nhiều yêu cầu GET bằng Tor đến một trang web. Tôi muốn sử dụng một địa chỉ ipad khác cho mỗi yêu cầu.

import socks
import socket
socks.set_default_proxy(socks.SOCKS5, "127.0.0.1", 9150)
socket.socket = socks.socksocket
import requests
print (requests.get('http://icanhazip.com')).content

Sử dụng cái này, tôi đã đưa ra một yêu cầu. Làm cách nào để thay đổi địa chỉ ipad khác?

Question 2

Đây là mã bạn muốn sử dụng (tải xuống gói gốc bằng cách sử dụng pip install stem)

from stem import Signal
from stem.control import Controller

with Controller.from_port(port = 9051) as controller:
    controller.authenticate(password='your password set for tor controller port in torrc')
    print("Success!")
    controller.signal(Signal.NEWNYM)
    print("New Tor connection processed")

Chúc may mắn và hy vọng rằng điều đó hiệu quả.

Question 3

Có 2 khía cạnh cho câu hỏi của bạn -

Đưa ra yêu cầu bằng Tor
Gia hạn kết nối theo yêu cầu (trong trường hợp của bạn, sau mỗi yêu cầu)

Phần 1

Cách đầu tiên dễ thực hiện với requeststhư viện mới nhất (trở lên của v2.10.0) với yêu cầu bổ sung về requests[socks]việc sử dụng proxy vớ.

Cài đặt -

pip install requests requests[socks]

Cách sử dụng cơ bản -

import requests

def get_tor_session():
    session = requests.session()
    # Tor uses the 9050 port as the default socks port
    session.proxies = {'http':  'socks5://127.0.0.1:9050',
                       'https': 'socks5://127.0.0.1:9050'}
    return session

# Make a request through the Tor connection
# IP visible through Tor
session = get_tor_session()
print(session.get("http://httpbin.org/ip").text)
# Above should print an IP different than your public IP

# Following prints your normal public IP
print(requests.get("http://httpbin.org/ip").text)

Phần 2

Để gia hạn IP Tor, tức là để có một IP thoát mới có thể nhìn thấy được, bạn cần có khả năng kết nối với dịch vụ Tor thông qua nó ControlPortvà sau đó gửi NEWNYMtín hiệu.

Cài đặt Tor bình thường không bật ControlPorttheo mặc định. Bạn sẽ phải chỉnh sửa tệp torrc của mình và bỏ ghi chú các dòng tương ứng.

ControlPort 9051
## If you enable the controlport, be sure to enable one of these
## authentication methods, to prevent attackers from accessing it.
HashedControlPassword 16:05834BCEDD478D1060F1D7E2CE98E9C13075E8D3061D702F63BCD674DE

Xin lưu ý rằng phần HashedControlPasswordtrên là dành cho mật khẩu "password". Nếu bạn muốn đặt một mật khẩu khác, hãy thay thế mật khẩu HashedControlPasswordtrong torrc bằng cách ghi lại đầu ra từ tor --hash-password "<new_password>"đâu <new_password>là mật khẩu bạn muốn đặt.

................................................... ..............................

Cảnh báo cho người dùng Windows: xem bài đăng tại đây .

Có một sự cố trên các cửa sổ khi cài đặt cho bộ điều khiển trong tệp torrc bị bỏ qua nếu tor được cài đặt bằng lệnh sau:

tor --service install

Để giải quyết vấn đề, sau khi chỉnh sửa tệp torrc của bạn, hãy nhập các lệnh sau:

tor --service remove
tor --service install -options ControlPort 9051

................................................... ..............................

Được rồi, bây giờ chúng ta đã cấu hình Tor đúng cách, bạn sẽ phải khởi động lại Tor nếu nó đang chạy.

sudo service tor restart

Tor bây giờ sẽ được thiết lập và chạy trên 9051 ControlPortmà qua đó chúng ta có thể gửi lệnh đến nó. Tôi thích sử dụng thư viện gốc chính thức để kiểm soát Tor.

Cài đặt -

pip install stem

Bây giờ bạn có thể gia hạn Tor IP bằng cách gọi hàm sau.

Gia hạn IP -

from stem import Signal
from stem.control import Controller

# signal TOR for a new connection 
def renew_connection():
    with Controller.from_port(port = 9051) as controller:
        controller.authenticate(password="password")
        controller.signal(Signal.NEWNYM)

Để xác minh rằng Tor có một IP thoát mới, chỉ cần chạy lại mã từ Phần 1. Vì lý do nào đó mà tôi không biết, bạn cần tạo một sessionđối tượng mới để sử dụng IP mới.

session = get_tor_session()
print(session.get("http://httpbin.org/ip").text)

Question 4

Bạn có thể sử dụng torrequestthư viện (phích cắm không biết xấu hổ). Nó có sẵn trên PyPI.

from torrequest import TorRequest

with TorRequest() as tr:
  response = tr.get('http://ipecho.net/plain')
  print(response.text)  # not your IP address

  tr.reset_identity()

  response = tr.get('http://ipecho.net/plain')
  print(response.text)  # another IP address, not yours

Question 5

Bạn có thể thử thực hiện giao thức tor thuần python Torpy . Không cần ứng dụng khách Tor gốc hoặc phụ thuộc vào Stem.

$ pip3 install torpy[requests]
...

$ python3.7
>>> from torpy.http.requests import TorRequests
>>> with TorRequests() as tor_requests:
...    print("build circuit")
...    with tor_requests.get_session() as sess:
...        print(sess.get("http://httpbin.org/ip").json())
...        print(sess.get("http://httpbin.org/ip").json())
...    print("renew circuit")
...    with tor_requests.get_session() as sess:
...        print(sess.get("http://httpbin.org/ip").json())
...        print(sess.get("http://httpbin.org/ip").json())
...
build circuit
{'origin': '23.129.64.190, 23.129.64.190'}
{'origin': '23.129.64.190, 23.129.64.190'}
renew circuit
{'origin': '198.98.50.112, 198.98.50.112'}
{'origin': '198.98.50.112, 198.98.50.112'}

Vì vậy, mỗi khi bạn nhận được phiên mới, bạn sẽ nhận được danh tính mới (về cơ bản bạn sẽ có mạch mới với nút thoát mới). Xem thêm các ví dụ khác tại tệp readme https://github.com/torpyorg/torpy

Question 6

Yêu cầu hỗ trợ proxy sử dụng giao thức SOCKS từ phiên bản 2.10.0.

import requests
proxies = {
    'http': 'socks5://localhost:9050',
    'https': 'socks5://localhost:9050'
}
url = 'http://httpbin.org/ip'
print(requests.get(url, proxies=proxies).text)

Question 7

Câu trả lời này hoàn thành câu trả lời của Ashish Nitin Patil cho windows (vui lòng cập nhật câu trả lời này)

Phần 2

ControlPort 9051
## If you enable the controlport, be sure to enable one of these
## authentication methods, to prevent attackers from accessing it.
HashedControlPassword 16:05834BCEDD478D1060F1D7E2CE98E9C13075E8D3061D702F63BCD674DE

Trên đây HashedControlPasswordlà mật khẩu. Nếu bạn muốn đặt một mật khẩu khác trong bảng điều khiển, hãy điều hướng đến \Tor Browser\Browser\TorBrowser\Torvà nhập các lệnh sau tor.exe --hash-password password_XYZ | more:). Nó sẽ cung cấp cho bạn một cái gì đó giống như HashedControlPassword 16:54C092A8...Đây là mật khẩu của bạn. Bây giờ bạn có thể thêm nó vào tệp torrc ( Tor Browser\Browser\TorBrowser\Data\Tor\torrc).

Sau đó, bạn sẽ cần khởi động lại Tor:

tor --service remove
tor --service install -options ControlPort 9051

Để kiểm tra xem loại đó có hoạt động netstat -ankhông, bây giờ bạn sẽ thấy rằng cổng 9051 đang mở.

Chú ý rằng tor --service install -...sẽ tạo ra Tor Win32 Service. Vì lý do nào đó, có vẻ như bạn phải dừng dịch vụ để sử dụng trình duyệt (chạy services.msc)

CHỈNH SỬA: bạn sẽ tìm thấy nhiều thông tin ở đây (Về số cổng và proxy, Tor, Privoxy, Tác nhân người dùng tự động chuyển đổi ...).

Question 8

Mã này hoạt động tốt. Sử dụng Tor, nó thay đổi địa chỉ IP sau mỗi lần yêu cầu.

import time, socks, socket
from urllib2 import urlopen
from stem import Signal
from stem.control import Controller

nbrOfIpAddresses=3

with Controller.from_port(port = 9051) as controller:
   controller.authenticate(password = 'my_pwd')
   socks.setdefaultproxy(socks.PROXY_TYPE_SOCKS5, "127.0.0.1", 9050)
   socket.socket = socks.socksocket   

   for i in range(0, nbrOfIpAddresses):
       newIP=urlopen("http://icanhazip.com").read()
       print("NewIP Address: %s" % newIP)
       controller.signal(Signal.NEWNYM)
       if controller.is_newnym_available() == False:
        print("Waitting time for Tor to change IP: "+ str(controller.get_newnym_wait()) +" seconds")
        time.sleep(controller.get_newnym_wait())
   controller.close()

Question 9

Bên requeststrong requesockslà siêu cũ, nó không có response.json()và nhiều thứ khác.

Tôi muốn giữ mã của mình sạch sẽ. Tuy nhiên, requestshiện tại chưa hỗ trợ vớ5 (để biết thêm chi tiết, hãy đọc chuỗi này https://github.com/kennethreitz/requests/pull/478 )

Vì vậy, bây giờ tôi đã sử dụng Privoxylàm proxy http kết nối Tor.

Cài đặt và cấu hình Privoxy trên Mac

brew install privoxy
vim /usr/local/etc/privoxy/config
# put this line in the config
forward-socks5 / localhost:9050 .
privoxy /usr/local/etc/privoxy/config

Cài đặt và cấu hình Privoxy trên Ubuntu

sudo apt-get install privoxy
sudo vim /etc/privoxy/config
# put this line in the config
forward-socks5 / localhost:9050 .
sudo /etc/init.d/privoxy restart

Bây giờ tôi có thể sử dụng Tor như một proxy http. Dưới đây là tập lệnh python của tôi.

import requests

proxies = {
  'http': 'http://127.0.0.1:8118',
}

print requests.get('http://httpbin.org/ip', proxies=proxies).text

Question 10

Một chức năng tốt để gia hạn IP của bạn. Ví dụ Windows

def renew_tor_ip():
    with Controller.from_port(port = 9051) as controller:
        controller.authenticate(password="aAjkaI19!!laksjd")
        controller.signal(Signal.NEWNYM)

Ví dụ về cách sử dụng

import requests
import time
from stem import Signal
from stem.control import Controller


def get_current_ip():
    session = requests.session()

    # TO Request URL with SOCKS over TOR
    session.proxies = {}
    session.proxies['http']='socks5h://localhost:9150'
    session.proxies['https']='socks5h://localhost:9150'

    try:
        r = session.get('http://httpbin.org/ip')
    except Exception as e:
        print(str(e))
    else:
        return r.text

#16:8EE7AEE3F32EEEEB605C6AA6C47B47808CA6A81FA0D76546ADC05F0F15 to aAjkaI19!!laksjd
#cmd shell "C:\Users\Arthur\Desktop\Tor Browser\Browser\TorBrowser\Tor\tor.exe" --hash-password aAjkaI19!!laksjd | more
#Torcc config
#ControlPort 9051
#HashedControlPassword 16:8EE7AEE3F32EEEEB605C6AA6C47B47808CA6A81FA0D76546ADC05F0F15

def renew_tor_ip():
    with Controller.from_port(port = 9051) as controller:
        controller.authenticate(password="aAjkaI19!!laksjd")
        controller.signal(Signal.NEWNYM)


for i in range(5):
    print(get_current_ip())
    renew_tor_ip()
    time.sleep(5)