Как я могу получить новый ip от tor каждый запрос в потоках?

Если вам нужны разные IP-адреса для каждого подключения, вы также можете использовать изоляцию потока. через SOCKS, указав разные комбинации прокси username:password для каждого соединения.

С помощью этого метода вам нужен только один экземпляр Tor, и каждый клиент запросов может использовать другой поток с другим выходным узлом.

Чтобы настроить это, добавьте уникальные учетные данные прокси для каждого объекта requests.session следующим образом: socks5h://username:password@localhost:9050

import random
from multiprocessing import Pool
import requests

def check_ip():
    session = requests.session()
    creds = str(random.randint(10000,0x7fffffff)) + ":" + "foobar"
    session.proxies = {'http': 'socks5h://{}@localhost:9050'.format(creds), 'https': 'socks5h://{}@localhost:9050'.format(creds)}
    r = session.get('http://httpbin.org/ip')
    print(r.text)


with Pool(processes=8) as pool:
    for _ in range(9):
        pool.apply_async(check_ip)
    pool.close()
    pool.join()

Браузер Tor изолирует потоки для каждого домена, устанавливая для учетных данных значение firstpartydomain:randompassword, где randompassword — это случайный одноразовый номер для каждого уникального собственного домена.

Если вы сканируете один и тот же сайт и вам нужны случайные IP-адреса, используйте случайную комбинацию имени пользователя и пароля для каждого сеанса. Если вы сканируете случайные домены и хотите использовать один и тот же канал для запросов к домену, используйте метод Tor Browser domain:randompassword для учетных данных.

У вас есть только один прокси-сервер, который прослушивает порт 9050. Все 3 процесса отправляют запросы параллельно через этот прокси-сервер, поэтому они используют один и тот же IP-адрес.

Что происходит:

1. Все 3 процесса просят прокси получить новый IP
2. Прокси-сервер либо запросит новый IP-адрес 3 раза, получит 3 ответа и применит последний, либо распознает, что уже ожидает новый IP-адрес, и проигнорирует 2 запроса, отвечая на 3 из них вместе. Это будет зависеть от реализации прокси.
3. Процессы отправляют свои запросы через прокси, что приводит к тому же IP-адресу.
4. Процессы завершаются и инициируются еще 3 процесса. Промыть и повторить.

Вот почему IP-адреса одинаковы для каждого блока из 3 запросов.
Вам понадобятся 3 независимых прокси-сервера, чтобы иметь 3 разных IP-адреса одновременно.

Возможное решение с использованием блокировок и при условии, что в фоновом режиме работают 3 прокси:

import contextlib, threading, time

_controller_ports = [
    # (Controller Lock, connection port, management port)
    (threading.Lock(), 9050, 9051),
    (threading.Lock(), 9060, 9061),
    (threading.Lock(), 9070, 9071),
]

def get_new_ip_for(port):
    with Controller.from_port(port=port) as controller:
        controller.authenticate(password="password")
        controller.signal(Signal.NEWNYM)
        time.sleep(controller.get_newnym_wait())

@contextlib.contextmanager
def get_port_with_new_ip():
    while True:
        for lock, con_port, manage_port in _controller_ports:
            if lock.acquire(blocking=False):
                get_new_ip_for(manage_port)
                yield con_port
                lock.release()
                break
        time.sleep(1)

def check_ip():
    with get_port_with_new_ip() as port:
        session = requests.session() 
        session.proxies = {'http': f'socks5h://localhost:{port}', 'https': f'socks5h://localhost:{port}'}
        r = session.get('http://httpbin.org/ip')
        print(r.text)

with Pool(processes=3) as pool:
    for _ in range(9):
        pool.apply_async(check_ip)
    pool.close()
    pool.join()