Pierwsze kroki: gateway, targetowanie i kod

Jak przetestować za pomocą curl?

Użyj -x dla proxy HTTP i --socks5-hostname dla SOCKS5; wariant -hostname wysyła nazwę hosta do proxy zamiast rozwiązywać ją na twoim urządzeniu.

# UAE, a new home IP on each new connection (each curl run)
curl -x http://USERNAME-country-ae:[email protected]:7777 https://ipinfo.io/json

# Riyadh, the same IP for 30 minutes (session id r1)
curl -x http://USERNAME-country-sa-city-riyadh-session-r1-ttl-30:[email protected]:7777 https://ipinfo.io/json

# Egypt over SOCKS5, hostname resolved by the proxy
curl --socks5-hostname gw.menaproxies.com:7778 -U USERNAME-country-eg:PASSWORD https://ipinfo.io/json

Jak korzystać z tego w Pythonie, z powtórkami?

Połączenia domowe pojawiają się i znikają, więc czasami żądanie może nie powieść się na wolnym lub rozłączonym IP. Spróbuj ponownie z nowym IP zamiast czekać: bez ID sesji każde powtórzenie dostaje nowe. Zakoduj hasło, jeśli zawiera znaki specjalne.

import time
from urllib.parse import quote
import requests

GATEWAY = "gw.menaproxies.com:7777"
USER, PASSWORD = "USERNAME", quote("PASSWORD", safe="")

def fetch(url, country, session=None, ttl=30, tries=3):
    for attempt in range(1, tries + 1):
        user = f"{USER}-country-{country}"
        if session:  # a new session ID per attempt, so each retry gets a new IP
            user += f"-session-{session}{attempt}-ttl-{ttl}"
        proxy = f"http://{user}:{PASSWORD}@{GATEWAY}"
        try:
            r = requests.get(url, proxies={"http": proxy, "https": proxy}, timeout=30)
            if r.status_code < 500:
                return r
        except requests.RequestException:
            pass
        if attempt < tries:
            time.sleep(2 * attempt)  # back off, then retry on a new IP
    raise RuntimeError(f"{url} failed {tries} times via {country}")

for cc in ["ae", "sa", "eg"]:
    print(cc, fetch("https://ipinfo.io/json", cc).json().get("country"))

Jak użyć tego w przeglądarce z Playwright?

Podaj gateway jako proxy przeglądarki i celowanie w nazwie użytkownika. Ustaw lokalizację i strefę czasową zgodną z krajem, aby strony wyświetlały się tak, jak dla lokalnego użytkownika.

from playwright.sync_api import sync_playwright

with sync_playwright() as p:
    browser = p.chromium.launch(proxy={
        "server": "http://gw.menaproxies.com:7777",
        "username": "USERNAME-country-sa-city-riyadh-session-pw1-ttl-30",
        "password": "PASSWORD",
    })
    context = browser.new_context(locale="ar-SA", timezone_id="Asia/Riyadh")
    page = context.new_page()
    page.goto("https://ipinfo.io/json")
    print(page.text_content("body"))
    browser.close()

Jakie miasta i operatorów mogę targetować?

Targetowanie miasta działa tam, gdzie pula ma online domowe IP w tym mieście. Lista zmienia się w ciągu dnia, więc sprawdź ją przed uruchomieniem na poziomie miasta: pokazuje ją panel i zwraca API z GET /v1/catalog/countries/{CC}/cities (duże litery w API, małe w nazwie użytkownika proxy) (zobacz dokumentację API). Jeśli miasto nie ma online IP, pomiń je i użyj targetowania na kraj.

Aby wybrać operatora, dodaj jego ASN: USERNAME-country-ae-asn-5384 exits na e& w ZEA. Targetowanie ASN nie kosztuje nic dodatkowego; GET /v1/catalog/countries/{CC}/asns pokazuje ASNy online w kraju, dostępność się różni.

Przydatne ID miast: dubai, abu_dhabi, sharjah (ZEA); riyadh, jeddah, dammam (Arabia Saudyjska); doha (Katar); cairo, alexandria, giza (Egipt); casablanca, rabat (Maroko); amman (Jordania); beirut (Liban).

Co zwykle idzie nie tak?

• 407 Proxy Authentication Required: błędna nazwa użytkownika lub hasło albo znak specjalny w haśle, który nie został zakodowany URL.
• Połączenie odrzucone lub timeout: zły port; klienci HTTP potrzebują 7777, klienci SOCKS5 7778.
• Exit w złym kraju: kod kraju jest brakujący lub błędny w nazwie użytkownika; kody to dwie małe litery.
• Brak IP w mieście: miasto nie ma obecnie online domowego IP; użyj targetowania na kraj albo spróbuj później.
• Żądanie odrzucone na bramce: cel jest w zablokowanej kategorii (Bankowe, rządowe i portale płatnicze oraz porty SMTP (wysyłka maili) 25, 465 i 587).
• Plan wyczerpany: plan zużył wszystkie GB; kup kolejny z salda.