Pythonで匿名リクエストのためにHTTPXとプロキシを使用する方法

import httpx

# プロキシ設定の定義
proxies = {
    "http://": "http://216.137.184.253:80",
    "https://": "http://216.137.184.253:80"
}

# 指定されたプロキシでリクエストを行う
try:
    r = httpx.get("https://httpbin.io/ip", proxies=proxies)
    print(f"レスポンスIP: {r.json().get('origin')}")
except httpx.ProxyError as e:
    print(f"プロキシ接続に失敗しました: {e}")

import httpx

proxy_url = "http://216.137.184.253:80"

with httpx.Client(proxies=proxy_url) as client:
    r = client.get("https://httpbin.io/ip")
    print(f"レスポンスIP: {r.json().get('origin')}")

import httpx

# 資格情報を埋め込んだプロキシURL
proxy_url = "http://<YOUR_USERNAME>:<YOUR_PASSWORD>@proxy.scrapeless.com:1337"

with httpx.Client(proxies=proxy_url) as client:
    r = client.get("https://httpbin.io/ip")
    print(f"レスポンスIP: {r.json().get('origin')}")

import httpx
import random

# プロキシURLのリスト（例：Scrapelessダッシュボードから）
proxy_urls = [
    "http://user:pass@proxy1.scrapeless.com:10000",
    "http://user:pass@proxy2.scrapeless.com:10001",
    "http://user:pass@proxy3.scrapeless.com:10002",
]

def make_proxied_request(url):
    # リクエストのためにランダムなプロキシを選択
    random_proxy = random.choice(proxy_urls)
    
    # クライアントのためにプロキシを設定
    proxies = {
        "http://": random_proxy,
        "https://": random_proxy
    }

    try:
        with httpx.Client(proxies=proxies, timeout=10.0) as client:
            response = client.get(url)
            response.raise_for_status()
            return response
    except httpx.RequestError as e:
        print(f"{url}をプロキシ{random_proxy}経由でリクエスト中にエラーが発生しました: {e}")
        return None

# 使用例
response = make_proxied_request("https://targetwebsite.com/data")
if response:
    print(f"ステータスコード: {response.status_code}でデータを正常にスクレイピングしました")