Cách Sử Dụng HTTPX với Proxy Scrapeless: Hướng Dẫn Toàn Diện

import httpx
proxy_url = "http://localhost:8030"
with httpx.Client(proxy=proxy_url) as client:
    ip_info = client.get("https://geo.brdtest.com/mygeo.json")
    print(ip_info.text)

import httpx
username = "your-username"
zone = "your-zone-name"
password = "your-password"
proxy_url = f"http://scrapeless-customer-{username}-zone-{zone}:{password}@scrapeless.proxy.io:33335"
ip_info = httpx.get("https://geo.brdtest.com/mygeo.json", proxy=proxy_url)
print(ip_info.text)

{"country":"US","asn":{"asnum":20473,"org_name":"AS-VULTR"},"geo":{"city":"","region":"","region_name":"","postal_code":"","latitude":37.751,"longitude":-97.822,"tz":"America/Chicago"}}

import httpx
import asyncio
import random
countries = ["us", "gb", "au", "ca"]
username = "your-username"
proxy_url = "scrapeless.proxy.io:33335"
datacenter_zone = "your-zone"
datacenter_pass = "your-password"
for random_proxy in countries:
    print("----------thông tin kết nối-------------")
    datacenter_proxy = f"http://scrapeless-customer-{username}-zone-{datacenter_zone}-country-{random.choice(countries)}:{datacenter_pass}@{proxy_url}"
    ip_info = httpx.get("https://geo.brdtest.com/mygeo.json", proxy=datacenter_proxy)
    print(ip_info.text)

import httpx
from bs4 import BeautifulSoup
import asyncio
country = "us"
username = "your-username"
proxy_url = "scrapeless.proxy.io:33335"
datacenter_zone = "datacenter_proxy1"
datacenter_pass = "datacenter-password"
residential_zone = "residential_proxy1"
residential_pass = "residential-password"
cert_path = "/home/path/to/scrapeless_proxy_ca/New SSL certificate - MUST BE USED WITH PORT 33335/Scrapeless SSL certificate (port 33335).crt"
datacenter_proxy = f"http://scrapeless-customer-{username}-zone-{datacenter_zone}-country-{country}:{datacenter_pass}@{proxy_url}"
residential_proxy = f"http://scrapeless-customer-{username}-zone-{residential_zone}-country-{country}:{residential_pass}@{proxy_url}"
async def safe_get(url: str):
    async with httpx.AsyncClient(proxy=datacenter_proxy) as client:
        print("đang thử với trung tâm dữ liệu")
        response = await client.get(url)
        if response.status_code == 200:
            soup = BeautifulSoup(response.text, "html.parser")
            if not soup.select_one("form[action='/errors/validateCaptcha']"):
                print("phản hồi thành công")

Ví dụ này phức tạp hơn một chút so với các ví dụ khác mà chúng ta đã đề cập trong bài viết này.

- Chúng ta giờ đây có hai bộ biến cấu hình, một cho kết nối trung tâm dữ liệu và một cho kết nối dân cư.
- Lần này, chúng ta sử dụng một phiên `AsyncClient()` để giới thiệu một số chức năng tiên tiến hơn của HTTPX.
- Đầu tiên, chúng ta cố gắng thực hiện yêu cầu của mình với `datacenter_proxy`.
- Nếu chúng ta không nhận được phản hồi hợp lệ, chúng ta sẽ thử lại yêu cầu bằng cách sử dụng `residential_proxy`. Cũng lưu ý đến cờ `verify` trong mã. Khi sử dụng proxy dân cư của Scrapeless, bạn cần tải xuống và sử dụng chứng chỉ SSL của họ.
- Khi chúng ta đã nhận được phản hồi vững chắc, chúng ta ghi trang vào một tệp HTML. Chúng ta có thể mở trang này trong trình duyệt và xem những gì proxy thực sự truy cập và gửi lại cho chúng ta.

Nếu bạn thử đoạn mã ở trên, đầu ra và tệp HTML kết quả của bạn sẽ trông giống như sau:

## Cách mà Proxy Scrapeless Giúp

Như bạn có lẽ đã nhận thấy trong suốt bài viết này, **Scrapeless cung cấp một giải pháp proxy toàn diện** được thiết kế cho các nhu cầu thu thập dữ liệu hiện đại. Với hơn 90 triệu IP dân cư trải rộng trên 195+ quốc gia, tỷ lệ thành công lên tới 99,98%, và hỗ trợ cho một loạt các trường hợp sử dụng bao gồm thu thập dữ liệu web, nghiên cứu thị trường, giám sát giá, theo dõi SEO, xác thực quảng cáo, và bảo vệ thương hiệu, Scrapeless là lựa chọn lý tưởng cho cả quy trình làm việc dữ liệu doanh nghiệp và chuyên nghiệp.

<div style="padding: 20px 0; text-align: center;">
  <a
    style="
      margin: 8px;
      display: inline-block;
      text-decoration: none;
    "
    href="https://www.goproxy.com/register?link=https://app.scrapeless.com/passport/login?utm_source=official&utm_medium=blog-ai&utm_campaign=httpx-with-proxies"
  >
    <div
      style="
        font-weight: bold;
        width: 100%;
        max-width: 400px;
        padding: 12px 40px;
        background: #12A594;
        border-radius: 5px;
        border: 2px solid #12A594;
        color: #fff;
        cursor: pointer;
        box-sizing: border-box;
        font-size: 18px;
      "
    >
      Dùng thử miễn phí &gt;
    </div>
  </a>
</div>

### Proxy Dân Cư

Với hơn 90 triệu IP dân cư thực ở 195+ quốc gia, Proxy Dân Cư của Scrapeless rất lý tưởng cho việc thu thập dữ liệu, phân tích thị trường, theo dõi giá và nhiều hơn nữa.

**Tính năng chính:**
- Quay vòng proxy tự động
- Tỷ lệ thành công trung bình 99,98%
- Nhắm mục tiêu địa lý chính xác (quốc gia/thành phố)
- Giao thức HTTP/HTTPS/SOCKS5
- Thời gian phản hồi <0,5 giây
- Tốc độ và độ ổn định tuyệt vời
- Chỉ **$1.80/GB**

### Proxy IPv6

Proxy IPv6 tốc độ cao, chuyên dụng được thiết kế cho các tác vụ thu thập dữ liệu nặng.

**Tính năng:**
- Hỗ trợ HTTP(S) & SOCKS5
- Quay vòng proxy IPv6 tự động
- An ninh cao với IP chuyên dụng
- Bể IP IPv6 cao cấp 50M+
- Tuân thủ CCPA & GDPR
- Thanh toán theo GB

### Proxy Trung Tâm Dữ Liệu

Các IP trung tâm dữ liệu hiệu suất cao được tối ưu hóa cho tự động hóa quy mô lớn, thu thập dữ liệu hàng loạt và đồng thời lớn.

**Tính năng:**
- Thời gian hoạt động 99,99%
- Thời gian phản hồi cực nhanh
- Phiên ổn định lâu dài
- Truy cập API & tích hợp dễ dàng
- Băng thông cao, độ trễ thấp
- Hỗ trợ HTTP/HTTPS/SOCKS5

### Proxy ISP Tĩnh

Lý tưởng cho các hoạt động tài khoản thương mại điện tử (eBay, PayPal, Amazon), tính nhất quán danh tính lâu dài và rủi ro chặn thấp.

**Tính năng:**
- IP dân cư thực
- Thời gian hoạt động 99,99%
- Tỷ lệ chấp nhận cao & rủi ro cấm thấp
- Nhắm mục tiêu địa lý
- Giao thức HTTP/HTTPS/SOCKS5

## Kết Luận

Khi bạn kết hợp HTTPX với các proxy Scrapeless, bạn có một cách riêng tư, hiệu quả và đáng tin cậy để thu thập dữ liệu từ web. Nếu bạn muốn thay đổi proxy, thật đơn giản bằng cách sử dụng thư viện `random` tích hợp sẵn của Python. Với sự kết hợp giữa proxy trung tâm dữ liệu và proxy dân cư, bạn có thể tạo ra một kết nối thừa khả năng vượt qua hầu hết các hệ thống chặn.

Như bạn đã biết, **Scrapeless cung cấp toàn bộ gói cho các dự án thu thập dữ liệu web của bạn**. Với hơn 90 triệu IP, tỷ lệ thành công 99,98%, và sự bao phủ trên 195+ quốc gia, Scrapeless là lựa chọn lý tưởng để xử lý tất cả các nhu cầu thu thập dữ liệu của bạn - từ thu thập dữ liệu web và nghiên cứu thị trường đến theo dõi giá, theo dõi SEO, xác thực quảng cáo, và bảo vệ thương hiệu.

**Hãy bắt đầu dùng thử miễn phí với proxy Scrapeless ngay hôm nay!**