Cách thiết lập proxy trong Selenium Java cho việc thu thập dữ liệu web mở rộng

import org.openqa.selenium.Proxy;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.chrome.ChromeDriver;
import org.openqa.selenium.chrome.ChromeOptions;
import io.github.bonigarcia.wdm.WebDriverManager;

public class Scraper {
    public static void main(String[] args) {
        // 1. Cài đặt WebDriver (sử dụng WebDriverManager cho tiện lợi)
        WebDriverManager.chromedriver().setup();

        // 2. Định nghĩa chi tiết proxy (IP:PORT)
        String proxyAddress = "184.169.154.119:80";

        // 3. Tạo một đối tượng Proxy và thiết lập các proxy HTTP và SSL
        Proxy proxy = new Proxy();
        proxy.setHttpProxy(proxyAddress);
        proxy.setSslProxy(proxyAddress);

        // 4. Tạo đối tượng ChromeOptions và thiết lập các tùy chọn proxy
        ChromeOptions options = new ChromeOptions();
        options.setProxy(proxy);
        options.addArguments("--headless=new"); // Tùy chọn: chạy ở chế độ headless

        // 5. Tạo phiên bản driver với các tùy chọn đã cấu hình
        WebDriver driver = new ChromeDriver(options);

        // 6. Điều hướng đến một URL kiểm tra
        driver.get("https://httpbin.io/ip");
        
        // ... phần còn lại của logic thu thập dữ liệu của bạn
        driver.quit();
    }
}

import java.util.ArrayList;
import java.util.List;
import java.util.Random;
// ... các imports khác

public class RotatingScraper {
    public static void main(String[] args) {
        // ... cài đặt WebDriver

        // 1. Định nghĩa một danh sách các địa chỉ proxy (IP:PORT)
        List<String> proxyList = new ArrayList<>();
        proxyList.add("190.61.88.147:8080");
        proxyList.add("13.231.166.96:80");
        proxyList.add("35.213.91.45:80");

        // 2. Chọn ngẫu nhiên một proxy cho phiên
        Random rand = new Random();
        String proxyAddress = proxyList.get(rand.nextInt(proxyList.size()));

        // 3. Cấu hình đối tượng Proxy với địa chỉ được chọn ngẫu nhiên
        Proxy proxy = new Proxy();
        proxy.setHttpProxy(proxyAddress);
        proxy.setSslProxy(proxyAddress);

        // 4. Thiết lập các tùy chọn proxy trong ChromeOptions
        ChromeOptions options = new ChromeOptions();
        options.setProxy(proxy);
        // ... các tùy chọn khác

        // 5. Tạo phiên bản driver
        WebDriver driver = new ChromeDriver(options);
        // ... logic thu thập dữ liệu
    }
}

Để thực hiện web scraping chuyên nghiệp dựa trên Java, chất lượng của mạng proxy của bạn là điều rất quan trọng. Các proxy Scrapeless được thiết kế để cung cấp tốc độ, độ tin cậy và sự ẩn danh cần thiết cho các hoạt động Selenium quy mô lớn.

**Proxy Đặt Cư** từ Scrapeless được khuyên dùng cho các dự án Selenium Java, vì chúng cung cấp địa chỉ IP thực mà có khả năng bị phát hiện và chặn bởi các hệ thống chống bot tinh vi thấp hơn nhiều. Hơn nữa, các **Proxy ISP Tĩnh** của họ cung cấp sự cân bằng hoàn hảo giữa độ tin cậy của nhà ở và tốc độ ổn định, điều này lý tưởng cho việc duy trì một môi trường scraping ổn định. Bằng cách sử dụng dịch vụ như Scrapeless, bạn có thể đảm bảo rằng <a href="https://www.scrapeless.com/vi/wiki/scrapeless-browser-full-guide-2026" rel="nofollow">**trình duyệt scraping**</a> của bạn luôn hoạt động với một địa chỉ IP sạch, có uy tín cao.

<div style="padding: 20px 0; text-align: center;">
  <a
    style="
      margin: 8px;
      display: inline-block;
      text-decoration: none;
    "
    href="https://www.goproxy.com/register?link=https://app.scrapeless.com/passport/login?utm_source=official&utm_medium=blog&utm_campaign=nebula-proxy"
  >
    <div
      style="
        font-weight: bold;
        width: 100%;
        max-width: 400px;
        padding: 12px 40px;
        background: #12A594;
        border-radius: 5px;
        border: 2px solid #12A594;
        color: #fff;
        cursor: pointer;
        box-sizing: border-box;
        font-size: 18px;
      "
    >
      Thử Miễn Phí &gt;
    </div>
  </a>
</div>

### Câu Hỏi Thường Gặp (FAQ)

**Q: Tôi có thể sử dụng các thuộc tính hệ thống Java để cài đặt proxy cho Selenium không?**
A: Mặc dù bạn có thể thiết lập các thuộc tính hệ thống như `System.setProperty("http.proxyHost", "...")`, nhưng điều này chỉ ảnh hưởng đến ngăn xếp mạng Java bên dưới và **không** ảnh hưởng đến trình duyệt được Selenium điều khiển. Bạn phải sử dụng đối tượng `Proxy` với `ChromeOptions` để cấu hình cài đặt mạng của trình duyệt.

**Q: Sự khác biệt giữa cài đặt proxy HTTP và SSL trong đối tượng `Proxy` là gì?**
A: Phương thức `setHttpProxy()` cấu hình proxy cho lưu lượng HTTP tiêu chuẩn, trong khi `setSslProxy()` cấu hình cho lưu lượng HTTPS (SSL/TLS) an toàn. Thực hành tốt nhất là thiết lập cả hai đến cùng một địa chỉ proxy để đảm bảo tất cả lưu lượng được chuyển hướng đúng cách.

**Q: Có tốt hơn khi sử dụng mở rộng proxy hoặc quản lý proxy cho xác thực không?**
A: Một trình quản lý proxy hoặc gateway thường được ưa chuộng cho việc scraping quy mô lớn, ở cấp độ sản xuất. Nó tập trung hóa xác thực và logic xoay vòng bên ngoài mã Selenium của bạn, làm cho kịch bản scraping của bạn sạch hơn và mạnh mẽ hơn đối với các thay đổi.

***

# Tài Liệu Tham Khảo

[1] <a href="https://www.gnu.org/software/wget/manual/html_node/Wgetrc-File.html" rel="nofollow">**Hướng Dẫn GNU Wget: Tệp Wgetrc**</a>
[2] <a href="https://www.geeksforgeeks.org/web-scraping-using-wget/" rel="nofollow">**GeeksforGeeks: Web Scraping bằng Wget**</a>
[3] <a href="https://www.selenium.dev/documentation/webdriver/getting_started/install_libs/" rel="nofollow">**Tài Liệu Selenium: Cài Đặt Thư Viện**</a>
[4] <a href="https://www.oracle.com/java/technologies/javase/proxy.html" rel="nofollow">**Oracle Java Networking và Proxies**</a>
[5] <a href="https://www.baeldung.com/java-selenium-proxy" rel="nofollow">**Baeldung: Selenium với Proxy trong Java**</a>
[6] <a href="https://www.w3.org/TR/WD-proxy-req" rel="nofollow">**Dự Thảo Làm Việc W3C: Yêu Cầu về Proxy**</a>
[7] <a href="https://www.scrapeless.com/vi/wiki/what-is-headless-browser" rel="nofollow">**Wiki Scrapeless: Trình Duyệt Không Giao Diện Là Gì**</a>
[8] <a href="https://www.scrapeless.com/vi/wiki/best-web-scraping-services-with-the-fastest-headless-browsers" rel="nofollow">**Wiki Scrapeless: Dịch Vụ Web Scraping Tốt Nhất**</a>
[9] <a href="https://www.scrapeless.com/vi/wiki/web-scraping-with-lxml" rel="nofollow">**Wiki Scrapeless: Web Scraping với LXML**</a>
[10] <a href="https://www.scrapeless.com/vi/wiki/recommended-free-automated-data-collection-tools" rel="nofollow">**Wiki Scrapeless: Công Cụ Thu Thập Dữ Liệu Tự Động Miễn Phí Được Khuyên Dùng**</a>
[11] <a href="https://www.scrapeless.com/vi/wiki/scrapeless-browser-full-guide-2026" rel="nofollow">**Wiki Scrapeless: Hướng Dẫn Toàn Diện về Trình Duyệt Scrapeless**</a>