Nhật ký thay đổi hàng tuần của Scrapeless: Các bản cập nhật từ 12–18 tháng 10, 2026
Lead Scraping Automation Engineer
Tóm tắt ngắn:
- ChatGPT Scraper giờ trả về tần suất trích dẫn và siêu dữ liệu vị trí. Trường
cited_countvàindexmới bổ sung ngữ cảnh cho việc phân tích trích dẫn. - Copilot Scraper có thể trả về HTML của trang. Đặt
should_fetch_htmlthànhtrueđể yêu cầu HTML trong trường phản hồihtml. - Việc thực thi tác vụ AI Scraper nhanh hơn tổng thể. Tuần này cũng cải thiện việc phân tích Gemini và định dạng đầu ra, cùng với xử lý ngữ cảnh của Copilot.
- Trang sản phẩm TikTok Scraper đã được ra mắt. Nhà phát triển có thể khám phá các quy trình làm việc thu thập hồ sơ, bài đăng và bộ sưu tập sản phẩm Shop được hỗ trợ từ một điểm truy cập chuyên biệt.
- Scrapeless Anti-bot Detector miễn phí đã có sẵn. Tiện ích mở rộng Chrome xác định các tín hiệu chống bot, CAPTCHA và dấu vân tay trình duyệt được hỗ trợ với bằng chứng để kiểm tra.
Việc rà soát câu trả lời AI cần cả dữ liệu có cấu trúc và đủ ngữ cảnh để kiểm tra kết quả gốc. Bản phát hành ngày 12–18 tháng 10 bổ sung siêu dữ liệu trích dẫn cho ChatGPT Scraper và đầu ra HTML tùy chọn cho Copilot Scraper. Tuần này cũng mang lại việc thực thi tác vụ AI Scraper nhanh hơn, cải thiện phân tích, một trang TikTok Scraper riêng và tiện ích trình duyệt chẩn đoán miễn phí.
ChatGPT bổ sung tần suất và vị trí trích dẫn
Phản hồi từ ChatGPT Scraper giờ bao gồm cited_count và index cho việc phân tích trích dẫn.
| Trường | Ý nghĩa | Cách đội ngũ có thể sử dụng |
|---|---|---|
cited_count |
Số lần một nguồn tham chiếu được trích dẫn | So sánh mức độ lặp lại sử dụng nguồn trong một câu trả lời |
index |
Chỉ mục vị trí của trích dẫn trong phần nội dung câu trả lời | Xác định vị trí trích dẫn khi rà soát phản hồi |
Các trường này giúp các đội ngũ giám sát AI giữ được nhiều ngữ cảnh hơn so với một danh sách phẳng các URL nguồn. Lưu trữ siêu dữ liệu cùng với câu trả lời mà nó mô tả để người rà soát có thể kết nối tần suất và vị trí trích dẫn với cùng một kết quả. Việc trích dẫn lặp lại là một tín hiệu hữu ích để xem xét; nó không khẳng định rằng nguồn là chính xác.
Tài liệu tham khảo ChatGPT Scraper trình bày bề mặt yêu cầu và phản hồi rộng hơn. Tiêu chuẩn trao đổi dữ liệu JSON định nghĩa định dạng có cấu trúc dùng để lưu các trường như vậy; ý nghĩa của chúng thuộc về hợp đồng phản hồi của scraper.
Copilot bổ sung HTML trang tùy chọn
Copilot Scraper giờ chấp nhận should_fetch_html: true và trả về HTML trang được yêu cầu qua trường html.
Tùy chọn này hữu ích khi một đội ngũ muốn lưu giữ phần đánh dấu trang cùng với dữ liệu câu trả lời đã được phân tích để kiểm tra hoặc xử lý riêng. HTML Living Standard định nghĩa cú pháp tài liệu mà các ứng dụng làm việc cùng khi phân tích hoặc biến đổi phần đánh dấu đó.
| Chiều | Trường | Hành vi |
|---|---|---|
| Yêu cầu | should_fetch_html |
Đặt thành true để yêu cầu HTML trang |
| Phản hồi | html |
Chứa HTML được trả về |
Xem tài liệu tham khảo Copilot Scraper để biết hợp đồng tác nhân xung quanh khi thêm tùy chọn này vào một tích hợp.
Bắt đầu Scraping với Scrapeless
Tăng sức mạnh cho quy trình web scraping và tự động hóa của bạn với Scrapeless!
Đăng ký hôm nay và nhận 5 đô tín dụng miễn phí — không cần thẻ tín dụng.Nhận tín dụng miễn phí ngay trong Scrapeless Dashboard.
Cải thiện việc thực thi và đầu ra của AI Scraper
AI Scraper đã nhận được cải thiện tổng thể về tốc độ thực thi tác vụ trong tuần này. Không có mức giảm độ trễ cố định gắn với bản phát hành này; thời gian hoàn thành vẫn thay đổi tùy theo engine và yêu cầu.
Hai thay đổi cụ thể theo engine cải thiện việc xử lý kết quả:
- Gemini: việc phân tích dữ liệu và định dạng đầu ra đã được tinh chỉnh.
- Copilot: xử lý liên quan đến ngữ cảnh đã được cải thiện.
Cùng với các trường đầu ra mới, các cập nhật này cải thiện dữ liệu mà các đội ngũ nhận được và luồng tác vụ cung cấp dữ liệu đó.
Trang TikTok Scraper riêng đã hoạt động
Trang sản phẩm TikTok Scraper mới cung cấp một điểm truy cập cho các quy trình làm việc được hỗ trợ với hồ sơ công khai, bài đăng của nhà sáng tạo và sản phẩm TikTok Shop.
Trang này tổng hợp các khả năng thu thập hiện có dành cho nhà phát triển đang đánh giá dữ liệu TikTok cho nghiên cứu nhà sáng tạo hoặc phân tích thương mại. Về chi tiết triển khai, Hướng dẫn TikTok Scraper API giải thích các tác vụ thu thập được hỗ trợ.
Trình phát hiện Anti-bot miễn phí giúp kiểm tra bảo vệ trang
Scrapeless Anti-bot Detector là một tiện ích mở rộng Chrome miễn phí giúp nhận diện các hệ thống anti-bot và WAF được hỗ trợ, nhà cung cấp CAPTCHA và hoạt động lấy dấu vân tay trình duyệt. Tiện ích không yêu cầu tài khoản và hiển thị các công nghệ trùng khớp kèm bằng chứng hỗ trợ.
Hãy dùng tiện ích để kiểm tra một trang trước khi chọn cách tiếp cận thu thập. Thông tin phát hiện giúp phân biệt sự trùng khớp nhà cung cấp với hoạt động API quan sát được và cung cấp cho nhà phát triển các tín hiệu cụ thể để điều tra. Nền tảng tiện ích mở rộng Chrome cung cấp mô hình tích hợp trình duyệt cho các công cụ bổ sung loại chức năng duyệt web này.
Trình phát hiện là một công cụ chẩn đoán: một kết quả trùng khớp phản ánh các tín hiệu sẵn có, và không có trùng khớp không chứng minh rằng một website không có cơ chế bảo vệ. Tiện ích xác định công nghệ chứ không giải các thử thách.
Kết luận
Những bổ sung chính trong tuần này mang lại thêm ngữ cảnh cho quy trình trả lời bằng AI: ChatGPT có thêm dữ liệu tần suất trích dẫn và vị trí, trong khi Copilot có thể trả về HTML của trang. Việc thực thi tác vụ nhanh hơn và xử lý engine tinh chỉnh hỗ trợ các quy trình đó. Trang TikTok Scraper và trình Anti-bot Detector miễn phí bổ sung các điểm khởi đầu rõ ràng hơn cho việc lập kế hoạch thu thập và kiểm tra trang.
Khám phá AI Scraper thông qua Universal Scraping API, và xem lại bảng giá Scrapeless khi lập kế hoạch sử dụng cho môi trường sản xuất.
Sẵn sàng xây dựng với Scrapeless?
Tham gia cùng các nhà phát triển đang xây dựng quy trình trả lời bằng AI và quy trình dữ liệu web trong cộng đồng Scrapeless: Discord · Telegram.
Đăng ký tại app.scrapeless.com để bắt đầu.
Câu hỏi thường gặp
Hỏi: Những trường trích dẫn nào đã được thêm vào ChatGPT Scraper?
ChatGPT Scraper thêm cited_count cho tần suất trích dẫn và index cho chỉ số vị trí của trích dẫn trong phần nội dung câu trả lời.
Hỏi: Làm sao yêu cầu HTML từ Copilot Scraper?
Đặt should_fetch_html thành true. HTML của trang được yêu cầu sẽ được trả về trong trường phản hồi html.
Hỏi: Scrapeless Anti-bot Detector có miễn phí không?
Có. Scrapeless Anti-bot Detector là tiện ích mở rộng Chrome miễn phí, không yêu cầu tài khoản. Tiện ích báo cáo các tín hiệu bảo vệ và lấy dấu vân tay được hỗ trợ kèm bằng chứng phát hiện.
Tại Scrapless, chúng tôi chỉ truy cập dữ liệu có sẵn công khai trong khi tuân thủ nghiêm ngặt các luật, quy định và chính sách bảo mật trang web hiện hành. Nội dung trong blog này chỉ nhằm mục đích trình diễn và không liên quan đến bất kỳ hoạt động bất hợp pháp hoặc vi phạm nào. Chúng tôi không đảm bảo và từ chối mọi trách nhiệm đối với việc sử dụng thông tin từ blog này hoặc các liên kết của bên thứ ba. Trước khi tham gia vào bất kỳ hoạt động cạo nào, hãy tham khảo ý kiến cố vấn pháp lý của bạn và xem xét các điều khoản dịch vụ của trang web mục tiêu hoặc có được các quyền cần thiết.



