Truy cập hơn 6,9 triệu IP dân dụng xoay vòng trên toàn thế giới tại hơn 100 quốc gia.
Tỷ lệ thành công trung bình
Hỗ trợ khách hàng
Quốc gia mục tiêu
Scrapy cho phép bạn xoay vòng proxy theo yêu cầu, giúp bạn dễ dàng bỏ qua giới hạn tốc độ IP và các biện pháp phòng thủ chống sao chép mà không làm chậm quá trình thu thập dữ liệu.
Scrapy với các proxy theo vị trí địa lý cho phép thử nghiệm nội dung địa phương, thu thập giá quốc tế hoặc theo dõi các đối thủ cạnh tranh trong khu vực.
Proxy IPv6 cung cấp cho Scrapy quyền truy cập vào các dải IP lớn, cho phép thu thập dữ liệu song song với khối lượng lớn mà không gặp phải các vấn đề thường gặp về tình trạng khan hiếm IPv4.
Add or modify a downloader middleware: class ProxyMiddleware: def process_request(self, request, spider): request.meta['proxy'] = 'http://ip:port' Activate it in DOWNLOADER_MIDDLEWARES.
Thêm tiêu đề HTTP Basic Auth theo cách thủ công: import base64 class ProxyAuthMiddleware: def process_request(self, request, spider): request.meta['proxy'] = 'http://ip:port' user_pass = base64.b64encode(b'user:pass').decode('utf-8') request.headers['Proxy-Authorization'] = 'Basic ' + user_pass
Sử dụng danh sách proxy và chỉ định proxy cho mỗi yêu cầu: import random class RotateProxyMiddleware: def __init__(self, proxies): self.proxies = proxies @classmethod def from_crawler(cls, crawler): return cls(proxies=crawler.settings.getlist('PROXY_LIST')) def process_request(self, request, spider): request.meta['proxy'] = random.choice(self.proxies)
Phần lớn các câu hỏi thường gặp đã được giải đáp, nếu có thêm bất kỳ câu hỏi nào khác, xin vui lòng liên hệ với chúng tôi.
Có, nhưng yêu cầu phải cài đặt PySocks. Đặt proxy là socks5://ip:port trong request.meta['proxy'].
Có. Bạn có thể thiết lập logic trong phần mềm trung gian của mình để khớp với các trình thu thập dữ liệu hoặc tên miền và chỉ định các proxy khác nhau theo điều kiện.
Không phải bản gốc. Đối với proxy đa bước, hãy sử dụng các công cụ đường hầm bên ngoài như ProxyChains hoặc định tuyến VPN tùy chỉnh bên ngoài Scrapy.
Yes. Use the HttpErrorMiddleware or check response.status codes to detect timeouts, bans, or redirects.
Tránh mã hóa cứng chúng. Sử dụng các biến môi trường hoặc tệp cấu hình được mã hóa và tải chúng vào cài đặt hoặc phần mềm trung gian của bạn.
United
States
United
Kingdom
Germany
Pháp
Mexico
Canada
Italy
Brazil
Rapidseedbox cung cấp dịch vụ proxy dân cư xoay vòng đáng tin cậy và hiệu quả với tỷ lệ thành công vượt trội 99,9%.
Tăng cường khả năng cho các dự án thu thập dữ liệu web của bạn bằng Proxy dân dụng xoay vòng từ bể hơn 6,9 triệu địa chỉ IP. Với phạm vi phủ sóng toàn cầu của các địa chỉ IP dân dụng, bạn có thể dễ dàng vượt qua các rào cản hạn chế địa lý.
Proxy dân dụng xoay vòng của Rapidseedbox mang đến tính linh hoạt và khả năng kiểm soát đặc biệt. Chúng có cả phiên cố định và phiên xoay vòng để quản lý địa chỉ IP một cách toàn diện. Các proxy rất dễ sử dụng với giao diện thân thiện với người dùng hay REST API linh hoạt.