4.8 Luar biasa

Pengaturan Proxy untuk Scrapy - Rotasi Bersih dan Perayapan Skala Tinggi

Dapatkan akses ke lebih dari 6,9 Juta IP residensial bergilir di seluruh dunia di lebih dari 100 negara

Pilih paket langgananmu

10 GB/bulan

€30/bulan $30/bulan

€3/GB

$3/GB

Fitur
  • Unlimited Threads
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
Fitur
  • Unlimited Threads
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
Populer

50 GB/bulan

€125/bulan $125/bulan

€2.5/GB

$2.5/GB

Fitur
  • Unlimited Threads
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
Fitur
  • Unlimited Threads
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
Populer

100 GB/bulan

€225/bulan $225/bulan

€2.25/GB

$2.25/GB

Fitur
  • Unlimited Threads
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
Fitur
  • Unlimited Threads
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
Populer

500 GB/bulan

€1000/bulan $1000/bulan

€2/GB

$2/GB

Fitur
  • Unlimited Threads
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
Fitur
  • Unlimited Threads
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
Populer
Pilih jumlah GB
Total: $0
Pilih jumlah GB
Total: $0
1
100+
$5 /GB
  • Unlimited Threads
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
  • Unlimited Threads
  • Otentikasi pengguna/password
  • Rotating/sticky sessions
  • Enkripsi SSL 256-bit
  • Kecepatan 100+ Mbps
  • Rentang IP Pool hingga 6,9 juta IP
  • 100+ negara
Uang kembali 24 jam Uang 14 hari jaminan kembali

99.9%

Rata-rata tingkat keberhasilan

24/7

Bantuan pelanggan

100+

Negara untuk target lokasi

Mengapa menggunakan proksi kami dengan Scrapy

IP ISP-Virgin Statis

Hindari blokir dan captcha dengan proksi berputar

Scrapy memungkinkan Anda merotasi proksi per permintaan, sehingga lebih mudah untuk mem-bypass batas laju IP dan pertahanan anti-scraping tanpa memperlambat perayapan.

IP ISP-Virgin Statis

Menargetkan SERP regional atau konten berpagar geografis

Scrapy dengan proksi geografis memungkinkan pengujian konten lokal, mengumpulkan harga internasional, atau melacak pesaing regional.

IP ISP-Virgin Statis

Pertahankan kecepatan dan skala dengan kumpulan proxy IPv6

Proksi IPv6 memberikan akses Scrapy ke rentang IP yang sangat besar, memungkinkan scraping paralel bervolume tinggi tanpa masalah kelangkaan IPv4.

Cara menggunakan proxy dengan Scrapy

1. Atur proxy di middlewares.py atau pengaturan

Menambah atau memodifikasi middleware pengunduh: class ProxyMiddleware: def process_request(self, request, spider): request.meta['proxy'] = 'http://ip:port' Aktifkan di DOWNLOADER_MIDDLEWARES.

2. Gunakan proxy yang diautentikasi

Menambahkan header HTTP Basic Auth secara manual: import base64 class ProxyAuthMiddleware: def process_request(self, request, spider): request.meta['proxy'] = 'http://ip:port' user_pass = base64.b64encode(b'user:pass').decode('utf-8') request.headers['Otorisasi-Proksi'] = 'Dasar' + user_pass

3. Memutar proxy secara dinamis

Gunakan daftar proksi dan tetapkan proksi per permintaan: impor acak class RotateProxyMiddleware: def __init__(self, proxy): self.proxies = proxies @classmethod def from_crawler(cls, crawler): return cls(proxies = crawler.settings.getlist('PROXY_LIST')) def process_request(self, request, spider): request.meta['proxy'] = random.choice(self.proxies)

Mengapa kami
Proxy?

Proxy yang Andal️
Proxy yang Andal
Dengan waktu aktif 99%, jaringan proxy residensial kami menjamin Anda tidak akan pernah mengalami gangguan atau waktu henti.
Jangkauan Global
Jangkauan Global
Layanan proxy Rapidseedbox menyediakan akses ke alamat IP dari lebih dari 100 negara, memungkinkan operasi global yang tepat.
IP Pool Super Besar
IP Pool Super Besar
Jaringan kami memiliki lebih dari 6,9 juta alamat IP rumah. Cakupan wilayah yang luas ini menjamin kualitas layanan dan kecepatan jelajah yang tak tertandingi.
Rotasi IP Otomatis
Rotasi IP Otomatis
Proksi residensial kami dirancang untuk secara otomatis merotasi alamat IP, sehingga Anda dapat menikmati pengalaman scraping yang mulus.
Clean Proxy
Clean Proxy
Dengan tingkat keberhasilan 99,9%, rentang IP kami bersih dan bersumber secara etis, memberi Anda proxy yang Anda butuhkan untuk menyelesaikan pekerjaan scraping Anda.

FAQ

Yuk, cari tahu berbagai pertanyaan yang sudah sering diajukan. Jika masih ada pertanyaan, hubungi kami, ya!

Apakah Scrapy mendukung proksi SOCKS5?

Ya, tetapi membutuhkan PySocks yang telah terinstal. Tetapkan proksi sebagai socks5://ip:port di request.meta['proxy'].

Dapatkah saya menetapkan proxy per spider atau per domain?

Ya. Anda dapat mengatur logika di middleware untuk mencocokkan spider atau domain dan menetapkan proksi yang berbeda secara bersyarat.

Apakah proxy chaining didukung di Scrapy?

Tidak secara bawaan. Untuk proksi multi-hop, gunakan alat tunneling eksternal seperti ProxyChains atau perutean VPN khusus di luar Scrapy.

Dapatkah Scrapy mendeteksi jika proxy gagal?

Ya. Gunakan HttpErrorMiddleware atau periksa kode response.status untuk mendeteksi batas waktu, larangan, atau pengalihan.

Bagaimana cara menyimpan kredensial proxy dengan aman di Scrapy?

Hindari melakukan hardcoding. Gunakan variabel lingkungan atau file konfigurasi terenkripsi dan muat di pengaturan atau perangkat lunak Anda.

Tersedia 100+ negara

Lokasi proxy terpopuler, termasuk:
flag img Amerika Serikat Amerika Serikat
gambar bendera Inggris Amerika Serikat Inggris
img bendera Jerman Jerman
img bendera Prancis Perancis
bendera meksiko img Meksiko
bendera kanada img Kanada
bendera italia img Italia
gambar bendera brazil Brasil