100'den fazla ülkede dünya çapında 6,9 Milyondan fazla dönen konut IP'sine erişin
Ortalama başarı puanı
Müşteri desteği
Hedef ülke
Scrapy, istek başına proxy'leri döndürmenize izin vererek, taramayı yavaşlatmadan IP hızı sınırlarını ve kazıma önleme savunmalarını atlamayı kolaylaştırır.
Coğrafi bölgeye özgü proxy'lere sahip Scrapy, yerel içeriğin test edilmesine, uluslararası fiyatların toplanmasına veya bölgesel rakiplerin izlenmesine olanak tanır.
IPv6 proxy'leri Scrapy'ye büyük IP aralıklarına erişim sağlayarak tipik IPv4 kıtlığı sorunları olmadan yüksek hacimli, paralel kazıma sağlar.
Bir indirici ara yazılımı ekleyin veya değiştirin: class ProxyMiddleware: def process_request(self, request, spider): request.meta['proxy'] = 'http://ip:port' DOWNLOADER_MIDDLEWARES içinde etkinleştirin.
HTTP Basic Auth başlıklarını manuel olarak ekleyin: base64 içe aktar class ProxyAuthMiddleware: def process_request(self, request, spider): request.meta['proxy'] = 'http://ip:port' user_pass = base64.b64encode(b'user:pass').decode('utf-8') request.headers['Proxy-Authorization'] = 'Basic ' + user_pass
Bir proxy listesi kullanın ve istek başına proxy atayın: import random sınıf RotateProxyMiddleware: def __init__(self, proxies): self.proxies = proxies @classmethod def from_crawler(cls, crawler): return cls(proxies=crawler.settings.getlist('PROXY_LIST')) def process_request(self, request, spider): request.meta['proxy'] = random.choice(self.proxies)
Sorup sorabileceklerinizin çoğu aşağıda yanıtlanmıştır, ancak başka sorularınız varsa lütfen bizimle iletişime geçin.
Evet, ancak PySocks'un kurulu olması gerekir. Proxy'yi request.meta['proxy'] içinde socks5://ip:port olarak ayarlayın.
Evet. Örümcekleri veya etki alanlarını eşleştirmek ve koşullu olarak farklı proxy'ler atamak için ara yazılımınızda mantık ayarlayabilirsiniz.
Yerel olarak değil. Çok atlamalı proxy için, ProxyChains gibi harici tünelleme araçları veya Scrapy dışında özel VPN yönlendirmesi kullanın.
Evet. Zaman aşımlarını, yasakları veya yönlendirmeleri tespit etmek için HttpErrorMiddleware kullanın veya response.status kodlarını kontrol edin.
Bunları sabit kodlamaktan kaçının. Ortam değişkenlerini veya şifrelenmiş yapılandırma dosyalarını kullanın ve bunları ayarlarınıza veya ara yazılımlarınıza yükleyin.
Birleşik Devletler
Devletler
Birleşik Devletler
Krallık
Almanya
Fransa
Meksika
Kanada
İtalya
Brezilya
RapidSeedbox, olağanüstü % 99.9 başarı yüzdesiyle güvenilir ve verimli değişimli Konut Proxy'si hizmetleri sunar.
Web Kazıma (scraping) projelerinizi 6,9 milyondan fazla IP'den oluşan bir havuzdan değişen Konut Proxy'leri ile güçlendirin. Dünya çapında bir kapsama alanı ile Yerleşim yeri IP adresleri, coğrafi konum engellerini kolayca aşabilirsiniz.
RapidSeedbox'ın dönüşümlü olarak değişen Konut Proxy'leri olağanüstü esneklik ve kontrol sağlar. Çok yönlü IP adresi yönetimi için hem kalıcı hem de dönüşümlü oturumlara sahiptirler. Proxy'lerin kullanıcı dostu bir arayüz veya esnek bir REST API sayesinde kullanımı kolaydır.