Scrapestack API ile Web Sitelerini Değerli Veriler İçin Kazıyın

click fraud protection

İnternette bilgi bulmanın birçok harika yolu vardır. Yine de, özellikle çok spesifik şeyler arıyorsanız, bulunması daha zor olan bazı bilgiler var. Web kazıma hizmetleri bunun için harika bir araçtır. Hurda yığını kendi web kazıma işleminizi yönetmenize izin veren bir API'dir.

Web kazıyıcı, bir web sitesini ziyaret edecek ve belirli bir veri türünün kopyasını alacak bir araçtır. Her şeyi manuel olarak gözden geçirmek yerine, araması için kazıyıcı verilerini vermeniz yeterlidir; tüm işi o yapacaktır. Scrapestack, mevcut ücretsiz web sitesi kazıyıcılarından daha güçlüdür. Daha iyi güvenlik, daha iyi güvenilirlik ve birinci sınıf sunucu sağlar.

Başlarken

Birlikte başlamak Hurda yığını çok kolay. Öncelikle bir hesap oluşturmanız gerekecek. Hesabınız olduğunda size bir API anahtarı verilecektir. Şaşırtıcı olmayan bir şekilde, API'ye erişmek için kullanacağınız şey budur. Daha sonra istediğiniz herhangi bir web sitesinden veri çıkarmak için hedef URL'yi kullanabilirsiniz.

http://api.scrapestack.com/scrape? access_key=YOUR_ACCESS_KEY&url=https://microsoft.com

Yukarıdaki örnekte Microsoft'un web sitesini kazıyacaksınız. Tek yapmanız gereken API anahtarınızı uygun noktaya yerleştirmek ve en sonunda alan adını değiştirmek. Daha sonra sayfanın içeriği JavaScrip ve CSS stilleri olmadan size verilecektir.

İşleri daha da hassaslaştırmak için bu hedef URL'ye ekleyebileceğiniz başka parametreler de vardır.

access_key

[Gerekli] API ile kimlik doğrulaması yapmak için benzersiz API erişim anahtarınızı belirtin. API erişim anahtarınızı hesap kontrol panelinizde bulabilirsiniz.

url

[Gerekli] Kazımak istediğiniz web sayfasının URL'sini belirtin.

render_js

[isteğe bağlı] Şuna ayarla: 0 (kapalı, varsayılan) veya 1 (açık) hedef web sayfasında JavaScript'in oluşturulup oluşturulmayacağına bağlı olarak. JavaScript oluşturma, Google Chrome başsız tarayıcı kullanılarak yapılır.

keep_headers

[isteğe bağlı] Ayarla 0 (kapalı, varsayılan) veya 1 (açık), şu anda etkin olan HTTP başlıklarını API isteğinizle birlikte hedef URL'ye gönderip göndermeyeceğinize ve API'nin bu başlıkları API yanıtınızla birlikte döndürmesine bağlı olarak.

proxy_location

[isteğe bağlı] Kazıma API'si isteğiniz için proxy coğrafi konumu olarak bize istediğiniz ülkenin 2 harfli kodunu belirtin. Desteklenen ülkeler proxy türüne göre farklılık gösterir; lütfen bkz. Proxy Konumları ayrıntılar için bölüm.

premium_proxy

[isteğe bağlı] Ayarla 0 (kapalı, varsayılan) veya 1 (açık) kazıma talebiniz için premium konut proxy'lerinin etkinleştirilip etkinleştirilmeyeceğine bağlı olarak. Tek bir premium proxy API isteğinin 25 API isteği olarak sayıldığını lütfen unutmayın.

Fiyatlandırma

için çeşitli fiyatlandırma katmanları vardır Hurda yığını. Ücretsiz katman 10.000 API isteği, standart proxy'ler ve sınırlı destek sunar. Temel katman, 250.000 API isteği, HTTPS Şifrelemesi, eşzamanlı istekler ve sınırsız destek ekler. Temel ücret ayda 19,99 dolar. Profesyonel seviyeye çıkmak size 1.000.000 istek kazandırır ve ardından Ticari seviye 3.000.000 isteğe kadar çıkar. Aylık sırasıyla 79,99 dolar ve 149,99 dolara mal oluyorlar.

Bu yazıya sponsor olduğu ve içeriği sağladığı için scrapestack'e teşekkür ederiz. Sponsorlarımız birçok masrafı ödememize yardımcı oluyorSunucu maliyetleri, tam zamanlı geliştiriciler, haber yazarları ve çok daha fazlası dahil olmak üzere XDA'nın çalıştırılmasıyla ilişkili maliyetler. Portal içeriğinin yanında sponsorlu içerik (her zaman bu şekilde etiketlenecektir) görebiliyor olsanız da Portal ekibi bu gönderilerden hiçbir şekilde sorumlu değildir. Sponsorlu içerik, reklam ve XDA Depot tamamen ayrı bir ekip tarafından yönetilmektedir. XDA, bir şirket hakkında olumlu yazılar yazmak için para kabul ederek veya herhangi bir şekilde görüşlerimizi değiştirerek gazetecilik dürüstlüğünden asla taviz vermeyecektir. Bizim düşüncemiz satın alınamaz.