Ξύστε ιστοτόπους για πολύτιμα δεδομένα με το Scrapestack API

σύντομο δελτίο ειδήσεων XdaNov 16, 2023

Υπάρχουν πολλοί εξαιρετικοί τρόποι για να βρείτε πληροφορίες στο Διαδίκτυο. Ωστόσο, υπάρχουν κάποιες πληροφορίες που είναι πιο δύσκολο να βρείτε, ειδικά αν ψάχνετε για πολύ συγκεκριμένα πράγματα. Οι υπηρεσίες web scraping είναι ένα εξαιρετικό εργαλείο για αυτό. Ξυστό είναι ένα API που σας επιτρέπει να διαχειρίζεστε το δικό σας web scraping.

Το web scraper είναι ένα εργαλείο που επισκέπτεται έναν ιστότοπο και παίρνει ένα αντίγραφο ενός συγκεκριμένου τύπου δεδομένων. Αντί να εξετάζετε τα πάντα χειροκίνητα, απλώς δώστε τα δεδομένα του ξύστρα για αναζήτηση και θα κάνει όλη τη δουλειά. Το Scrapestack είναι πιο ισχυρό από τα δωρεάν web scrapers εκεί έξω. Παρέχει καλύτερη ασφάλεια, καλύτερη αξιοπιστία και κορυφαίο διακομιστή.

Ξεκινώντας

Ξεκινώντας με Ξυστό είναι πολύ εύκολο. Αρχικά, θα πρέπει να δημιουργήσετε έναν λογαριασμό. Μόλις αποκτήσετε έναν λογαριασμό, θα σας δοθεί ένα κλειδί API. Αυτό θα χρησιμοποιήσετε για να αποκτήσετε πρόσβαση στο API, χωρίς έκπληξη. Στη συνέχεια, μπορείτε να χρησιμοποιήσετε τη διεύθυνση URL-στόχου για να αφαιρέσετε δεδομένα από οποιονδήποτε ιστότοπο θέλετε.

http://api.scrapestack.com/scrape? access_key=YOUR_ACCESS_KEY&url=https://microsoft.com

Στο παραπάνω παράδειγμα θα ξύνατε τον ιστότοπο της Microsoft. Το μόνο που χρειάζεται να κάνετε είναι να τοποθετήσετε το κλειδί API στο κατάλληλο σημείο και να αλλάξετε τον τομέα στο τέλος. Στη συνέχεια, θα σας δοθούν τα περιεχόμενα της σελίδας χωρίς στυλ JavaScrip και CSS.

Υπάρχουν άλλες παράμετροι που μπορείτε να προσθέσετε σε αυτήν τη διεύθυνση URL-στόχου για να βελτιώσετε περαιτέρω τα πράγματα.

access_key

[Απαιτείται] Καθορίστε το μοναδικό κλειδί πρόσβασης API για έλεγχο ταυτότητας με το API. Το κλειδί πρόσβασης API βρίσκεται στον πίνακα ελέγχου του λογαριασμού σας.

url

[Απαιτείται] Καθορίστε τη διεύθυνση URL της ιστοσελίδας που θέλετε να ξύσετε.

render_js

[προαιρετικό] Ρύθμιση σε 0 (απενεργοποίηση, προεπιλογή) ή 1 (ενεργό) ανάλογα με το εάν θα αποδοθεί ή όχι η JavaScript στην ιστοσελίδα προορισμού. Η απόδοση JavaScript πραγματοποιείται χρησιμοποιώντας ένα πρόγραμμα περιήγησης χωρίς κεφαλές του Google Chrome.

keep_headers

[προαιρετικό] Σετ 0 (απενεργοποίηση, προεπιλογή) ή 1 (ενεργό) ανάλογα με το εάν θα αποσταλούν ή όχι οι ενεργές κεφαλίδες HTTP στη διεύθυνση URL προορισμού με το αίτημα API σας και να ζητηθεί από το API να επιστρέψει αυτές τις κεφαλίδες μαζί με την απόκρισή σας στο API.

proxy_location

[προαιρετικό] Καθορίστε τον κωδικό 2 γραμμάτων της χώρας που θέλετε να μας μεταφέρετε ως γεωγραφική τοποθεσία μεσολάβησης για το αίτημά σας για το scraping API. Οι υποστηριζόμενες χώρες διαφέρουν ανά τύπο διακομιστή μεσολάβησης, ανατρέξτε στο Τοποθεσίες διακομιστή μεσολάβησης ενότητα για λεπτομέρειες.

premium_proxy

[προαιρετικό] Σετ 0 (απενεργοποίηση, προεπιλογή) ή 1 (ενεργό) ανάλογα με το αν θα ενεργοποιηθούν ή όχι premium οικιστικοί μεσολάβηση για το αίτημά σας απόξεσης. Λάβετε υπόψη ότι ένα μόνο αίτημα API διακομιστή μεσολάβησης premium υπολογίζεται ως 25 αιτήματα API.

Τιμολόγηση

Υπάρχουν πολλά επίπεδα τιμολόγησης για Ξυστό. Το δωρεάν επίπεδο προσφέρει 10.000 αιτήματα API, τυπικούς διακομιστές μεσολάβησης και περιορισμένη υποστήριξη. Το βασικό επίπεδο προσθέτει 250.000 αιτήματα API, κρυπτογράφηση HTTPS, ταυτόχρονα αιτήματα και απεριόριστη υποστήριξη. Το βασικό κόστος είναι 19,99 $ το μήνα. Η άνοδος στη βαθμίδα Professional λαμβάνει 1.000.000 αιτήματα και, στη συνέχεια, η βαθμίδα Business φτάνει μέχρι τα 3.000.000 αιτήματα. Κοστίζουν 79,99 $ και 149,99 $ το μήνα, αντίστοιχα.

Ευχαριστούμε το scrapestack για τη χορηγία αυτής της ανάρτησης και την παροχή του περιεχομένου. Οι χορηγοί μας μας βοηθούν να πληρώσουμε για τα πολλά γosts που σχετίζονται με την εκτέλεση του XDA, συμπεριλαμβανομένων των δαπανών διακομιστή, προγραμματιστών πλήρους απασχόλησης, συντάκτες ειδήσεων και πολλά άλλα. Παρόλο που μπορεί να βλέπετε περιεχόμενο χορηγίας (το οποίο θα επισημαίνεται πάντα ως τέτοιο) μαζί με το περιεχόμενο της Πύλης, η ομάδα της Πύλης δεν είναι σε καμία περίπτωση υπεύθυνη για αυτές τις αναρτήσεις. Το περιεχόμενο χορηγίας, οι διαφημίσεις και το XDA Depot διαχειρίζονται εξ ολοκλήρου μια ξεχωριστή ομάδα. Η XDA δεν θα θέσει ποτέ σε κίνδυνο τη δημοσιογραφική της ακεραιότητα δεχόμενος χρήματα για να γράψει ευνοϊκά για μια εταιρεία ή να αλλάξει τις απόψεις ή τις απόψεις μας με οποιονδήποτε τρόπο. Η γνώμη μας δεν μπορεί να αγοραστεί.