Excavator

Περιγραφή

Το Diggernaut είναι μια υπηρεσία βασισμένη στο σύννεφο για απόξεση ιστού, εξαγωγή δεδομένων και άλλες εργασίες ETL (Εξαγωγή, Μεταμόρφωση, Φόρτωση). Εάν είστε μεταπωλητής αγαθών και ο προμηθευτής σας δεν σας επιτρέπει να έχετε τα δεδομένα του σε κατάλληλη μορφή, όπως excel ή csv, θα πρέπει να ανακτήσετε μη αυτόματα δεδομένα από τον ιστότοπό του. Το μόνο που χρειάζεται να κάνετε είναι να δημιουργήσετε ένα digger, ένα μικροσκοπικό ρομπότ που μπορεί να κάνει web scraping για λογαριασμό σας και να εξάγει δεδομένα από ιστότοπους για εσάς, να το κανονικοποιεί και να αποθηκεύει δεδομένα στο cloud. Μόλις ολοκληρωθεί, μπορείτε να το κατεβάσετε σε μορφή CSV, XLS, JSON ή ακόμα και να το ανακτήσετε χρησιμοποιώντας το Rest API μας.

Εάν δεν έχετε δεξιότητες προγραμματισμού, μπορείτε να χρησιμοποιήσετε το εργαλείο Excavator για να δημιουργήσετε διαμόρφωση για τις ξύστρες σας. Η απλή εφαρμογή point & click όπου επιλέγετε ποια δεδομένα θέλετε να εξαγάγετε και ορίζετε πώς θέλετε να τα έχετε στη δομή δεδομένων εξόδου σας. Έχουμε μαθήματα βίντεο που εξηγούν πώς να το χρησιμοποιήσετε στον ιστότοπο sandbox μας.

Εάν είστε προγραμματιστής ή προγραμματιστής ιστού, μπορείτε να χρησιμοποιήσετε μετα-γλώσσα για να δημιουργήσετε ρυθμίσεις για ένα digger. Με αυτόν τον τρόπο μπορείτε να λύσετε πραγματικά πολύπλοκες εργασίες εξαγωγής δεδομένων. Έχουμε ολοκληρωμένη μετα-γλώσσα τεκμηρίωση που σας βοηθά να την συνηθίσετε. Επίσης, έχουμε πολλές αναρτήσεις στο ιστολόγιό μας όπου δείχνουμε πώς μπορείτε να χρησιμοποιήσετε διαφορετικές συναρτήσεις μετα-γλώσσας για να επιλύσετε διαφορετικές πραγματικές περιπτώσεις.