Android

Amazon Automates Hadoop Χρήση για προγραμματιστές

Hadoop Automation Multi Node Cluster on Amazon EC2

Hadoop Automation Multi Node Cluster on Amazon EC2
Anonim

Το Amazon.com δρομολόγησε μια φιλοξενούμενη υπηρεσία με σκοπό να απλοποιήσει για τους προγραμματιστές τη χρήση της εφαρμογής Hadoop του μοντέλου προγραμματισμού MapReduce για την επεξεργασία μεγάλων συνόλων δεδομένων σε clusters επεξεργαστών.

Το Amazon Elastic MapReduce, η υπηρεσία cloud computing απευθύνεται σε προγραμματιστές (9)> Με το Amazon Elastic MapReduce, πολλά καθήκοντα που θα χρειαστεί να χειριστούν οι προγραμματιστές που σχετίζονται με το Hadoop είναι αυτοματοποιημένα, το cloud computing της εταιρείας Amazon Web Services (AWS) της εταιρείας δήλωσε σε ένα επίσημο blog την Πέμπτη

[Περισσότερες πληροφορίες: Οι καλύτερες υπηρεσίες τηλεοπτικής ροής]

"Χρησιμοποιώντας το Elastic MapReduce, μπορείτε να δημιουργήσετε, να τρέξετε, να παρακολουθήσετε και να ελέγξετε τις θέσεις εργασίας του Hadoop με ευκολία στο point-and-click. Δεν χρειάζεται να βγείτε έξω και να αγοράσετε αποχρώσεις υλικού. Δεν χρειάζεται να το μεταφέρετε, να το συνδέσετε ή να το διαχειριστείτε. Δεν χρειάζεται να ανησυχείτε για την εξάντληση των πόρων ή για την ανταλλαγή τους με άλλα μέλη του οργανισμού σας. Δεν χρειάζεται να το παρακολουθήσετε, να το συντονίσετε ή να ξοδέψετε χρόνο για να αναβαθμίσετε το σύστημα ή το λογισμικό εφαρμογών σε αυτό », αναφέρει η δημοσίευση στο blog.

Η AWS αποφάσισε να δημιουργήσει αυτή την υπηρεσία αφού γνώριζε ότι οι πελάτες της έχουν εκτελέσει εργασίες Hadoop στον Αμαζόνιο Η υπηρεσία Elastic Compute Cloud (EC2), η οποία παρέχει φιλοξενία υπολογιστικής ικανότητας.Γιατί ο Hadoop γίνεται ολοένα και πιο δημοφιλής, το Amazon στοχεύει να διευκολύνει άλλους προγραμματιστές να επωφεληθούν από αυτήν την εφαρμογή OpenRed MapReduce.

Το Elastic MapReduce λειτουργεί σε συνδυασμό με Το Elastic MapReduce ανοίγει αυτόματα μια εφαρμογή Hadoop του πλαισίου MapReduce στις καταστάσεις Amazon EC2, υποδιαιρώντας τα δεδομένα σε ροή εργασίας σε μικρότερα κομμάτια έτσι ώστε να μπορούν να χρησιμοποιηθούν επεξεργασία - τη λειτουργία "χάρτη" ​​- παράλληλα και τελικά ανασυνδυασμός των επεξεργασμένων δεδομένων στην τελική λύση - τη λειτουργία "μείωση". Το Amazon S3 χρησιμεύει ως πηγή για τα δεδομένα που αναλύονται και ως προορισμός παραγωγής για τα τελικά αποτελέσματα ", σύμφωνα με μια ξεχωριστή περιγραφή της υπηρεσίας.

Όπως συμβαίνει με άλλες υπηρεσίες cloud AWS, η Amazon χρεώνει το Elastic MapReduce με βάση την χρήσης, χωρίς ελάχιστο τέλος.