Το Facebook προετοιμάζεται να χρησιμοποιήσει την «ψυκτική αποθήκευση» για να αντιμετωπίσει τεράστια ποσά δεδομένων

Το Facebook επανεξετάζει τον τρόπο με τον οποίο αποθηκεύει δεδομένα για να αντιμετωπίσει τα 7 petabytes νέων φωτογραφιών που φορτώνουν οι χρήστες του κοινωνικού δικτύου κάθε μήνα. Καθώς αυξάνεται ο αριθμός των φωτογραφιών, το Facebook χρειάζεται να βρει φθηνότερους τρόπους για να τα αποθηκεύσει όλα, σύμφωνα με τον αντιπρόεδρο της εταιρείας για την τεχνολογία υποδομών

Οι χρήστες ανεβάζουν περίπου 300 εκατομμύρια φωτογραφίες την ημέρα, περισσότερο σε ειδικές περιπτώσεις, Ο Jay Parikh του Facebook δήλωσε στο συνέδριο Structure Europe στο Άμστερνταμ την Τετάρτη. "Απόκριες είναι μία από τις μεγαλύτερες ημέρες μεταφόρτωσης φωτογραφιών του έτους μας και θα φτάσουμε κάπου μεταξύ περίπου 1 έως 2 δισεκατομμυρίων φωτογραφιών που φορτώνονται σε μια μόνο μέρα", ανέφερε.

Φωτογραφίες όπως αυτά που ελήφθησαν στο Halloween χάνουν σύντομα το ενδιαφέρον τους, χωρίς κανείς να τους κοιτάζει μετά από μερικές μέρες ή εβδομάδες, αλλά "Η σύμβασή μας με τους χρήστες μας είναι ότι δεν μπορούμε να διαγράψουμε τα δεδομένα όταν δεν έχουν πρόσβαση, πρέπει να τα διατηρήσουμε", δήλωσε. Αυτό οδήγησε στην ιδέα να τοποθετηθούν οι φωτογραφίες σε ένα "ψυγείο", ανέφερε ο Parikh.

Για να γίνει αυτό, το Facebook σχεδιάζει να δημιουργήσει ένα νέο κέντρο δεδομένων με διαφορετικά είδη αποθήκευσης, υλικό διακομιστή και εξοπλισμό δικτύου που καταναλώνει λιγότερη ενέργεια και κόστος λιγότερο από τα υπάρχοντα κέντρα δεδομένων - όλα αυτά χωρίς να αλλάζουν οι χρόνοι απόκρισης των εξυπηρετητών.

Αλλά πόσο αποτελεσματικό μπορεί να κάνει το Facebook ψυχρή αποθήκευση; Όταν το κόστος και η κατανάλωση ενέργειας στα κέντρα δεδομένων μειώνονται, αυτό συμβαίνει συνήθως σε βάρος των ταχυτήτων πρόσβασης.

Η αποθήκευση δεδομένων σε κασέτες, για παράδειγμα, μειώνει την κατανάλωση ενέργειας, αλλά επιβραδύνει σημαντικά την πρόσβαση σε δεδομένα.

Οι υπηρεσίες Amazon Web Services ακολουθούν μια μεσαία διαδρομή με την υπηρεσία αποθήκευσης σύννεφου Glacier, την οποία τοποθετεί ως εναλλακτική λύση στην ταινία. Η υπηρεσία είναι βελτιστοποιημένη για δεδομένα που είναι σπάνια προσβάσιμα και για τα οποία οι χρόνοι ανάκτησης αρκετών ωρών είναι αποδεκτοί.

Αυτό είναι πολύ αργό για το Facebook, σύμφωνα με τον Parikh. "Δεν μπορώ να φτιάξω μια φωτογραφία στην οποία προχωράτε πριν από πέντε ή δέκα χρόνια και για μένα να παρουσιάσω ένα banner στο χρήστη που λέει:" Γεια σου, γιατί να μην προσπαθήσεις ξανά σε 24 ώρες; " Το

Τα χαμηλότερα δυναμικά χρειάζονται

Image: Ευγενική προσφορά του Data Center Κέντρο δεδομένων KnowledgeFacebook στο Όρεγκον

Τα περισσότερα κέντρα δεδομένων που χρησιμοποιούνται σήμερα είναι βελτιστοποιημένα για να χρησιμοποιούν πολλά δύναμη για την αντιμετώπιση των καθηκόντων που χρειάζονται μεγάλη υπολογιστική ισχύ. Η τεχνολογία "ψυχρής αποθήκευσης" που σκέφτεται το Facebook είναι στο άλλο άκρο, δήλωσε ο Parikh. "Χρειάζεστε πολλούς και πολλούς χώρους, αλλά δεν χρειάζεστε τόσο μεγάλη δύναμη", είπε, προσθέτοντας ότι τα δεδομένα για το κέντρο δεδομένων πρέπει να ξανασκεφτούν για να αντιμετωπίσουν το πρόβλημα στην κλίμακα που αντιμετωπίζει το Facebook.

Σε υψηλό επίπεδο, Το Facebook εργάζεται για λογισμικό που θα καταλάβει πώς και πού να αποθηκεύει ένα κομμάτι περιεχομένου στην υποδομή όταν μεγαλώνει, είπε ο Parikh. "Αυτό σημαίνει ότι τα αντίγραφα των δεδομένων θα κινηθούν σε βάθος χρόνου και θα χρησιμοποιήσουν τα διάφορα τμήματα υποδομής που θα έχουμε βελτιστοποιηθεί για την ηλικία του περιεχομένου." Ορισμένες από τις εφευρέσεις στο στρώμα λογισμικού θα επιτρέψουν στο Facebook να ανταποκριθεί γρήγορα, αλλά να αποθηκεύσει τα δεδομένα πιο αποδοτικά, δήλωσε.

Η ψυκτική αποθήκευση θα είναι μέρος της υποδομής του Facebook το επόμενο έτος ή δύο, δήλωσε. Το Facebook σχεδιάζει να αποκαλύψει και να μοιραστεί τα τμήματα που θεωρεί ότι έχουν σχέση με το Open Computer Project, μια πρωτοβουλία που ξεκίνησε από το Facebook για να εφαρμόσει το μοντέλο συνεργασίας λογισμικού ανοιχτού κώδικα στον κόσμο του υλικού του κέντρου δεδομένων.