Πάρε μακριά:
Η πλατφόρμα analytics της Hadoop έχει κάποιους σημαντικούς περιορισμούς που περιλαμβάνουν ταχύτητα και πολυπλοκότητα, αλλά οι ηγέτες της βιομηχανίας εργάζονται για να το αλλάξουν.
Όπως συμβαίνει, λέει ο διευθύνων σύμβουλος της Cloudera Mike Olson, η πλατφόρμα analytics της Hadoop έχει κάποιους σημαντικούς περιορισμούς που περιλαμβάνουν ταχύτητα και πολυπλοκότητα. Ωστόσο, οι ηγέτες της βιομηχανίας - συμπεριλαμβανομένων εκείνων που βρίσκονται στη δική του επιχείρηση - εργάζονται για να το αλλάξουν, έχοντας την πεποίθηση ότι αυτό το ερευνητικό εργαλείο θα εξελιχθεί με θεμελιώδη μέσα τα επόμενα χρόνια.Στο περσινό συνέδριο Strata, ο Olson ζήτησε από ένα κοινό να φανταστεί πώς, αν δημιουργηθεί σήμερα, ο Hadoop θα σχεδιαζόταν διαφορετικά, θέτοντας ότι ορισμένες συγκεκριμένες αλλαγές θα μπορούσαν να ανοίξουν νέες πύλες για έρευνα σε τομείς όπως η εκπαίδευση, η ενέργεια και η γεωργία. Αναφερόμενος στον κοσμολόγο και τον επιστημονικό συγγραφέα Carl Sagan, ο Olson τόνισε τη σημασία της διάσπασης δεδομένων υψηλού επιπέδου για ένα μεγαλύτερο κοινό.
"Νομίζω ότι είμαστε έτοιμοι στην άκρη των μεγάλων ανακαλύψεων που έχουν σημασία για τις επιχειρήσεις και την κοινωνία", δήλωσε ο Olson.
Ένα παράδειγμα, ανέφερε, είναι η επιστημονική ανακάλυψη που κατέστη δυνατή από τη δουλειά των επιστημονικών επαγγελματιών του Large Hadron Collider στην Ελβετία. Σύμφωνα με τον Olson, η καθημερινή αξιολόγηση των 37 terabytes δεδομένων έχει οδηγήσει σε σημαντικές εξελίξεις όπως η ανακάλυψη Higgs-Boson, η οποία αποκάλυψε βασικές πτυχές της ύλης και της ενέργειας. Olson πρόσθεσε ότι Hadoop βοηθά να βοηθήσει σε αυτά τα θεμελιώδη ερευνητικά έργα με τη συλλογή τεράστιου όγκου δεδομένων σε ένα ενιαίο αποθετήριο, αλλά ότι είναι δύσκολο να αλληλεπιδράσουν με αυτά τα δεδομένα σε πραγματικό χρόνο.
Αναφερόμενος στους τρόπους με τους οποίους η Hadoop και παρόμοιες τεχνολογίες μπορούν να βοηθήσουν τους επιστήμονες σε βασικούς τομείς, όπως η υγειονομική περίθαλψη, ο Olson ανακοίνωσε επίσης το έργο Impala, κάτι που η εταιρεία του εργάζεται για δύο χρόνια, με δύο τέταρτα δοκιμών beta σε συντονισμό με πελάτες. Το έργο Impala, δήλωσε ο Olson, είναι μια τεχνολογία "ανοιχτού κώδικα 100% με άδεια χρήσης Apache" που λειτουργεί με τον Hadoop ως "μηχανή ερώτησης σε πραγματικό χρόνο". Αυτό, δήλωσε ο Olson, επιτρέπει αυτό που αποκαλεί "ταχύτητα των ερωτημάτων σκέψης", όπου οι χρήστες μπορούν να θέσουν μια ερώτηση, να λάβουν μια απάντηση και να διατυπώσουν μια νέα ερώτηση για να χρησιμοποιήσουν αποτελεσματικά τα μεγάλα συγκροτήματα δεδομένων.
"Σας δίνει έναν νέο τρόπο να αποκτήσετε τα δεδομένα σας", δήλωσε ο Olson, υπογραμμίζοντας πως αυτή η πρόοδος θα μπορούσε να ανοίξει πρόσθετες ευκαιρίες για την επίλυση σημαντικών προβλημάτων στις Η.Π.Α. και στο εξωτερικό.