Περιεχόμενο
- Φυσική εξέλιξη των προμηθευτών Hadoop
- No Bugs, No Stress - Ο οδηγός σας βήμα προς βήμα για τη δημιουργία λογισμικού που αλλάζει τη ζωή χωρίς να καταστρέφει τη ζωή σας
- Μεγάλη ενσωμάτωση δεδομένων και σύννεφο
- Μεγάλα ζητήματα δεδομένων και ασφάλειας
- Προσφέροντας μεγάλα δεδομένα ως υπηρεσία
- Τα μεγάλα δεδομένα και το Διαδίκτυο των πραγμάτων (IoT)
- συμπέρασμα
Πηγή: Ymgerman / Dreamstime.com
Πάρε μακριά:
Το πεδίο των μεγάλων δεδομένων αυξάνεται συνεχώς και αλλάζει, αλλά υπάρχουν ορισμένες σημαντικές τάσεις στον ορίζοντα.
Τα μεγάλα δεδομένα εξακολουθούν να είναι σχετικά νέο πεδίο στην επιστήμη των δεδομένων. Έχει πραγματοποιήσει σημαντικό αντίκτυπο στον κόσμο της ανάλυσης και οι μεγάλες τεχνολογίες δεδομένων και πλατφόρμες θα συνεχίσουν να αλλάζουν καθώς εξελίσσεται η τεχνολογία. Αυτός είναι ο λόγος για τον οποίο είναι τόσο σημαντικό να κατανοήσουμε τις επικείμενες τάσεις στα μεγάλα δεδομένα που θα δούμε καλά τα επόμενα χρόνια.
Τα τελευταία χρόνια υπήρξαν πολλές συζητήσεις για τον Hadoop και τις μεγάλες τεχνολογίες δεδομένων και η βιομηχανία πληροφορικής έχει συζητήσει σημαντικά για το μέλλον τους. Το κύριο μέλημα είναι το αν η Hadoop και τα μεγάλα δεδομένα θα θεωρηθούν ως μέρος της mainstream τεχνολογίας ή αν θα θεωρηθεί μια εξειδικευμένη περιοχή. Όπως έχουμε δει στο παρελθόν, υπήρξαν πολλές καινοτομίες στην τεχνολογία που δεν χρησιμοποιήθηκαν ποτέ στην επικρατούσα βιομηχανία, αλλά μάλλον χρησιμοποιήθηκαν σε σιλό για ειδικούς σκοπούς πληροφορικής.
Σε πολύ σύντομο χρονικό διάστημα, τα μεγάλα δεδομένα έχουν γίνει μια βασική τεχνολογία. Το 2013 και το 2014, είδαμε τις επιχειρήσεις να αναλαμβάνουν πρωτοβουλίες για να μεταφέρουν μεγάλες εφαρμογές δεδομένων στην παραγωγή. Σε προηγούμενα χρόνια ήταν μόνο ένας τύπος POC (απόδειξη της έννοιας), όπου οι εταιρείες επικύρωναν την τεχνολογία και την παραγωγή της. Τώρα το 2015 και τα επόμενα χρόνια, θα υπάρξει μεγάλη εφαρμογή νέων περιπτώσεων χρήσης. Οι περισσότερες από αυτές τις περιπτώσεις χρήσης θα βασίζονται σε αναλυτικά στοιχεία σε πραγματικό χρόνο και θα αποκτούν πιο πρακτικές γνώσεις.
Τα επόμενα χρόνια θα δούμε έναν τεράστιο αντίκτυπο από τα μεγάλα δεδομένα σε όλες σχεδόν τις βιομηχανίες. Τα δεδομένα βρίσκονται στον πυρήνα κάθε επιχείρησης, οπότε πρέπει να αξιοποιηθεί και να αναλυθεί σωστά. Τα μεγάλα δεδομένα και οι σχετικές τεχνολογίες θα μας επιτρέψουν να συλλαμβάνουμε, να επεξεργαζόμαστε και να αναλύουμε τα δεδομένα για να έχουμε ουσιαστική γνώση. Η τάση των μεγάλων δεδομένων θα συνεχίσει να αυξάνεται και θα μας εξουσιοδοτεί να κατανοήσουμε την αξία της, όπως δεν είχαμε ποτέ πριν.
Τώρα, μπορείτε να ρίξετε μια ματιά σε μερικές από τις σημαντικές μεγάλες τάσεις των δεδομένων και να δείτε τα επόμενα χρόνια.
Φυσική εξέλιξη των προμηθευτών Hadoop
Hadoop είναι μια βασική τεχνολογική πλατφόρμα για μεγάλη επεξεργασία δεδομένων. Ωστόσο, η βασική πλατφόρμα Hadoop δεν παρέχει όλες τις ευελιξίες και τα πλεονεκτήματα που απαιτούνται για την ορθή επεξεργασία όλων των δεδομένων, οπότε ο χειρισμός μεγάλης επεξεργασίας δεδομένων σε αυτή τη βασική πλατφόρμα Hadoop μπορεί να είναι κουραστικό και πολύπλοκο.
Υπάρχουν τώρα αρκετές τεχνολογίες που σχετίζονται με το Hadoop, όπως η κυψέλη, το χοίρο και πολλά άλλα, τα οποία είναι γνωστά ως το "οικοσύστημα Hadoop". Αυτές οι τεχνολογίες βασίζονται στην πλατφόρμα Hadoop και διευκολύνουν το χειρισμό μεγάλων δεδομένων. Υπάρχουν διάφοροι πωλητές, όπως το Cloudera, MapR, Hortonworks και επίσης η IBM, οι οποίοι παρέχουν τεχνολογίες Hadoop. Αυτές οι πλατφόρμες τεχνολογίας βασίζονται στο βασικό πλαίσιο Hadoop, αλλά είναι πιο φιλικές προς το χρήστη και συμπαγείς. Παρέχουν επίσης κατάλληλες διεπαφές χρηστών για να εργάζονται σε διαφορετικές εργασίες επεξεργασίας. Κατά συνέπεια, οι εταιρείες μπορούν να επικεντρωθούν περισσότερο στη λογική των επιχειρήσεων παρά στις πλατφόρμες.
Η ανάπτυξη αυτών των πωλητών Hadoop θα συνεχιστεί τα επόμενα χρόνια και οι προσφορές τους θα έχουν πολύ μεγάλη επίδραση. Οι προμηθευτές Hadoop θα τοποθετηθούν ως παροχείς λύσεων και θα βοηθήσουν τους οργανισμούς να υλοποιήσουν τις μεγάλες εφαρμογές δεδομένων τους.
No Bugs, No Stress - Ο οδηγός σας βήμα προς βήμα για τη δημιουργία λογισμικού που αλλάζει τη ζωή χωρίς να καταστρέφει τη ζωή σας
Δεν μπορείτε να βελτιώσετε τις δεξιότητες προγραμματισμού σας όταν κανείς δεν ενδιαφέρεται για την ποιότητα του λογισμικού.
Μεγάλη ενσωμάτωση δεδομένων και σύννεφο
Στον σημερινό κόσμο, το cloud computing και η σχετική υποδομή είναι αναπόφευκτες. Από την άλλη πλευρά, μεγάλες εφαρμογές δεδομένων αυξάνονται ραγδαία. Οι οργανισμοί υλοποιούν περισσότερες και μεγαλύτερες εφαρμογές δεδομένων για να αποκτήσουν περισσότερη γνώση από τα πολύτιμα δεδομένα. Όπως γνωρίζουμε, οι μεγάλες εφαρμογές δεδομένων ασχολούνται με τεράστιους όγκους δεδομένων και τα δεδομένα αυτά επεξεργάζονται σε ένα συγκεντρωτικό περιβάλλον. Ο κατανεμημένος υπολογιστής βρίσκεται στον πυρήνα όλων των μεγάλων εφαρμογών επεξεργασίας δεδομένων. Επομένως, η κατανεμημένη υπολογιστική υποδομή θα πρέπει να διατηρείται κατάλληλα για να ξεπεραστεί η αποτυχία, τα σφάλματα ή οποιαδήποτε άλλα θανατηφόρα ζητήματα. Το περιβάλλον σύννεφο είναι το καταλληλότερο για να καλύψει όλα αυτά τα θέματα. Μεγάλες εφαρμογές δεδομένων μπορούν να εκτελούνται σε αυτήν την υποδομή cloud (που αποτελείται από ένα συγκεντρωμένο περιβάλλον) και παρέχουν αποτελεσματική και συνεχή απόδοση. Οι οργανισμοί δεν χρειάζονται τη δική τους υποδομή και ομάδα IT. αντ 'αυτού μπορούν να βασίζονται στην υποδομή του cloud, η οποία είναι επίσης οικονομικά αποδοτική. Επομένως, η ενσωμάτωση σύννεφων με μεγάλα δεδομένα πρόκειται να αποτελέσει ισχυρή δύναμη.
Μεγάλα ζητήματα δεδομένων και ασφάλειας
Τα θέματα ασφάλειας αποτελούν μεγάλη ανησυχία για όλες τις μεγάλες εφαρμογές δεδομένων. Όπως γνωρίζουμε, τα δεδομένα είναι το κλειδί για όλες τις μεγάλες εφαρμογές δεδομένων, οπότε πρέπει να κατανοήσουμε τις απειλές για την ασφάλεια πολύ νωρίτερα. Οι οργανισμοί εργάζονται σε μεγάλες εφαρμογές δεδομένων για την ανάλυση δομημένων, ημιδομημένων και αδόμητων δεδομένων, τα οποία θα τους δώσουν ουσιαστική γνώση και επιχειρησιακή κατεύθυνση. Αυτά τα πολύτιμα δεδομένα και τα αποτελέσματά τους αποτελούν το κλειδί για όλες τις επιχειρηματικές αποφάσεις και ως εκ τούτου πρέπει να παραμείνουν εμπιστευτικά εντός του οργανισμού. Δυστυχώς, δεν έχουν σχεδιαστεί όλες οι μεγάλες εφαρμογές δεδομένων με θέματα ασφαλείας. Ως αποτέλεσμα, αυτές οι μεγάλες εφαρμογές δεδομένων θα αντιμετωπίσουν απειλές ασφάλειας. Επομένως, η εφαρμογή λύσεων ασφάλειας για μεγάλες εφαρμογές δεδομένων θα αποτελέσει μείζονα αποστολή τα επόμενα χρόνια.
Προσφέροντας μεγάλα δεδομένα ως υπηρεσία
Ήταν όλοι εξοικειωμένοι με το μοντέλο SaaS, όπου οι εφαρμογές εκτελούνται σε περιβάλλον cloud και οι χρήστες έχουν πρόσβαση σε αυτό ως υπηρεσία. Το μοντέλο πληρωμής είναι επίσης ευέλικτο, όπου οι χρήστες πληρώνουν μόνο για αυτό που χρησιμοποιούν. Η ίδια ιδέα θα εφαρμοστεί και στις μεγάλες εφαρμογές δεδομένων. Διαφορετικές μεγάλες εταιρίες προϊόντων δεδομένων φιλοξενούν ήδη τις εφαρμογές τους στο σύννεφο και προσφέρουν τους ως υπηρεσία και οι χρήστες την προσπελάζουν ως υπηρεσία και πληρώνουν με βάση τη χρήση. Τα επόμενα χρόνια, περισσότερες εταιρείες δεδομένων θα προσφέρουν μεγάλα δεδομένα ως υπηρεσία.
Τα μεγάλα δεδομένα και το Διαδίκτυο των πραγμάτων (IoT)
Το Διαδίκτυο των πραγμάτων (IoT) είναι το τελευταίο κομμάτι της βιομηχανίας τεχνολογίας. Το IoT βασικά αποτελείται από διαφορετικές συσκευές εξοπλισμένες με αισθητήρες για τη λήψη δεδομένων. Τώρα συλλέγοντας όλα αυτά τα δεδομένα και εξάγοντας σημαντική παραγωγή είναι η μεγαλύτερη πρόκληση. Αυτές οι συσκευές χρησιμοποιούνται παντού - σπίτια, βιομηχανίες και ακόμη και φορητές τεχνολογίες - και συλλαμβάνουν ένα σημαντικό όγκο δεδομένων. Αυτά τα δεδομένα αισθητήρων είναι επίσης ένας τύπος μεγάλων δεδομένων, οπότε η χρήση και η επεξεργασία τους σε μια μεγάλη πλατφόρμα δεδομένων πρόκειται να αποτελέσει μεγάλη πρόκληση για τους οργανισμούς.
συμπέρασμα
Τα μεγάλα δεδομένα φαίνεται να είναι εδώ για να παραμείνουν και οι τρόποι με τους οποίους θα αντιμετωπίσουμε θα συνεχίσουν να αλλάζουν και να μεγαλώνουν. Εκτός από αυτές τις πέντε τάσεις, θα υπάρξουν πολλές ακόμα προκλήσεις και αναδυόμενες τάσεις τα επόμενα χρόνια. Το Cloud και το IoT θα είναι πάντα παρόν μαζί με τις μεγάλες εφαρμογές δεδομένων και αυτές οι τεχνολογίες θα είναι ένα ισχυρό εργαλείο για την ανάλυση δεδομένων.