Οικοσύστημα Hadoop

Περιεχόμενο

• Ορισμός - Τι σημαίνει το οικοσύστημα Hadoop;
• Εισαγωγή στη Microsoft Azure και το Microsoft Σε αυτό τον οδηγό θα μάθετε τι είναι το cloud computing και πώς η Microsoft Azure μπορεί να σας βοηθήσει να μεταφέρετε και να εκτελέσετε την επιχείρησή σας από το cloud.
• Η Techopedia εξηγεί το Hadoop Ecosystem

Ορισμός - Τι σημαίνει το οικοσύστημα Hadoop;

Το οικοσύστημα Hadoop αναφέρεται στα διάφορα στοιχεία της βιβλιοθήκης λογισμικού Apache Hadoop, καθώς και στα αξεσουάρ και τα εργαλεία που παρέχει το Apache Software Foundation για αυτούς τους τύπους έργων λογισμικού και στους τρόπους με τους οποίους συνεργάζονται.

Το Hadoop είναι ένα βασισμένο στην Java πλαίσιο που είναι εξαιρετικά δημοφιλές για το χειρισμό και την ανάλυση μεγάλων συνόλων δεδομένων.

Εισαγωγή στη Microsoft Azure και το Microsoft Σε αυτό τον οδηγό θα μάθετε τι είναι το cloud computing και πώς η Microsoft Azure μπορεί να σας βοηθήσει να μεταφέρετε και να εκτελέσετε την επιχείρησή σας από το cloud.

Η Techopedia εξηγεί το Hadoop Ecosystem

Τόσο το βασικό πακέτο Hadoop όσο και τα αξεσουάρ του είναι κυρίως έργα ανοιχτού κώδικα με άδεια από την Apache. Η ιδέα ενός οικοσυστήματος Hadoop περιλαμβάνει τη χρήση διαφόρων τμημάτων του πυρήνα του Hadoop όπως το MapReduce, ένα πλαίσιο για τη διαχείριση τεράστιων ποσοτήτων δεδομένων και το Hadoop Distributed File System (HDFS), ένα εξελιγμένο σύστημα διαχείρισης αρχείων. Υπάρχει επίσης το YARN, ένας διαχειριστής πόρων Hadoop.

Εκτός από αυτά τα βασικά στοιχεία του Hadoop, η Apache έχει επίσης παραδώσει άλλα είδη αξεσουάρ ή συμπληρωματικά εργαλεία για προγραμματιστές. Αυτές περιλαμβάνουν το Apache Hive, ένα εργαλείο ανάλυσης δεδομένων. Apache Spark, γενική μηχανή επεξεργασίας μεγάλων δεδομένων. Apache Pig, μια γλώσσα ροής δεδομένων? HBase, ένα εργαλείο βάσης δεδομένων. και επίσης το Ambarl, το οποίο μπορεί να θεωρηθεί ως διαχειριστής οικοσυστήματος Hadoop, καθώς βοηθά στη διαχείριση της χρήσης αυτών των διαφόρων πόρων του Apache. Με τον Hadoop να γίνει το de facto πρότυπο για τη συλλογή δεδομένων και να γίνει πανταχού παρόν σε πολλές οργανώσεις, οι διευθυντές και οι ηγέτες ανάπτυξης μάθουν όλο για το οικοσύστημα Hadoop και τι είδους πράγματα εμπλέκονται σε μια γενική εγκατάσταση Hadoop.