Apache Kafka

Συγγραφέας: Louise Ward
Ημερομηνία Δημιουργίας: 5 Φεβρουάριος 2021
Ημερομηνία Ενημέρωσης: 28 Ιούνιος 2024
Anonim
Введение в Apache Kafka, первая тема открытого базового курса
Βίντεο: Введение в Apache Kafka, первая тема открытого базового курса

Περιεχόμενο

Ορισμός - Τι σημαίνει Apache Kafka;

Το Apache Kafka είναι ένα σύστημα δημοσίευσης-εγγραφής ανοιχτού κώδικα που έχει σχεδιαστεί για να παρέχει γρήγορη, κλιμακούμενη και ανεκτική διαχείριση των τροφοδοσιών δεδομένων σε πραγματικό χρόνο. Σε αντίθεση με το παραδοσιακό λογισμικό ανταλλαγής μηνυμάτων, ο Kafka είναι σε θέση να χειρίζεται όλα τα δεδομένα που διακινούνται μέσω μιας εταιρείας και να το κάνει σχεδόν σε πραγματικό χρόνο.


Ο Kafka είναι γραμμένος στη Scala και αναπτύχθηκε αρχικά από το LinkedIn. Από τότε, αρκετές εταιρείες το χρησιμοποίησαν για να δημιουργήσουν πλατφόρμες σε πραγματικό χρόνο.

Εισαγωγή στη Microsoft Azure και το Microsoft Σε αυτό τον οδηγό θα μάθετε τι είναι το cloud computing και πώς η Microsoft Azure μπορεί να σας βοηθήσει να μεταφέρετε και να εκτελέσετε την επιχείρησή σας από το cloud.

Η Techopedia εξηγεί τον Apache Kafka

Ο Kafka έχει πολλές ομοιότητες με τα αρχεία καταγραφής συναλλαγών και διατηρεί τροφοδοσίες σε θέματα. Οι παραγωγοί γράφουν δεδομένα σε θέματα και οι καταναλωτές διαβάζουν από αυτά τα θέματα, τα οποία χωρίζονται και αναπαράγονται σε πολλαπλούς κόμβους σε μορφή κατανεμημένου συστήματος. Το Kafka είναι μοναδικό στο ότι αντιμετωπίζει κάθε διαμέρισμα θέματος ως αρχείο καταγραφής και κάθε ένα σε ένα διαμέρισμα έχει εκχωρηθεί μια μοναδική μετατόπιση. Διατηρεί όλα για ένα ορισμένο χρονικό διάστημα, και οι καταναλωτές είναι υπεύθυνοι για την παρακολούθηση της θέσης τους σε κάθε αρχείο καταγραφής. Αυτό διαφέρει από τα προηγούμενα συστήματα, όπου οι μεσίτες ήταν υπεύθυνοι για την παρακολούθηση αυτή, γεγονός που περιόρισε σημαντικά την ικανότητα των συστημάτων να κλιμακώνονται καθώς ο αριθμός των καταναλωτών αυξήθηκε. Αυτή η δομή επιτρέπει στον Kafka να υποστηρίζει πολλούς καταναλωτές και να διατηρεί μεγάλα ποσά δεδομένων με πολύ χαμηλά γενικά έξοδα.


Το Kafka μπορεί να χρησιμοποιηθεί:

  • Ως παραδοσιακός μεσίτης
  • Για την παρακολούθηση δραστηριότητας ιστότοπου
  • Για συνάθροιση αρχείου καταγραφής
  • Για επεξεργασία μεγάλων ροών δεδομένων

Το Kafka μπορεί να χρησιμοποιηθεί παράλληλα με την Apache Storm, την Apache HBase και την Apache Spark για την ανάλυση σε πραγματικό χρόνο και την απόδοση δεδομένων συνεχούς ροής.