An Efficient Decentralized Streaming Model

Πτυχιακή Εργασία uoadl:2885104 57 Αναγνώσεις

Μονάδα:
Τμήμα Πληροφορικής & Τηλεπικοινωνιών
Πληροφορική
Ημερομηνία κατάθεσης:
2019-11-08
Έτος εκπόνησης:
2019
Συγγραφέας:
ΓΡΗΓΟΡΙΟΥ ΕΥΑΓΓΕΛΟΣ
Στοιχεία επιβλεπόντων καθηγητών:
Δελής Αλέξης
Βαθμίδα: Καθηγητής
Τμήμα Πληροφορικής και Τηλεπικοινωνιών
Εθνικόν και Καποδιστριακόν Πανεπιστήμιον Αθηνών
Πρωτότυπος Τίτλος:
An Efficient Decentralized Streaming Model
Γλώσσες εργασίας:
Αγγλικά
Ελληνικά
Μεταφρασμένος τίτλος:
Ένα αποτελεσματικό μοντέλο αποκεντρωμένης ροής
Περίληψη:
Πρόσφατα, όλο και μεγαλύτερα ποσά δεδομένων παράγονται από διάφορες πηγές. Τα πλαίσια λογισμικού ροής για Μεγάλα Δεδομένα βοηθούν στην αποθήκευση, ανάλυση και στην απόσπαση χρήσιμων πληροφοριών, από τέτοιου είδους δεδομένα που παράγονται συνεχώς. Υπάρχουν αρκετά τέτοια πλαίσια λογισμικού ροής, όπως το Apache Storm, το Apache Spark και το Apache Flume. Στηνπαρούσαπτυχιακήεργασίαπαρουσιάζουμεέναμοντέλοαποκεντρωμένηςεπεξεργσίαςροής.ΧρησιμοποιείέναπρωτόκολλοDHTγιαναεπιτευχθείμίααρχιτεκτονικήπολλών αφέντων-πολλών εργατών και σε κάθε εργασία να αντεθεί ο δικός της αφέντης. Για κάθε εργασία δημιουργούνται όμοιες ομάδες χρησιμοποιώντας τις ιδιότητες δρομολόγησης του συστήματος, με αποτέλεσμα τον σχηματισμό ενός ιεραρχικού δέντρου, αποτελόυμενοαπόκόμβουςμουσυμμετέχουνστοδίκτυο.Ηρίζααυτόυτουδέντρουενεργείως ο αφέντης της ομάδας και είναι υπεύθυνος για τον συγχρονισμό των μελών της ομάδας. Ο κάθε κόμβος καταναλώνει ζωντανά αρχεία καταγραφής δεδομένων, τα οποία αναλύονται σε μικρές παρτίδες και αποθηκεύονται σε μία δομή δεδομένων που χρησιμοποιεί την μνήμη αποδοτικά. Οι κόμβοι συγκεντρώνουν τα τοπικά τους δεδομένα και τα αποτελέσματα ανεβαίνουν προς τα πάνω στο δέντρο.
Κύρια θεματική κατηγορία:
Θετικές Επιστήμες
Λέξεις-κλειδιά:
μεγάλα δεδομένα,συντονισμός εργασιών,δέντρο με χρήση buffer και συμπίεσης, κατανεμημένα συστήματα , αρχιτεκτονική πολλών αφεντών
Ευρετήριο:
Ναι
Αρ. σελίδων ευρετηρίου:
3
Εικονογραφημένη:
Ναι
Αρ. βιβλιογραφικών αναφορών:
16
Αριθμός σελίδων:
31
EvangelosGrigoriou-Thesis.pdf (254 KB) Άνοιγμα σε νέο παράθυρο

 


EvangelosGrigoriou-Src.zip
90 KB
Δεν επιτρέπεται η πρόσβαση στο αρχείο.