Τμήμα Πληροφορικής & Τηλεπικοινωνιών
Πληροφορική

2019-11-08

2019

ΓΡΗΓΟΡΙΟΥ ΕΥΑΓΓΕΛΟΣ

Δελής Αλέξης
Βαθμίδα: Καθηγητής
Τμήμα Πληροφορικής και Τηλεπικοινωνιών
Εθνικόν και Καποδιστριακόν Πανεπιστήμιον Αθηνών

An Efficient Decentralized Streaming Model

Αγγλικά
Ελληνικά

Ένα αποτελεσματικό μοντέλο αποκεντρωμένης ροής

Πρόσφατα, όλο και μεγαλύτερα ποσά δεδομένων παράγονται από διάφορες πηγές. Τα πλαίσια λογισμικού ροής για Μεγάλα Δεδομένα βοηθούν στην αποθήκευση, ανάλυση και στην απόσπαση χρήσιμων πληροφοριών, από τέτοιου είδους δεδομένα που παράγονται συνεχώς. Υπάρχουν αρκετά τέτοια πλαίσια λογισμικού ροής, όπως το Apache Storm, το Apache Spark και το Apache Flume. Στηνπαρούσαπτυχιακήεργασίαπαρουσιάζουμεέναμοντέλοαποκεντρωμένηςεπεξεργσίαςροής.ΧρησιμοποιείέναπρωτόκολλοDHTγιαναεπιτευχθείμίααρχιτεκτονικήπολλών αφέντων-πολλών εργατών και σε κάθε εργασία να αντεθεί ο δικός της αφέντης. Για κάθε εργασία δημιουργούνται όμοιες ομάδες χρησιμοποιώντας τις ιδιότητες δρομολόγησης του συστήματος, με αποτέλεσμα τον σχηματισμό ενός ιεραρχικού δέντρου, αποτελόυμενοαπόκόμβουςμουσυμμετέχουνστοδίκτυο.Ηρίζααυτόυτουδέντρουενεργείως ο αφέντης της ομάδας και είναι υπεύθυνος για τον συγχρονισμό των μελών της ομάδας. Ο κάθε κόμβος καταναλώνει ζωντανά αρχεία καταγραφής δεδομένων, τα οποία αναλύονται σε μικρές παρτίδες και αποθηκεύονται σε μία δομή δεδομένων που χρησιμοποιεί την μνήμη αποδοτικά. Οι κόμβοι συγκεντρώνουν τα τοπικά τους δεδομένα και τα αποτελέσματα ανεβαίνουν προς τα πάνω στο δέντρο.

Θετικές Επιστήμες

μεγάλα δεδομένα,συντονισμός εργασιών,δέντρο με χρήση buffer και συμπίεσης, κατανεμημένα συστήματα , αρχιτεκτονική πολλών αφεντών

Ναι

3

Ναι

16

31

https://pergamos.lib.uoa.gr/uoa/dl/object/2885104/file.pdf

https://pergamos.lib.uoa.gr/uoa/dl/object/2885104