Ιδρυματικό Αποθετήριο [SANDBOX]
Πολυτεχνείο Κρήτης
EN  |  EL

Αναζήτηση

Πλοήγηση

Ο Χώρος μου

Αρχιτεκτονική συστημάτων βασισμένων σε αναδιατασσόμενη λογική (FPGA) για επιτάχυνση συνεργατικής μάθησης

Petrakos Emmanouil

Απλή Εγγραφή


URIhttp://purl.tuc.gr/dl/dias/0495D0F8-4203-4677-B50C-F68EE65AC971-
Αναγνωριστικόhttps://doi.org/10.26233/heallink.tuc.96133-
Γλώσσαen-
ΜέγεθοςA4 (210x297mm)en
Μέγεθος6.2 megabytesen
Μέγεθος155 pagesen
ΤίτλοςReconfigurable logic (FPGA)-based system architecture for the acceleration of federated learning in neural networks en
ΤίτλοςΑρχιτεκτονική συστημάτων βασισμένων σε αναδιατασσόμενη λογική (FPGA) για επιτάχυνση συνεργατικής μάθησηςel
ΔημιουργόςPetrakos Emmanouilen
ΔημιουργόςΠετρακος Εμμανουηλel
Συντελεστής [Επιβλέπων Καθηγητής]Dollas Apostolosen
Συντελεστής [Επιβλέπων Καθηγητής]Δολλας Αποστολοςel
Συντελεστής [Μέλος Εξεταστικής Επιτροπής]Lagoudakis Michailen
Συντελεστής [Μέλος Εξεταστικής Επιτροπής]Λαγουδακης Μιχαηλel
Συντελεστής [Μέλος Εξεταστικής Επιτροπής]Γρηγόριος Τσαγκατάκηςel
Συντελεστής [Μέλος Εξεταστικής Επιτροπής]Grigorios Tsagkatakisen
ΕκδότηςΠολυτεχνείο Κρήτηςel
ΕκδότηςTechnical University of Creteen
Ακαδημαϊκή ΜονάδαTechnical University of Crete::School of Electrical and Computer Engineeringen
Ακαδημαϊκή ΜονάδαΠολυτεχνείο Κρήτης::Σχολή Ηλεκτρολόγων Μηχανικών και Μηχανικών Υπολογιστώνel
ΠερίληψηFederated Learning (FL) is a decentralized training method for Machine Learning applications which can exploit data that are inaccessible to conventional centralized approaches, due to privacy and security concerns. FL literature has refined and evaluated most of its aspects, but generally few works have taken into consideration the underlying hardware, where the training actually takes place. This thesis demonstrates that, in the on-edge FL setting, the clients can effectively utilize FPGAs to accelerate their local training and the overall FL process. First, an FL system, agnostic of the underlying training method and its implementation, is developed. With that, an in-depth analysis of the effects of each FL parameter is conducted. According to its findings, an FPGA-based implementation of a Convolutional Neural Network (CNN), optimized for the parameter space where the FL is most efficient, is developed and incorporated into the FL system. Through actual runs on real hardware, the FPGA-based solution presents a modest speedup of the local training (1.27$\times$-1.44$\times$) and the overall FL process (1.08$\times$-1.20$\times$) in comparison to a GPU-based one, depending on data distribution. More impressively, it consumes (16.35$\times$-18.18$\times$) less energy. Thus, this thesis provides more than a feasibility study of combining FL and FPGAs, and it can be used as a starting point for future works or as a benchmarking reference.en
ΠερίληψηΤο Federated Learning (FL) είναι μια αποκεντρωμένη μέθοδος εκπαίδευσης για εφαρμογές Μηχανικής Μάθησης, που μπορεί να εκμεταλλευτεί δεδομένα τα οποία είναι μη προσβάσιμα από συμβατικές κεντρικοποιημένες μεθόδους, λόγω ανησυχιών περί προσωπικού απορρήτου και κυβερνοασφάλειας. Σχετικές έρευνες έχουν βελτιώσει και αξιολογήσει τις περισσότερες πτυχές του, αλλά γενικά λίγες από αυτές λαμβάνουν υπόψη το υποκείμενο υλικό, όπου λαμβάνει χώρα η εκπαίδευση. Αυτή η εργασία αποδεικνύει ότι, στο on-edge FL, οι πελάτες μπορούν να χρησιμοποιήσουν αποτελεσματικά FPGAs για να επιταχύνουν την τοπική εκπαίδευση και τη συνολική FL διαδικασία. Καταρχάς, υλοποιήθηκε ένα FL σύστημα, ανεξάρτητο της υποκείμενης μεθόδου εκπαίδευσης και της υλοποίησής της. Μέσω αυτού, έγινε εις βάθος ανάλυση των επιδράσεων κάθε παραμέτρου του FL. Σύμφωνα με τα ευρήματα της, υλοποιήθηκε ένα Συνελυκτικό Νευρωνικό Δίκτυο σε FPGA, βελτιστοποιημένο για τον χώρο παραμέτρων όπου το FL είναι πιο αποτελεσματικό, και συνδέθηκε στο FL σύστημα. Μέσω μετρήσεων σε πραγματικό υλικό, η υλοποίηση βασισμένη σε FPGA εμφανίζει μια μέτρια επιτάχυνση στην τοπική εκπαίδευση (1,27×-1,44×) και στην συνολική FL διαδικασία (1,08×-1,20×), σε σύγκριση με αντίστοιχη υλοποίηση βασισμένη σε GPU, συναρτήσει της διασποράς των δεδομένων. Πιο εντυπωσιακά, καταναλώνει (16,35×-18,18×) λιγότερη ενέργεια. Τοιουτοτρόπως, η παρούσα εργασία παρέχει παραπάνω από μια μελέτη σκοπιμότητας συνδυασμού FL & PGAs, και μπορεί να χρησιμοποιηθεί ως αφετηρία για μελλοντικές εργασίες ή ως μέτρο σύγκρισης. el
ΤύποςΔιπλωματική Εργασίαel
ΤύποςDiploma Worken
Άδεια Χρήσηςhttp://creativecommons.org/licenses/by-sa/4.0/en
Ημερομηνία2023-06-16-
Ημερομηνία Δημοσίευσης2023-
Θεματική ΚατηγορίαFederated learningen
Θεματική ΚατηγορίαReconfigurable logicen
Θεματική ΚατηγορίαArtificial intelligenceen
Βιβλιογραφική ΑναφοράEmmanouil Petrakos, "Reconfigurable logic (FPGA)-based system architecture for the acceleration of federated learning in neural networks", Diploma Work, School of Electrical and Computer Engineering, Technical University of Crete, Chania, Greece, 2023en
Βιβλιογραφική ΑναφοράΕμμανουήλ Πετράκος, "Αρχιτεκτονική συστημάτων βασισμένων σε αναδιατασσόμενη λογική (FPGA) για επιτάχυνση συνεργατικής μάθησης", Διπλωματική Εργασία, Σχολή Ηλεκτρολόγων Μηχανικών και Μηχανικών Υπολογιστών, Πολυτεχνείο Κρήτης, Χανιά, Ελλάς, 2023el

Διαθέσιμα αρχεία

Υπηρεσίες

Στατιστικά