Έλεγχος ποιότητας παραγόμενων κειμένων από γλωσσικά μοντέλα
Loading...
Date
2026-02-13
Authors
Τζαβάρας, Ιωάννης
Journal Title
Journal ISSN
Volume Title
Publisher
Abstract
Η προκείμενη διπλωματική εργασία έχει ως θέμα την Αξιολόγηση Γλωσσικών μοντέλων. Τα γλωσσικά μοντέλα είναι ένας τομέας ο οποίος τα τελευταία χρόνια εξελίσσεται ραγδαία και με ταχύτατους ρυθμούς. Συνδυάζεται πλέον με πάρα πολλούς τομείς όπως για παράδειγμα η μετάφραση, η κατανόηση και περίληψη κειμένων και η παραγωγή κειμένου. Επιδίωξη της εργασίας αυτής είναι η περαιτέρω κατανόηση στην δημιουργία κάποιων τέτοιων γλωσσικών μοντέλων μέσω κάποιων τεχνικών. Τα αποτελέσματα της παρούσας διπλωματικής χωρίζονται σε 2 μέρη, την αξιολόγηση της παραγωγής τέτοιων μοντέλων μέσω γραφικών παραστάσεων, και δεύτερον την παραγωγή 2 συνθετικών datasets με στόχο την απόδειξη του Model Collapse.
Η διπλωματική εστιάζει σε τεχνικές δημιουργίας γλωσσικών μοντέλων μέσω της Python και συγκεκριμένα της βιβλιοθήκης της Pytorch, έτσι ώστε να γίνουν πειράματα. Πρώτα, θα μελετηθούν κάποιες θεωρητικές γραφικές παραστάσεις σωστής και λάθους εκπαίδευσης μοντέλων, έτσι ώστε να μπορούν να αξιολογηθούν οι πειραματικές στη συνέχεια. Μετά, περνώντας στα πειράματα θα παρουσιαστούν όλες οι γραφικές των μοντέλων που παρήχθησαν και θα παραθέσουμε συμπεράσματα ως προς την απόδοσή τους. Τελικά, θα μετρήσουμε την ικανότητα των μοντέλων πάνω σε κάποιες μετρικές οι οποίες δείχνουν το πόσο ικανά είναι στην πραγματικότητα τα μοντέλα να παράξουν κείμενο.
Ο κώδικας που αναπτύχθηκε για τα πειράματα μπορεί να βρεθεί στο παρακάτω αποθετήριο: https://github.com/giannistzav/thesis
Description
Keywords
Γλωσσικά μοντέλα, Έλεγχος κειμένων