Διόρθωση κειμένων με χρήση τεχνικών ενσωμάτωσης φυσικής γλώσσας
Loading...
Date
2024-10-10
Authors
Καπελλές, Διονύσιος
Journal Title
Journal ISSN
Volume Title
Publisher
Abstract
Η αυτόματη διόρθωση γραμματικών λαθών (Grammatical Error Correction, GEC) περιλαμβάνει την αυτόματη διόρθωση διαφόρων τύπων γραμματικών σφαλμάτων, συμπεριλαμβανομένων της ορθογραφίας, των σημείων στίξης και της γραμματικής. Προκειμένου να μετατραπεί μια λανθασμένη πρόταση στη σωστή της έκδοση, ένα σύστημα GEC απαιτεί συνήθως της εισαγωγή της ίδιας της πρότασης. Υπάρχουν πολλές προσεγγίσεις για τη διόρθωση γραμματικών λαθών, που κυμαίνονται από μοντέλα βασισμένα σε κανόνες έως νευρωνική μηχανική μετάφραση. Αυτή η διατριβή εμβαθύνει στον τομέα της επεξεργασίας φυσικής γλώσσας διερευνώντας τη λεπτομερή ρύθμιση του μοντέλου T5 που βασίζεται σε Transformer (Text-to-Text Transfer Transformer) για τη συγκεκριμένη εργασία της γραμματικής διόρθωσης. Η ακριβής γραμματική διόρθωση είναι πρωταρχικής σημασίας για την αποτελεσματική επικοινωνία, ειδικά για τους μη μητρικούς ομιλητές μιας γλώσσας. Η έρευνα στοχεύει να αξιοποιήσει τη δύναμη των παραγωγικών δυνατοτήτων του μοντέλου T5 και να μεταφέρει τη μάθηση για την ανάπτυξη ενός αποτελεσματικού και ευέλικτου συστήματος για αυτοματοποιημένη γραμματική διόρθωση σε γραπτό κείμενο. Περιλαμβάνει τη λεπτομέρεια ενός προεκπαιδευμένου μοντέλου T5 σε ένα προσαρμοσμένο σύνολο δεδομένων που περιέχει προτάσεις με διάφορους βαθμούς γραμματικών σφαλμάτων. Η προεπεξεργασία δεδομένων περιλαμβάνει την κωδικοποίηση των προτάσεων στη μορφή T5, επιτρέποντάς του να δημιουργεί διορθωμένες προτάσεις για εισαγωγή με γραμματικά λάθη. Τα αποτελέσματα δείχνουν την αποτελεσματικότητα του βελτιωμένου μοντέλου T5 στη γραμματική διόρθωση. Το μοντέλο επιτυγχάνει ανταγωνιστικές επιδόσεις σε μετρήσεις συγκριτικής αξιολόγησης, ξεπερνώντας τις υπάρχουσες μεθόδους όσον αφορά την ακρίβεια και την κατανόηση των συμφραζομένων. Τα ευρήματα υπογραμμίζουν τη σημασία της χρήσης προεκπαιδευμένων μοντέλων και τεχνικών λεπτομέρειας για την ανάπτυξη εξελιγμένων συστημάτων διόρθωσης γραμματικής. Συμπερασματικά, αυτή η μελέτη υπογραμμίζει την ικανότητα ενός βελτιωμένου μοντέλου T5 στην αντιμετώπιση των προκλήσεων της γραμματικής διόρθωσης. Οι γνώσεις που αποκτήθηκαν ανοίγουν το δρόμο για μελλοντική έρευνα για τη βελτίωση των αρχιτεκτονικών μοντέλων και την επέκταση του πεδίου εφαρμογής των αυτοματοποιημένων εφαρμογών διόρθωσης γλώσσας.
Description
Keywords
Προεκπαιδευμένο μοντέλο, Αυτόματη διόρθωση γραμματικών λαθών