Σχεδιασμός και Υλοποίηση εξειδικευμένου chatbot για διαδικτυακές πλατφόρμες
119
του πανεπιστημίου έχει ήδη αποδειχθεί εμπόδιο στις μαζικές αιτήσεις. Σε ένα διαφορετικό
επίπεδο, η ίδια η ταχύτητα εξέλιξης των εργαλείων ανοιχτού κώδικα, που είναι ευκαιρία,
αποτελεί και κίνδυνο, καθώς οι βιβλιοθήκες αλλάζουν και απαιτούν συντήρηση. Και βέβαια,
χωρίς μια τακτική διαδικασία επανευρετηρίασης, το περιεχόμενο της βάσης θα παλιώνει
σταδιακά και οι απαντήσεις θα χάνουν την επικαιρότητά τους.
7.4 Μελλοντικές επεκτάσεις
Οι περιορισμοί και οι ευκαιρίες που περιγράψαμε οδηγούν με φυσικό τρόπο σε μια σειρά
από κατευθύνσεις για μελλοντική δουλειά. Η πρώτη και πιο άμεση είναι η δημιουργία μιας
αυτοματοποιημένης διαδικασίας αξιολόγησης. Αντί να στηριζόμαστε σε χειροκίνητες δοκιμές,
θα ήταν χρήσιμο ένα σύνολο ερωτήσεων με γνωστές, σωστές απαντήσεις, ώστε κάθε αλλαγή
στο σύστημα να μπορεί να μετράται αντικειμενικά ως προς την ακρίβεια και τους χρόνους.
Στενά συνδεδεμένη με αυτό είναι η ανάγκη για μια οργανωμένη μελέτη με πραγματικούς
χρήστες, δηλαδή φοιτητές που θα χρησιμοποιήσουν το σύστημα και θα δώσουν τη δική τους
κρίση, κάτι που θα αναδείκνυε ζητήματα χρηστικότητας που δύσκολα φαίνονται από τον ίδιο
τον κατασκευαστή.
Το πλαίσιο αυτόματων μετρικών που εφαρμόσαμε στο Κεφάλαιο 6 (ROUGE-L,
BERTScore και τα τέσσερα μέτρα του RAGAS) θα μπορούσε να αποτελέσει τον πυρήνα μιας
τέτοιας αυτοματοποιημένης διαδικασίας. Με ένα σταθερό σύνολο ερωτήσεων-αναφορών, οι
μετρικές αυτές θα έτρεχαν αυτόματα σε κάθε νέα έκδοση, μετατρέποντας την υποκειμενική
εκτίμηση της ποιότητας σε μια επαναλήψιμη, αριθμητική σύγκριση.
Σε τεχνικό επίπεδο, αρκετές βελτιώσεις δείχνουν υποσχόμενες. Η προσθήκη ενός σταδίου
επαναταξινόμησης, που θα επαναξιολογεί τα ανακτημένα τμήματα με ένα πιο εξειδικευμένο
μοντέλο πριν φτάσουν στην παραγωγή, θα μπορούσε να βελτιώσει την ακρίβεια χωρίς μεγάλο
κόστος. Παρόμοια, ένας υβριδικός συνδυασμός σημασιολογικής και λεξικής αναζήτησης θα