background image

Σχεδιασμός και Υλοποίηση εξειδικευμένου chatbot για διαδικτυακές πλατφόρμες

 

98

 

και των εγγράφων, και στις μετρήσεις μας κινήθηκε σε σχετικά χαμηλά απόλυτα επίπεδα, με 

μέση τιμή γύρω στο τριάντα πέντε τοις εκατό και διάμεσο κοντά στο τριάντα τρία. Με μια 

πρώτη  ματιά  τα  νούμερα  αυτά  μοιάζουν  χαμηλά,  όμως  δεν  πρέπει  να  παρερμηνευτούν.  Το 

πολυγλωσσικό  μοντέλο  ενσωματώσεων  που  χρησιμοποιούμε  παράγει  τιμές  ομοιότητας  που 

συγκεντρώνονται σε αυτό το εύρος ακόμη και για σωστά ταιριάσματα, οπότε η απόλυτη τιμή 

έχει  νόημα  μόνο  σε  σύγκριση  με  τις  υπόλοιπες.  Γι'  αυτό  άλλωστε  το  κατώφλι  αποδοχής 

ορίστηκε αρκετά χαμηλά, ύστερα από δοκιμές, ώστε να μην απορρίπτονται σωστές απαντήσεις. 

Στην πράξη, παρά τα μέτρια ποσοστά, οι απαντήσεις ήταν στη συντριπτική τους πλειονότητα 

ορθές και τεκμηριωμένες, κάτι που επιβεβαιώνει ότι η βεβαιότητα πρέπει να διαβάζεται ως μια 

σχετική ένδειξη και όχι ως πιθανότητα ορθότητας. 

Η  κατανομή  των  τιμών  βεβαιότητας  σε  ολόκληρη  τη  συνεδρία  απεικονίζεται  στην 

Εικόνα 17. Επιβεβαιώνει ότι οι τιμές συγκεντρώνονται γύρω από το τριάντα πέντε τοις εκατό, 

ένα  εύρος  που,  όπως  εξηγήθηκε,  είναι  χαρακτηριστικό  του  πολυγλωσσικού  μοντέλου 

ενσωματώσεων και δεν αντανακλά χαμηλή ορθότητα. 

 

ΕΙΚΟΝΑ 17: ΚΑΤΑΝΟΜΗ ΤΩΝ ΤΙΜΩΝ ΒΕΒΑΙΟΤΗΤΑΣ (ΟΜΟΙΟΤΗΤΑ ΣΥΝΗΜΙΤΟΝΟΥ) ΣΤΙΣ 

ΑΠΑΝΤΗΣΕΙΣ