Δοκιμές και επικύρωση
Πριν από την παραγωγική λειτουργία, το σύστημα υποβάλλεται σε δοκιμές για την επαλήθευση της λειτουργικότητας, της αξιοπιστίας και της συμμόρφωσης με τις απαιτήσεις.
| Κατηγορία | Αντικείμενο ελέγχου |
|---|---|
| Λειτουργικές δοκιμές | Ορθότητα βασικών λειτουργιών |
| Δοκιμές επιδόσεων | Ακρίβεια, χρόνος απόκρισης και απόδοση υπό φορτίο |
| Δοκιμές αξιοπιστίας | Συμπεριφορά σε διαφορετικά ή μη αναμενόμενα σενάρια |
| Έλεγχος μεροληψίας | Εντοπισμός αδικαιολόγητων διαφορών στα αποτελέσματα |
| Έλεγχος επινοημένων απαντήσεων («hallucinations») | Ανακριβείς ή ατεκμηρίωτες απαντήσεις παραγωγικής ΤΝ |
| Δοκιμές κυβερνοασφάλειας | Ανθεκτικότητα έναντι επιθέσεων και κακόβουλων εισόδων |
| Δοκιμές ανθρώπινης εποπτείας | Δυνατότητα ελέγχου, παρέμβασης και διακοπής |
| Δοκιμές αποδοχής | Ικανοποίηση των επιχειρησιακών απαιτήσεων |
Τεκμηρίωση αποτελεσμάτων
- Μεθοδολογία και δεδομένα δοκιμών.
- Κριτήρια αποδοχής.
- Μετρηθείσες επιδόσεις.
- Προβλήματα που εντοπίστηκαν.
- Διορθωτικές ενέργειες.
- Τελική αξιολόγηση καταλληλότητας.
Πριν από την παραγωγική λειτουργία, γίνονται δοκιμές με ερωτήσεις πολιτών διαφορετικής πολυπλοκότητας. Εξετάζονται η ορθότητα των απαντήσεων, η παραπομπή σε έγκυρες πηγές, η αναγνώριση ερωτήσεων που δεν μπορεί να απαντήσει αξιόπιστα και η παραπομπή σε ανθρώπινο χειριστή. Οι δοκιμές μπορούν να περιλαμβάνουν και κακόβουλες ή παραπλανητικές εισόδους, για να αξιολογηθεί η ανθεκτικότητα του συστήματος.