Εφαρμογές σοβαρών παιχνιδιών στη συλλογή και συναισθηματική επισημείωση δειγμάτων ομιλίας

Κάντε κλικ εδώ για να κατεβάσετε αυτό το έγγραφο

Λάζαρος Ματσουλιάδης, Λουκάς Χαδέλλης, Χαράλαμπος Δημούλας

Στον τομέα των σοβαρών παιχνιδιών, η ενσωμάτωση της τεχνολογίας Αναγνώρισης Συναισθημάτων Ομιλίας (Speech Emotion Recognition – SER) παρουσιάζει μια πολλά υποσχόμενη οδό για τη βελτίωση της συλλογής δεδομένων και την ενίσχυση της δια δραστικότητας των χρηστών. Αυτή η έρευνα εξερευνά τις δυνατότητες των σοβαρών παιχνιδιών με δυνατότητα SER να συλλέγουν πλούσια δεδομένα ομιλίας από τους παίκτες, συμβάλλοντας στην πρόοδο τόσο της τεχνολογίας SER όσο και της ανάπτυξης σοβαρών παιχνιδιών. Η έρευνα που παρουσιάζεται σε αυτή την εργασία επικεντρώνεται στον σχεδιασμό και την ανάπτυξη δύο διαφορετικών εφαρμογών σοβαρών παιχνιδιών ειδικά σχεδιασμένων για τη συλλογή δεδομένων χροιάς φωνής. Αυτά τα παιχνίδια, που δημιουργήθηκαν με χρήση της Unreal Engine 5, παρέχουν εμπειρίες παιχνιδιού, ενώ ταυτόχρονα καταγράφουν τις συναισθηματικές εκφράσεις των παικτών μέσω της ομιλίας τους. Η ενσωμάτωση SER σε σοβαρά παιχνίδια προσφέρει πληθώρα πλεονεκτημάτων. Πρώτον, διευκολύνει τη συλλογή ποικίλων δεδομένων ομιλίας, τα οποία είναι απαραίτητα για την ανάπτυξη της τεχνολογίας SER. Δεύτερον, βελτιώνει την εμπειρία του χρήστη επιτρέποντας στα παιχνίδια να προσαρμόζονται και να ανταποκρίνονται στις συναισθηματικές καταστάσεις των παικτών, δημιουργώντας πιο εξατομικευμένη εμπειρία για κάθε χρήστη. Πέρα από την ενσωμάτωση SER, η έρευνα εστιάζει και στην υλοποίηση προηγμένης τεχνολογίας ήχου, αξιοποιώντας χωρικό ήχο, Doppler, Binaural και μηχανισμούς τρισδιάστατης ηχητικής τοποθέτησης. Η ενσωμάτωση αυτών των στοιχείων συμβάλλει στην υλοποίηση ρεαλιστικών ηχητικών περιβαλλόντων, ενισχύοντας την αίσθηση παρουσίας και την συναισθηματική σύνδεση των παικτών με το παιχνίδι. Αυτή η έρευνα αποδεικνύει την αποτελεσματικότητα των σοβαρών παιχνιδιών με την δυνατότητα SER ως εργαλείο για τη συλλογή δεδομένων και την ενίσχυση της δια δραστικότητας με τους χρήστες. Οι εφαρμογές παιχνιδιών που αναπτύχθηκαν και η υλοποίηση των τεχνολογιών ήχου ανοίγουν τον δρόμο για το μέλλον του σχεδιασμού παιχνιδιών, όπου η συναισθηματική νοημοσύνη και η ρεαλιστική ηχητική εμπειρία διαδραματίζουν καθοριστικό ρόλο στη δημιουργία παιχνιδιών με βαθύτερη απήχηση στους χρήστες και αισθητή επίδραση στην ψυχολογία και τη συμπεριφορά τους.