This research develops and validates an algorithm for automated analysis of communication skills in public speaking within a Virtual Reality (VR) environment, addressing limitations in traditional training methods. The study introduces an algorithm to analyze comprehensive data, including speech patterns, non-verbal cues, and tailored feedback, particularly for users with disabilities. The method involves multiple steps: processing input data, analyzing gestures, spatial movements, voice tone and timbre, and speech rate. The algorithm was tested against expert evaluations using a dataset of 20 VR public speaking recordings. This VR-based approach provides an immersive, adaptive training environment, crucial for high-stakes fields such as emergency services, where effective communication can impact outcomes in lifethreatening situations.

Niniejsze badanie opracowuje i weryfikuje algorytm automatycznej analizy umiejętności komunikacyjnych w wystąpieniach publicznych w środowisku wirtualnej rzeczywistości (VR), rozwiązując ograniczenia tradycyjnych metod szkoleniowych. Badanie wprowadza algorytm do analizy kompleksowych danych, w tym wzorców mowy, wskazówek niewerbalnych i dostosowanych informacji zwrotnych, w szczególności dla użytkowników niepełnosprawnych. Metoda obejmuje wiele kroków: przetwarzanie danych wejściowych, analizę gestów, ruchów przestrzennych, tonu i barwy głosu oraz tempa mowy. Algorytm został przetestowany w oparciu o oceny ekspertów przy użyciu zestawu danych 20 nagrań wystąpień publicznych VR. To podejście oparte na VR zapewnia immersyjne, adaptacyjne środowisko szkoleniowe, kluczowe dla dziedzin o wysokiej stawce, takich jak służby ratunkowe, w których skuteczna komunikacja może mieć wpływ na wyniki w sytuacjach zagrażających życiu.