Multimodal communication in children with selective Mutism

ABSTRACT

Communication plays a crucial role in building social interactions. However, children with selective mutism often have difficulty speaking in certain social situations despite having normal language skills in other settings. Therefore, understanding multimodal communication is crucial because children with selective mutism still strive to maintain communication through various forms of nonverbal communication. This study aims to identify the forms and functions of multimodal communication used by children with selective mutism. This study used a qualitative descriptive method with a multimodal analysis approach. Data were obtained from documentary videos depicting the interactions of children with selective mutism in everyday life. Researchers analyzed 12 data points based on the context of the situation, conversation transcripts, and communication used during the interaction. The results showed that children with selective mutism used various forms of multimodal communication such as eye gaze, facial expressions, body movements, gestures, the use of objects and other physical actions to convey messages. These forms of communication serve to respond to questions, express feelings and preferences, maintain engagement in interactions and build meaning without relying on verbal speech. These findings show that children’s communication with selective mutism cannot be understood only through verbal aspects, but needs to be seen as a multimodal process involving various semiotic sources.

ARABIC

يلعب التواصل دورًا محوريًا في بناء التفاعلات الاجتماعية. مع ذلك، غالبًا ما يواجه الأطفال المصابون بـ الخرس الانتقائي صعوبة في التحدث في بعض المواقف الاجتماعية، على الرغم من امتلاكهم مهارات لغوية طبيعية في سياقات أخرى. لذا، يُعد فهم التواصل متعدد الوسائط أمرًا بالغ الأهمية، لأن هؤلاء الأطفال ما زالوا يسعون جاهدين للحفاظ على التواصل من خلال أشكال متنوعة من التواصل غير اللفظي. تهدف هذه الدراسة إلى تحديد أشكال ووظائف التواصل متعدد الوسائط الذي يستخدمه الأطفال المصابون بـ الخرس الانتقائي. استخدمت الدراسة منهجًا وصفيًا نوعيًا مع نهج تحليل متعدد الوسائط. جُمعت البيانات من مقاطع فيديو وثائقية تُصوّر تفاعلات الأطفال المصابين بـ الخرس الانتقائي في حياتهم اليومية. حلل الباحثون 12 نقطة بيانات بناءً على سياق الموقف، ونصوص المحادثات، ووضع التواصل المستخدم أثناء التفاعل.أظهرت النتائج أن الأطفال المصابين بالصمت الانتقائي استخدموا أشكالا مختلفة من التواصل متعدد الوسائط، مثل النظر بالعين، وتعبيرات الوجه، وحركات الجسد، والإيماءات، واستخدام الأشياء، وغيرها من الأفعال الجسدية لنقل الرسائل. تعمل هذه الأشكال من التواصل على الرد على الأسئلة، والتعبير عن المشاعر والتفضيلات، والحفاظ على التفاعل في التفاعلات، وبناء المعنى دون الاعتماد على الكلام اللفظي. تظهر هذه النتائج أن تواصل الأطفال مع الصمت الانتقائي لا يمكن فهمه فقط من خلال الجوانب اللفظية، بل يجب اعتباره عملية متعددة الوسائط تشمل مصادر سيميائية متنوعة.

ABSTRAK

Komunikasi memiliki peran penting dalam membangun interaksi sosial. Namun, anak dengan selective mutism sering mengalami kesulitan berbicara dalam situasi sosial tertentu meskipun memiliki kemampuan bahasa yang normal dalam lingkungan lain. Oleh karena itu, komunikasi multimodal menjadi penting untuk dipahami karena anak dengan selective mutism tetap berusaha mempertahankan komunikasi melalui berbagai bentuk komunikasi nonverbal. Penelitian ini bertujuan untuk mengidentifikasi bentuk dan fungsi komunikasi multimodal yang digunakan oleh anak dengan selective mutism. Penelitian ini menggunakan metode deskriptif kualitatif dengan pendekatan multimodal analysis. Data penelitian diperoleh dari video dokumenter yang menampilkan interaksi anak dengan selective mutism dalam kehidupan sehari-hari. Peneliti menganalisis 12 datum berdasarkan konteks situasi, transkrip percakapan, serta mode komunikasi yang digunakan selama interaksi berlangsung. Hasil penelitian menunjukkan bahwa anak dengan selective mutism memanfaatkan berbagai bentuk komunikasi multimodal, seperti tatapan mata, ekspresi wajah, gerakan tubuh, gestur, penggunaan objek, dan tindakan fisik lainnya untuk menyampaikan pesan. Bentuk-bentuk komunikasi tersebut berfungsi untuk merespons pertanyaan, mengekspresikan perasaan dan preferensi, mempertahankan keterlibatan dalam interaksi, serta membangun makna tanpa mengandalkan ujaran verbal. Temuan ini menunjukkan bahwa komunikasi anak dengan selective mutism tidak dapat dipahami hanya melalui aspek verbal, melainkan perlu dilihat sebagai proses multimodal yang melibatkan berbagai sumber semiotik.