Dành cho nhiều người mắc chứng tự kỷ, việc giao tiếp với người khác trở thành thách thức khó khăn, đặc biệt là khi họ không thể phát âm bất kỳ từ ngữ nào. Tại Trường Kỹ thuật Schulich (SSE) thuộc Đại học Calgary, một dự án mới đã ra đời để mang đến cho những người này khả năng giao tiếp thông qua công nghệ.
Nghiên cứu đột phá này tìm hiểu việc sử dụng thiết bị thực tế tăng cường (AR) Microsoft HoloLens 2, kết hợp với hệ thống HoloBoard do nhóm UCalgary phát triển, để đào tạo những người mắc chứng tự kỷ không thể phát âm. Mục tiêu dự án là nâng cao kỹ năng vận động của họ thông qua các phương thức giao tiếp thay thế.
Đây là một phần dài hạn trong dự án doanh nghiệp do Tiến sĩ Diwakar Krishnamurthy, nhà nghiên cứu SSE, dẫn đầu, hợp tác với Tiến sĩ Mea Wang, Khoa Khoa học, và Tiến sĩ Vikram K. Jaswal, Đại học Virginia, cùng sự hợp tác của cộng đồng tự kỷ không thể nói.
HoloLens 2 hoạt động giống như thiết bị thực tế ảo (VR) tiêu chuẩn nhưng với điểm khác biệt chính là tấm che trong suốt trên tai nghe, cho phép người dùng nhìn thấy môi trường xung quanh trong thế giới thực của họ. Hệ thống HoloBoard cho phép hình ảnh ba chiều tương tác xuất hiện trong phòng thông qua tai nghe, giúp người dùng thực hành các kỹ năng chỉ tay và vận động bằng cách tương tác với bàn phím hình ba chiều và nội dung giáo dục xuất hiện trước mặt họ.
Madison Imber, chuyên viên hỗ trợ tâm lý, đã làm việc với học sinh tự kỷ trong bảy năm qua, đã tùy chỉnh việc cung cấp các bài học giáo dục để phù hợp với cấu hình cảm giác và vận động độc đáo của học sinh. Kỹ thuật này cung cấp thông tin quý giá cho nghiên cứu của nhóm UCalgary.
Imber chia sẻ: “Nhiều cá nhân mắc chứng tự kỷ không thể phát âm cũng mắc chứng apraxia, là sự mất kết nối giữa não và các cử động của cơ thể. Apraxia khiến nhiều người không thể nói thành thạo, khó tham gia vào môi trường của họ nếu không có sự hỗ trợ đầy đủ. Hệ thống HoloBoard có thể cung cấp những hỗ trợ như vậy một cách chu đáo thông qua các tương tác ba chiều. Tôi đã thấy sự tiến bộ trong khả năng điều hướng trong môi trường 3D và tương tác với các đối tượng ảo của nhiều người tham gia.”
Cộng tác để thay đổi
Sự hợp tác giữa các nhà nghiên cứu và các đối tượng đã được thể hiện rõ ràng trong suốt quá trình phát triển các nguyên mẫu HoloBoard. Imber và khách hàng của cô đã làm việc với nhóm UCalgary từ mùa hè năm 2022, và ý kiến đóng góp từ những người tham gia mắc chứng tự kỷ không thể phát âm, được coi trọng trong nhóm nghiên cứu.
Tiến sĩ Lorans Alabood, Nghiên cứu sinh sau tiến sĩ tại Khoa Điện và Kỹ thuật Phần mềm và là nhà nghiên cứu chính của dự án HoloBoard, cho biết: “Cách tiếp cận của tôi trong việc thiết kế HoloBoard phù hợp với điều này, nhưng tôi đã tiến thêm một bước với một sự đồng cảm trong thiết kế. Đây là cách tiếp cận đồng cảm với người sử dụng hệ thống và yêu cầu chúng tôi hiểu sâu sắc trải nghiệm cá nhân của những người dùng không thể nói.”
Những người tham gia có ý nghĩa quan trọng trong quá trình phát triển mẫu thử, và ngược lại, họ đã chứng tỏ sự cải thiện về kỹ năng vận động và sự tự tin của mình.
“Chứng kiến sự tiến bộ và tương tác như vậy với HoloLens thực sự đáng kinh ngạc. Tôi thấy sự tiến bộ lớn trong niềm tin của học sinh và sự tự tin vào bản thân để thử nghiệm những điều mới mẻ và thú vị,” Imber nói.
Hai người dùng thử, Eric Herzog và Geoff Ondrich, sử dụng bàn phím để giao tiếp, cho biết nghiên cứu này đã thay đổi cuộc đời họ. Ondrich chỉ vào từng chữ cái trên một trang để nhận xét: “Bây giờ cuộc sống của tôi thật ý nghĩa.” Trong khi đó, Herzog sử dụng công cụ chuyển bàn phím thành giọng nói để nói: “Bây giờ tôi có thể thể hiện con người thật của mình”, thêm vào đó, “Cảm ơn vì đã tin tưởng vào giọng nói của tôi.”
Thay đổi tương lai với HoloBoard
Herzog và Ondrich nhận thấy hệ thống HoloBoard hữu ích trong các hoạt động xã hội và giáo dục của họ, nhưng tương lai công nghệ này sẽ mang lại vô số lợi ích và cơ hội cho những người mắc chứng tự kỷ không thể phát âm và hơn thế nữa.
Krishnamurthy, từ Khoa Điện và Kỹ thuật Phần mềm, cho biết: “Chương trình này thực sự quan trọng vì kết quả kinh tế xã hội đối với nhóm dân số cụ thể này sẽ khá ảm đạm nếu tình trạng hiện tại trong các cơ sở hỗ trợ của họ vẫn tiếp tục. Vì vậy, nếu chúng ta có thể mở ra những cơ hội mới cho họ thông qua công nghệ – đó có thể là cơ hội giáo dục – thì những tác động sẽ thực sự tích cực, không chỉ đối với những cá nhân này mà còn đối với gia đình và người chăm sóc của họ.”
Alabood hy vọng các lớp học sẽ điều chỉnh công nghệ hình ba chiều để thu hút nhiều học sinh mắc chứng tự kỷ hơn. Alabood nói: “Hiện tại, lớp học của chúng tôi được thiết kế giống như cách đây 150 năm. Vì vậy, có lẽ các thiết lập toàn diện hơn, nơi sinh viên có thể tham gia lớp học theo phong cách ba chiều để phù hợp với khả năng vận động của họ nên được xem xét từ góc độ của nhà quản lý và cộng đồng.”
