在校虛擬現實環境對學齡兒童的社會適應性和情感表達訓練計劃 (vPAD-II)


現有文獻指出,自閉症兒童一般善用視覺思維,擅長模式識別並擁有攝影式記憶,從視覺化的學習環境中能更容易吸收知識。香港城市大學在應用虛擬實境於教育方面已有多年經驗,針對兒童的需要制定獨一無二的訓練課程,一直獲得優異的成效。虛擬實境乃利用頭戴式顯示器(Head-mounted display)的虛擬現實科技,把現實投射在學童身處的環境,學童能在安全、沒有任何風險的環境下獲得鼓勵,勇於嘗試。


本計劃對象為本港小一至小六的自閉症兒童。課程以小組形式進行,於二零一八年七月開始,進行三十節為期約十五星期,每節一小時的課程。訓練於學校內進行,計劃人員會前往參與學校所提供的課室安裝電腦及本計劃所使用的虛擬現實嶄新技術頭戴式顯示器 - Head-mounted display (HMD) 設備。本項目亦包含「先導培訓計劃」,希望培訓最少二十位教師及專業人員,讓他們可在計劃完結後仍可以繼續為更多自閉症學童進行訓練。因此,每間參與學校需安排校內最少兩位教師或專業人員參加。

vPAD-II 項目目標


vPAD-II 團隊


首席負責人

葉豪盛教授
香港城市大學多媒體及互聯網技術創新應用中心總監
葉豪盛教授
香港城市大學電腦科學系


聯合負責人

陳鳳英醫生
香港中文大學兒科學系
陳鳳英醫生
黃緯立博士
香港浸會大學教育學系
黃緯立博士



馬寶琪小姐
項目經理及訓練員
馬寶琪小姐

李晨博士
系統工程師
李晨博士

Ms Julia BYRNE
顧問及訓練員
Ms Julia BYRNE

劉淑瑩小姐
訓練員
劉淑瑩小姐

干露露小姐
副研究員及訓練員
干露露小姐

劉耀宗先生
程式員
劉耀宗先生

vPAD-II 訓練範疇


vPAD-II VR環境設置


  • 設備: vPAD-II 計劃於訓練期內提供兩套VR設備, 頭戴式顯示屏(HMD)及電腦予參與學校。 於整個計劃完成後,每間參與學校將分配一套頭戴式顯示屏(HMD)及電腦作延續計劃使用。

 

  • 場地 : 學校需提供一間約5 X 5米房間作培訓之用, 包括 :
    • 2個VR訓練範圍 (約2.5 x 2.5米)
    • 學生觀察座位
    • 小組討論範圍

vPAD-II 單元介紹


Image Image Image

四季情境

介紹及引入

•  利用頭戴式顯示器在虛擬環境中沉浸在不同的季節環境

•  在一個放鬆的環境中疏理個人情緒

•  提升學習動機

Image Image Image

家居情景

執行功能:排序,導航技巧,問候技巧和遵循指示

•  於虛擬家居情景中經歷早上準備上學的例行日程

•  練習簡單的問候社交技巧

•  灌輸耐心等待的重要性

•  促進靈活思考及應對/調整策略

Image Image Image

校車及課室情景

執行功能訓練:排序,導航技巧,問候技巧和遵循指示

•  於虛擬校車、街道及課室場景中經歷早上的例行日程及遵從課堂指示

•  練習簡單的問候社交技巧

•  提昇同學對在校車上合宜安全準則的理解

•  促進學生遵循課堂規範

Image Image Image

圖書館情景

情緒訓練:社會規範和情緒調節

•  於虛擬圖書館情景中完成任務

•  提昇社交問候技巧

•  提昇於安靜的環境中對適當社會規範的理解

•  增進不同的應對/調整策略

Image Image Image

美術課情景

情緒訓練:識別情緒及面部表情

•  於虛擬美術課情景中導航及完成任務

•  讓同學能夠練習識別面部表情

•  學習遵循指示及進行適當的社交規範

•  學習在他人表現出不當行為時的適當反應

Image Image Image

小息情景

社交技巧訓練:社交互動與溝通

•  於虛擬小息情景的小賣部及操場環境中買食物及與虛擬同學進行互動及完成有關任務

•  讓同學能夠在小息時於小賣部及操場上練習已學會的社交技能及社交規範

•  促進同學適當表達自己的感受

•  促進同學理解他人的感受(第三身角度思考)

Image Image Image

體育課情景

社交技巧訓練:社交適應性、衝突處理與溝通

•  於虛擬體育課情景中導航及完成有關任務

•  讓同學能夠在體育課上練習已學會的社交規範與適應性,以及社交技能

•  學習如何處理衝突

•  學習在遇到欺凌時恰當地表達情緒

Image Image Image

嘉年華情景

社交技巧訓練:強化所獲得的社交技巧、情緒調節及管控、社交適應性、衝突處理與溝通

•  在虛擬嘉年華環境中完成各項攤位遊戲

•  鞏固在計劃中學習的社交技能應用於學校環境和日常生活

•  展示出對如何應對和適應意外情況的理解

•  展示出對如何遵守學校規則的理解

•  展示出對如何在小組環境中運用社交技能的理解

•  在衝突發生時作出恰當的反應

Image Image Image

四季

第1節 - 簡介及體驗沉浸式學習

目的:

• 介紹課程內容及分配物資

• 建立一個充滿信任的空間及制訂小組規範

• 利用頭戴式顯示器為學生提供一個虛擬學習體驗

• 在一個放鬆的環境中認識個人情緒