學與教博覽2022 – 口述歷史的突破——AI人臉辨識

「深度香港：AI人臉辨識口述歷史採訪」不單靠聲音或文字記錄資料來源，是一項重大突破。

本公開示範課會展示價值教育科及公民與社會發展科合辦的「深度香港：AI人臉辨識口述歷史採訪」過程，當中採訪了尖沙咀美麗都大廈烏都語圖書館館長。他們利用人臉辨識技術進行口述歷史分析，讓口述歷史訪談資料不只局限於文字及聲音分析。團隊亦運用Microsoft Face API在應用程式中內嵌臉部辨識，功能包括臉部偵測，可以感知、識別及分析訪談影片中的臉部特徵及屬性（例如：年齡、情緒等），以增加口述歷史研究資料的來源，並提升其效度及信度。口述歷史影片經Microsoft Azure Face API中進行人臉辨識分析及編碼分析後，以虛擬人物的身份將烏都語圖書館館長的表情及聲音嵌入Minecraft尖沙咀場景，建立元宇宙。透過遊戲化學習，口述歷史變得更加有趣，讓歷史學習不再沉悶。學生與虛擬人物對答及完成任務，從多維度了解香港的多元文化特徵及少數族裔對香港的貢獻。

過往口述歷史只局限於文字及聲音分析，現在透過人工智能的人臉辨識科技，讓學生可以利用Face API更深入地了解受訪者的心情，在分析口述歷史時，能把受訪者的語句與心情直接比對，提升口述歷史的準確程度。透過Minecraft遊戲化學習，學生與虛擬人物對答及完成任務，從多維度了解香港的多元文化特徵及少數族裔對香港的貢獻。講者會讓參與者模擬口述歷史採訪過程，並即時利用Face API軟件教導參與者將影片進行編碼，以分析受訪者的心情。接着將講解如何將影片分析後的受訪者的聲音及表情嵌入Minecraft，並建立遊戲任務及與Minecraft虛擬人物互動。