2024年1月至4月，IEEE ICME 2024挑戰(zhàn)賽—中文對話場景唇讀比賽（ChatCLR）順利舉行，437bwin必贏國際官網(wǎng)研究生團隊以第一名的優(yōu)異成績榮獲“喚醒詞唇讀”賽道一等獎。參賽團隊學(xué)生成員包括2021級碩士生王浩旭、2024級碩士生李燦燦、2023級博士生蘇菲，團隊指導(dǎo)教師為437bwin必贏國際官網(wǎng)劉娟教授、昆山杜克大學(xué)李明教授（437bwin必贏國際官網(wǎng)兼職教授）。此外，來自O(shè)PPO的語音技術(shù)專家索宏彬博士也給予了技術(shù)指導(dǎo)。

唇讀任務(wù)是通過唇部動作推斷發(fā)音內(nèi)容，屬于計算機視覺和自然語言處理交叉的領(lǐng)域，在日常生活的不同領(lǐng)域中發(fā)揮著重要作用。中文唇讀任務(wù)的高度復(fù)雜性源于漢字數(shù)量龐大，以及漢字與相應(yīng)唇部動作之間的復(fù)雜映射關(guān)系。ChatCLR比賽由中國科學(xué)技術(shù)大學(xué)、美國佐治亞理工大學(xué)和意大利恩納科雷大學(xué)相關(guān)團隊共同發(fā)起，分為“喚醒詞唇讀”和“目標(biāo)說話人唇讀”兩個賽道，吸引了來自上海交通大學(xué)、中國科學(xué)技術(shù)大學(xué)、437bwin必贏國際官網(wǎng)、西北工業(yè)大學(xué)、哈爾濱工業(yè)大學(xué)、內(nèi)蒙古大學(xué)、陜西師范大學(xué)、韓國Sogang University等多支隊伍參賽。必贏官網(wǎng)參賽團隊以預(yù)訓(xùn)練前端和基于Transformer后端架構(gòu)為基礎(chǔ)，結(jié)合注意力池化和分類器，并引入多層特征聚合技術(shù)，在ChatCLR比賽“喚醒詞唇讀”賽道中開發(fā)的喚醒詞唇讀系統(tǒng)取得了優(yōu)異成績。此外，團隊比賽論文已被IEEE ICME 2024競賽單元錄用。