Sebbene i sottotitoli tradizionali rappresentino la parte parlata di un video, i contenuti importanti potrebbero non essere espressi, a scapito del pubblico che dipende dai sottotitoli per comprendere il materiale presentato. Con la crescente dipendenza dai video nell’apprendimento online, questo diventa ancora più problematico. Un nuovo progetto collaborativo guidato dall’assistente professore Yun Huang si concentrerà su didascalie esplicative, che forniscono informazioni sul contenuto visivo e audio di un video, nonché sulla parola parlata. Il suo progetto, “Advancing STEM Online Learning by Augmenting Accessibility with Explanatory Captions and AI”, ha ricevuto una sovvenzione triennale di $ 526.006 (per un totale di $ 849.994 con due collaboratori della Gallaudet University e dell’Università di Notre Dame) dalla National Science Foundation (NSF).
“Le didascalie esplicative hanno il potenziale per svolgere un nuovo ruolo nell’apprendimento STEM”, ha affermato Huang. “Questo progetto lavorerà per ideare meccanismi di Q/A efficaci e progetti di interazione, come i chatbot, che consentano a studenti e insegnanti di generare didascalie esplicative per i video STEM in modo collaborativo”.
Le tecnologie proposte renderanno i video più accessibili alla comunità dei non udenti e con problemi di udito (DHH) e ai non madrelingua inglese. I siti di valutazione includeranno la Gallaudet University, l’unica università di arti liberali al mondo dedicata esclusivamente all’educazione degli studenti di DHH, e l’Università dell’Illinois Urbana-Champaign, che ha la più grande popolazione studentesca internazionale tra le università pubbliche statunitensi.
Le aree di ricerca di Huang includono il social computing, l’interazione uomo-computer, il mobile computing e il crowdsourcing. Ha conseguito il dottorato di ricerca in informatica e informatica presso l’Università della California, Irvine.
