公視攜手工研院打造 AI手語氣象主播 推資料庫應用

工研院合办「AI手语幸福台湾」记者会发布最新AI虚拟手语气象主播 (左起)公视手语新闻主播牛暄文、王晓书、制作人欧姵君合影。图/公视提供

为提升资讯平权,让听障朋友也能即时掌握重要气象资讯,台湾公广集团与工业技术研究院携手合作,打造全台首创「AI虚拟手语气象主播」,预计最快明年下半年上线!双方于今举办「AI手语 幸福台湾」记者会,公视董事长胡元辉、工研院董事长吴政忠会上签署合作备忘录,将携手推动台湾手语资料库建置与 AI 应用计划。

公广集团董事长胡元辉表示,公视长期制作身障相关节目「手语新闻」与「听听看」等,也一直秉持「希望明天比今天更好」的想法;随着AI科技演进,公广集团积极思考运用科技的力量,为听障朋友打造更友善的媒体环境。他说,「资讯平权是现代社会的重要价值」,也期望透过传播科技,辅助听障人士在在面对紧急状况,例如台风、地震等天灾时能够即时掌握最新消息。

公视与工研院团队活动现场透过秀出最新的AI手语气象应用演示,以公视、华视、客家电视、公视台语台与原视等台特色的AI虚拟主播,无论手语动作、脸部表情、服饰等都维妙维肖,宛如真人。胡元辉说,「一切顺利的话,最快将会在明年下半年正式地登上电视频道」,也提到未来期待能将AI手语能应用在防灾、救难等公共传播领域。

手语主播王晓书表示,这将有利于查询和教学推广。她也指出,「大家都觉得有文字讯息就足够,但手语对于聋人来说更清楚易懂,AI手语应用不受时间、空间限制,聋人可以随时随地接受资讯」。手语主播牛暄文则提到,手语也有南北差异,盼将来搜集不同地区手语,观察研究其演变。制作人欧姵君认为,「新闻常第一线遇到新名词,手语发想及最后固定过程都很珍贵。建立资料库可提升播报品质,也具有公共教育功能」。

王晓书也提到,曾经有人问她,客家话、台语、原住民语比出来的手语,都不同吗?王晓书说,「其实都是一样的,只有一种台湾手语」。她也分享,工研院捕捉主播播报新闻手语,「像是台风来袭,就要知道台风是从哪一个方向朝台湾而来,是从下面扫过,还是通过东部海面,每次台风的位置都不一样」。

其次会撷取影片中的骨架,包含手语的脸部表情跟手指关节,王晓书边说边比手语说「像是台湾的手形,小指头捕捉到就要留意」。接着是把骨架套上不同的外表,生成虚拟主播,「还要让手语动作连接起来很流畅。每一关都不容易」。王晓书也希望AI手语将来可应用在手机上,让聋人随时掌握讯息。牛暄文则希望AI手语可以应用于科技眼镜等穿戴装置,「将语音转换成手语,或辨识手语并转换成语音,让听、聋人沟通顺畅」。