Google推出对嘴挑战赛,邀请用户帮忙训练渐冻症患者专用的AI模型

Google本周发布一款AI挑战赛,名为LipSync,邀请用户为一首歌曲对嘴,帮忙完成Google的AI实验。

LipSync是Google最新策划的Experiment with Google实验。它要求用户配合Tones and I的《Dance Monkey》歌曲中的一段对嘴,然后Google再根据用户表现给予评分。

Google表示,LipSync目的在测量手机或PC机用户对嘴的准确度。这项实验启动后会以相机拍摄用户的脸部表情,再以浏览器上执行的Google TensorFlow.js facemesh模型,即时分析用户嘴巴、唇部特征点,以侦测、评估对嘴准不准,但不会录下任何声音。

这项AI挑战需要动用手机相机或PC机Webcam,因此用户必须设置允许该LipSync访问设备上的相机。但Google强调一切运算都是在设备上发生,不会有用户脸部资料传给Google。在PC机上,LipSync则是特别为Chrome优化。

Google对媒体解释,这项实验目的在协助训练AI了解人说话时的表情动作。这些知识可帮助Google创建一套系统来关注无法正常说话的群体,像是肌萎缩性侧索硬化症(ALS,俗称渐冻人症)患者,以便未来能观察他们的肌肉动作而猜测他们想说的话,甚至利用语音合成技术来替他们发声。

除了展开实验,Google也提供了LipSync的程序代码及技术文件供下载。

这是Google的辅助功能的最新计划。2016年Google Maps开始标示轮椅族友善的场所,像是允许轮椅进入的餐厅、提供身障停车位及友善洗手间的商店,2018年又提供适合无障碍空间的路线规划。去年Google也针对听损人士提供即时字幕及声音增强App。