Google AR 眼镜(实时翻译与转录)
作为AR眼镜项目的核心成员。主要负责AR眼镜的实时翻译与转录功能。
我于2019年11月加入Google XR 团队,负责AR眼镜项目中,核心的实时翻译与转录功能开发。当时和其余3位核心SWEs合作,完成了整个app端从设计到最终落地的所有工作。
项目演示
我的工作
在这个小组项目中,我负责搭建核心的用户体验模块。之前ASR模块负责将用户 say 转换为文本,而翻译模块负责将文本翻译为其他语言。其中解决的一个巨大问题就是ASR输出文本的不确定性导致文本输出到小窗口上,会有比较明显跳动和回滚。我们设计了基于token的追踪算法。稳定了整个文本的输出。