俯拍书桌:暖光下的彩色文具、手写便笺与手绘画册

我于2019年11月加入Google XR 团队,负责AR眼镜项目中,核心的实时翻译与转录功能开发。当时和其余3位核心SWEs合作,完成了整个app端从设计到最终落地的所有工作。

项目演示

我的工作

在这个小组项目中,我负责搭建核心的用户体验模块。之前ASR模块负责将用户 say 转换为文本,而翻译模块负责将文本翻译为其他语言。其中解决的一个巨大问题就是ASR输出文本的不确定性导致文本输出到小窗口上,会有比较明显跳动和回滚。我们设计了基于token的追踪算法。稳定了整个文本的输出。