Facebook开源AR文字修改算法,未来或用于AR眼镜

青亭网( ID:qingtinwang )--链接科技前沿,服务商业创新

6月18日消息,Facebook发布了一项基于无人监督AI模型的开源项目:TextStyleBrush,该项目的特点是可通过计算机视觉、AR等技术来修改真实物体上的文字,类似于视觉翻译的效果。对于这项研究,Facebook CTO Mike Schroepfer表示:未来,基于AR和AI的实时文字修改功能或许可以用于AR眼镜,帮助你实时翻译路标或是手写笔记等文字。

微信图片_20210618113334

据青亭网了解,该项目的科研团队包括Facebook博士后研究员Praveen Krishnan和研究科学家Tal Hassner。其原理类似于Word文档中的风格刷,区别在于TextStyleBrush主要提取摄像头数据中的文字风格,并模拟原有字体生成新的文字,再通过AR来覆盖原有文字。科研人员表示:TextStyleBrush在自动测试和用户研究中,准确性突破了现有标准,适用于任何类型的文字。

与现有的文字识别和AR算法不同,TextStyleBrush不需要定义特殊的字体,而是直接去识别文字图像的内容(词),以及多种特性,优点是无需再针对不同的字体进行重复训练。

应用场景方面,除了实时翻译外,TextStyleBrush也可以用来修改文字的字体,比如将电脑输入文字转化成手写体,并以AR的形式叠加在笔记本上。

ePcgzv1oQt8OWB2jlB Z8XvWmedkaiOtUFRtT

参考:NextReality

更多精彩内容,关注青亭网微信号(ID:qingtinwang),或者来微博@青亭网与我们互动!转载请注明版权和原文链接!
青亭网

微信扫码关注青亭网

青亭网

青亭 | 前沿科技交流群01

责任编辑:小新
分享到QQ 分享到微信
切换注册

登录

忘记密码 ?

您也可以使用第三方帐号快捷登录

Q Q 登 录
微 博 登 录
切换登录

注册