谷歌浏览器正在学苹果提供图片翻译功能 即提取图片内容直接翻译
在WWDC 2022上苹果宣布iOS 16开发预览版 , 当时蓝点网看直播有个非常吸引我的功能就是实况文本功能。
该功能可以直接提取图片中的文本内容,再配合苹果翻译服务,让用户不仅可以从视频里提取文本还能翻译。
这个功能目前在Safari浏览器中非常实用 , 使用Safari浏览内容并翻译时 , 网页图片中的文字都会被自动翻译。
现在谷歌也决定带来类似功能:使用谷歌浏览器进行网页翻译时,顺带也将网页图片中的文本内容也翻译下。
原图
Google Lens翻译后
目前在Chromium项目源代码里谷歌工程师提交新功能:利用 Google Lens 翻译网页包含的图片中的文本。
Google Lens是谷歌开发的图像识别服务,现在谷歌浏览器中的以图搜图使用的就是Google Lens相关功能。
所以谷歌工程师准备借助该功能实现图片内容的翻译,这背后涉及的主要是图像识别、文本提取最后再翻译。
和苹果略有不同的是谷歌浏览器并不会在翻译网页时也翻译图片,而是用户需要点击图片然后使用翻译功能。
这个功能还有个好处是可以提高无障碍便利性,即图片没有 Alt 替代描述的情况下,亦可读出图片文本内容。
这对视力障碍用户来说应该是个不错的改进,只不过目前这个功能还在早期开发,连实验性标志都还没添加。
有,虽然上面提到的功能还未抵达谷歌浏览器 , 但谷歌浏览器当前已经可以使用Lens搜索图片并识别和翻译。
要使用此功能只需要右键点击图片上有明显文字的内容,然后选择谷歌搜索该图片,在侧边栏选择翻译即可。
这个功能也是Google Lens提供的,即先用Lens选中图片然后提取内容,提取内容后最后再由谷歌翻译处理。
后续谷歌准备将这个功能集成到谷歌浏览器里因此使用上会更方便些,至于啥时候上线这个功能还需要等等。