谷歌即将推出的Pixel 11智能手机将搭载实时视频翻译功能,这一能力由Gemini驱动,能够在通话或视频播放过程中即时翻译外语内容。笔者近日在一场演示中亲身体验了这项功能。

演示场景

在演示中,Gemini实时翻译功能被展示于一段外语视频通话场景中。系统可以在不中断视频的情况下,将对话内容实时转译为用户所选语言,整个过程流畅且延迟极低。这与传统的字幕翻译有所不同,Gemini能够在语音层面进行处理,使用户几乎可以像听母语一样理解对方所说内容。

功能亮点

该功能最突出的特点在于其实时性与自然度。翻译结果并非逐字机械输出,而是经过语义理解后以更符合目标语言表达习惯的方式呈现。此外,系统还能识别语境变化,对专有名词和口语化表达进行合理处理。

在实际体验中,即便说话者语速较快或存在口音,Gemini的识别与翻译准确率依然保持在较高水准,展现出其强大的多语言处理能力。

应用前景

这一功能有望在跨语言商务沟通、国际旅行以及多语言家庭日常交流等场景中发挥重要作用。随着Pixel 11的正式发布,Gemini实时视频翻译或将成为手机端多语言交流体验的重要标杆。

目前,该功能尚未正式上线,但从演示效果来看,其实际表现已相当成熟。

Q&A

Q1:Pixel 11的Gemini实时翻译功能是怎么工作的?

A:Gemini实时翻译功能可以在视频通话或视频播放过程中,对外语内容进行即时语音级别的翻译,不需要中断视频,延迟极低。它不是简单的逐字翻译,而是经过语义理解后以更自然的方式输出目标语言内容,能够处理口语化表达和专有名词。

Q2:Pixel 11的Gemini实时翻译准确率高吗?

A:根据演示体验,即使说话者语速较快或带有口音,Gemini的识别和翻译准确率依然保持在较高水准,表现出较强的多语言处理能力。不过该功能目前尚未正式上线,大规模使用后的实际表现有待进一步验证。

Q3:Gemini实时视频翻译功能在哪些场景下最实用?

A:该功能在跨语言商务沟通、国际旅行以及多语言家庭日常交流等场景中最为实用。用户无需借助第三方翻译工具,即可在通话中实时理解对方说话内容,大幅降低语言沟通门槛。

CNET