Google Gemini macOS 测试版曝光:支持系统级语音听写与 Magic Pointer 光标跟随

早报4个月前发布 小马良
120 0

Google 正在对其 macOS 桌面版 Gemini 应用进行一项重大更新测试,旨在弥合桌面端与移动端体验的差距,并引入更深度的系统级交互能力。早期测试版本显示,Gemini 将新增系统级语音听写、Magic Pointer(光标跟随)以及潜在的多设备联动功能,标志着 Google 正致力于打造一个统一且具备屏幕感知能力的跨平台 AI 助手。

Google Gemini macOS 测试版曝光:支持系统级语音听写与 Magic Pointer 光标跟随

核心新功能预览

1. 系统级语音听写:全场景的“语音键盘”

这是此次更新中最具实用价值的功能。Gemini 不再局限于应用内部的对话窗口,而是能够调出一个全局面板,在任何应用程序中为用户输入文字。

  • 热键触发:用户可以分配自定义热键,瞬间切换到浏览器、文档编辑器或代码 IDE 中开始口述。
  • 屏幕感知起草:这与 Google I/O 大会上展示的功能一脉相承,能够将口语化的想法实时转化为结构清晰的文本,并直接插入到光标所在位置,极大提升了内容创作效率。

2. Magic Pointer:视觉焦点的同步

借鉴了此前展示的概念,Magic Pointer 允许 Gemini 实时跟踪鼠标光标的位置。

  • 上下文对齐:在语音交互过程中,AI 能够知道用户当前正关注屏幕上的哪个元素(如一段代码、一张图片或一个按钮)。这确保了用户与模型之间的“视觉焦点”保持一致,使指令更加精准,减少了“我说的是左边那个”这类模糊描述的困扰。

3. 潜在的多设备联动

在视频和图像生成选项旁,测试版出现了一个用于“连接其他 macOS 设备”的菜单项。虽然具体用途尚未明确,但这暗示了未来可能实现桌面端实例间的协同控制,例如用一台 Mac 控制另一台 Mac 上的 Gemini 任务,进一步扩展了生态系统的互联性。

Google Gemini macOS 测试版曝光:支持系统级语音听写与 Magic Pointer 光标跟随

界面重构:向移动端看齐

为了配合这些新功能,Gemini Live 的界面进行了重新设计:

  • 全屏画布:采用了类似移动端的布局,中心带有标志性的发光效果,底部固定控制按钮。
  • 统一体验:这一变化表明 Google 有意在 iPhone、Android 和 Mac 之间创建统一的语音交互范式,而非维护两套割裂的界面逻辑。

战略意义:追赶竞品,构建生态壁垒

此次更新是 Google 既定计划的一部分,旨在今年夏天为 Mac 客户端引入 Gemini Spark 智能体及增强的语音功能。通过赋予 Gemini 系统级的读写能力和视觉感知力,Google 正使其与竞争对手站在同一起跑线上:

  • 对标 OpenAI:类似于 Codex 的远程控制和屏幕感知能力。
  • 对标 Anthropic:类似于 Claude 的 Dispatch 功能,实现跨应用的自动化操作。

目前,这些功能仅向一小部分测试用户开放,最终广泛发布的版本可能会有所调整。但毫无疑问,Gemini 正在从一个简单的聊天机器人,进化为一个真正理解并能在 macOS 系统中自由行动的“智能体”。

© 版权声明

相关文章