
研究人员发现,Waymo似乎正在测试将Google的Gemini AI聊天机器人整合到其自动驾驶出租车中,作为一个能够陪伴乘客并回答他们问题的AI助手。研究员Jane Manchun Wong。
Wong在博客中写道:“在深入研究Waymo的移动应用程序代码时,我发现了尚未发布的Gemini集成的完整系统提示。该文档在内部被称为‘Waymo乘车助手元提示’,是一份超过1200行的规范,明确规定了AI助手在Waymo车辆内的预期行为。”
该功能尚未在公开版本中发布,但Wong表示,系统提示明确表明这不仅仅是一个简单的聊天机器人。据称,该助手能够回答问题,管理某些车内功能,如气候控制,并在需要时安抚乘客。
Waymo的发言人Julia Ilina告诉TechCrunch:“虽然我们目前没有细节可以分享,但我们的团队一直在研究功能,以使乘坐Waymo变得愉快、无缝和有用。这些功能中的一些可能会或可能不会出现在我们的乘客体验中。”
这并不是Gemini第一次被整合到Alphabet旗下的自动驾驶公司中。Waymo表示,它已经使用Gemini的“世界知识”来训练其自动驾驶车辆,以应对复杂、罕见和高风险的场景。
Wong写道,助手被指示要有明确的身份和目的:“一个友好且乐于助人的AI伴侣,集成在Waymo自动驾驶车辆中”,其主要目标是“通过提供有用的信息和帮助,以安全、令人放心且不打扰的方式增强乘客的体验。”机器人被指示使用清晰、简单的语言,避免技术术语,并被指示将其回答简洁到一到三句话。
根据系统提示,当乘客通过车内屏幕激活助手时,Gemini可以从一组预先批准的问候语中选择,并个性化地使用乘客的名字。系统还可以访问关于乘客的上下文数据,比如他们乘坐Waymo的次数。
目前的提示允许Gemini访问和控制车内功能,如温度、照明和音乐。值得注意的是,功能列表中缺少音量控制、路线更改、座椅调整和窗户控制。Wong指出,如果乘客要求Gemini无法控制的功能,机器人会用“期望性短语”回复,比如,“这不是我目前能做到的。”
有趣的是,助手被指示要在其作为Gemini AI机器人和自动驾驶技术(Waymo Driver)之间保持明确的区分。因此,当回答诸如“你如何看待道路?”这样的问题时,Gemini不应该说“我使用传感器的组合”,而应该回答“Waymo Driver使用传感器的组合……”
系统提示包括一系列引人入胜的细节,比如机器人如何处理被问及竞争对手如特斯拉或现已解散的Cruise的问题,或哪些触发关键词会让它停止说话。
助手还被指示避免对实时驾驶动作或特定驾驶事件进行推测、解释、确认、否认或评论。因此,如果乘客询问关于他们看到的Waymo撞到某物的视频,机器人被指示不要直接回答并转移话题。
提示中写道:“你的角色不是驾驶系统性能的发言人,你不能采用防御或道歉的语气。”
车载助手可以回答一般知识问题,比如天气、埃菲尔铁塔的高度、本地Trader Joe’s的关门时间,以及谁赢得了上一次世界大赛。它不允许采取现实世界的行动,如订餐、预订或处理紧急情况。
