比 Siri 更懂 iPhone！GPT-4V 可“操作”手机完成任意指令，无需训练

图片地址：https://img.ithome.com/newsuploadfiles/2023/11/16aa65fc-e250-4008-956c-d8ede969c084.png?x-bce-process=image/format,f_auto

GPT-4V，就是 Siri 终结的开始。一项研究发现：无需任何训练，GPT-4V 就能直接像人类一样与智能手机进行交互，完成各种指定命令。比如让它在 50-100 美元的预算内购买一个打奶泡的工具。它就能像下面这样一步一步地完成选择购物程序（亚马逊）并打开、点击搜索栏输入“奶泡器”、找到筛选功能选择预算区间、点击商品并完成下单这一系列共计 9 个操作。根据测试，GPT-4V 在 iPhone 上完成类似任务的成功率可达 75%。因此，有人感叹有了它，Siri 渐渐就没有用武之地了（比 Siri 更懂 iPhone）谁知有人直接摆摆手：Siri 压根儿一开始就没这么强好嘛。（狗头）还有人看完直呼：智能语音交互时代已经开始。我们的手机可能要变成一个纯粹的显示设备了。真的这么🐂🍺？GPT-4V 零样本操作 iPhone这项研究来自加州大学圣地亚哥分校、微软等机构。它本身是开发了一个 MM-Navigator，也就是一种基于 GPT-