每日读报的时候看到的。港科港大上交几个人合作,提出的一个新任务。
指的是以前的检测都是“你说检测dog,模型就给你检测出dog”,但是现在有了chatgpt这种大语言模型后,我们能做的更多了,我希望能直接说出我的需求,ai来分析我的需求,然后检测可以满足需求的地方。比如“我说给我一杯冷饮,模型分析之后,检测出冰箱的位置”。
解释万千不如一个场景说明:
我现在跟机器人说:“请帮我拿一杯冷饮”,机器人看了一圈,发现没有冷饮,于是问LLM冷饮会在哪里呢?LLM告诉他可能会在冰箱里。于是机器人就走去冰箱那里查看有没有冷饮。
他们自己提出一个baseline:
个人觉得这个新任务挺有趣的,也很切合ai未来发展的方向,如果被录了,估计能收获不少cite。