我说:机器人的一种新的多模态、多步机器人比赛

我说:机器人的一种新的多模态、多步机器人比赛

当机器人接管我们的世界时,他们不仅要学会如何与我们沟通,还要互相学习。最近的研究表明,两个机器人用二进制向量的形式用一种共享语言进行交流是可能的。发送方(机器人A)和接收方(Robot B)之间的这些对话通常是单向的,并且限于一定数量的是/不是答案。

但CDS硕士生卡特丽娜伊蒂莫娃,Kyunghyun Cho教授,Andrew Drozdov(纽约大学计算机科学),和Douwe Keila(脸谱网)都认为,我们的机器人可以做的更好。在“多模态、多步骤的参考游戏”中,他们发明了一种新的机器人对话游戏,它更能模拟人与人之间的交流。

首先,他们的新游戏中的机器人被提示进行双向对话,这意味着他们可以像他们希望的那样发送更多的信息给对方。第二,他们必须用他们共同的语言来交换两种不同的信息方式:文本和图像。

游戏本身就展开了这样的事情。发送者的机器人是一个哺乳动物的照片,然后指示传达它看到接收机器人 。接收者通过阅读文本数据猜测发送者看到了什么动物,然后向发送者询问关于照片的附加问题。这意味着会话不仅仅是将信息从一个机器人到另一个,但交换不同形式的信息(如文本和图形)之间。 帮助机器人,研究人员利用神经网络的动力和实现技术的视觉和文本的关注到游戏。

研究人员发现,多模态、多步的游戏不仅提高了机器人的预测精度,而且他们的对话也变得更加人性化。这些发展会使人类和机器更紧密地结合在一起吗?或者我们将变得过于亲密而不舒适?

原:Cherrie Kwok

相关新闻