Human or Not? A Gamified Approach to the Turing Test
Daniel Jannai, Amos Meron, Barak Lenz, Yoav Levine, Yoav Shoham[AI21 Labs]
是人还是AI？图灵测试的游戏化方法
动机：通过在线游戏实验“Human or Not?”来评估AI聊天机器人模仿人类对话的能力，以及人类是否能区分AI和人类。通过该实验，旨在揭示人类和AI相互交织的不可避免的未来。 方法：设计并发布了一个在线游戏实验，用户与另一方进行短暂的对话，并在结束时投票，判断他们是与另一个人类用户对话还是与一个AI机器人对话。 优势：实验规模庞大，涉及超过150万用户进行了超过1000万次对话，为类似于图灵测试的评估提供了具有统计学意义的结果。实验发现显示出AI的模仿人类能力有了惊人的进展。通过在线游戏实验“Human or Not?”评估了AI聊天机器人模仿人类对话的能力，发现AI的模仿能力取得了惊人的进展。
https://arxiv.org/abs/2305.20010
