人工智能很多方面已超人类，但看漫画除外

最新一项研究结果显示，虽然人工智能(AI)在许多方面的表现足以取代人类，但至少在看漫画书这方面与人类还相去甚远。

当前，人工智能在许多方面的表现都在赶超人类，甚至已经超越人类，如面部识别、物体识别、象棋、围棋、视频游戏，以及许多其他方面任务。

人们不禁要问：人工智能在哪些方面不如人类呢？或者说，至少目前还难以超越人类呢？得益于马里兰大学帕克分校(UMCP)的一项研究，我们似乎找到了答案。

近期，马里兰大学教授墨希特·艾耶尔(Mohit Iyyer)及其同事对人工智能理解漫画书的能力进行了测试。结果显示，人工智能在这方面能力远不及人类。

众所周知，漫画是由一系列的图片构成的，同时还配以文本加以注释。文本和图片配合地如此之紧密，以致于单独看图片、或者单独看文本，很难理解其中的寓意。

而且，根据创作者的不同，不同的漫画之间的绘画风格、语言风格和排版风格都存在很大的差异。更重要的是，与视频不同，漫画的不同画格(图片)之间的时间和空间是不连贯的，中间的过渡情节往往需要读者去想象。

艾耶尔的测试结果显示，这种在人类看来是自然而然的能力，对于人工智能来说却是难于登天。

为了了解人工智能理解漫画情节的能力如何，艾耶尔及其同事首先利用4000本高质量漫画书构建了一个由120万张漫画画格(图片)组成的数据集，其中每张画格还配备有相应的文本对话框转录数据，使得整体的数据集体积达到了 120GB。出于版权方面的考虑，这些数据集全部来自20世纪30年代至50年代的漫画作品。

为了测试人工智能理解漫画的能力，研究人员设计了让人工智能程序根据之前见过的画面预测下一个画格的实验。首先，要让人工智能学习漫画的操作过程。研究小组将漫画中的一个画格及其文本投给不同的机器算法，让它们学习一组漫画中的每个画格之间是如何相互连接的。

经过训练之后，研究人员使用一组人工智能之前没有见过的漫画(由多张图片组成)对人工智能机器进行测试，并要求它们预测出下一张图像、或后面的文本内容。

其结果令人大跌眼镜，人类预测漫画的下一个情节或内容的正确率可达到 80%，但人工智能的准确度却难以接近人类的水平。艾耶尔称：“在该测试中，人工智能在任何一方面的表现都不及人类。”

其实，该结果也不是特别令人意外。虽然机器学习在图像和文本识别方面取得了显著进步，但仍缺乏人类大脑所具备的常识和逻辑能力。因此，在理解漫画方面人类仍更胜一筹，或者说至少目前如此。(编译/谭燃)

微信名：腾讯研究院

微信ID：cyberlawrc

❶ 网聚智慧 连接未来
❷ 研究合作：[email protected]

❸ 长按右侧二维码关注

公众号搜索“腾讯研究院”收听研究院及各子中心账号