研究人员建立了一种算法,能够捕获图像和绘画引起的情感。
他说:“可以说,这种能力对于让人工智能变得更聪明、更人性化至关重要。” 帕诺斯·阿赫利奥塔斯斯坦福大学计算机科学博士研究生
来自的专家 人工智能 他们现在已经非常擅长创造能够“看到”周围世界的计算机。允许您识别各个领域的物体、动物和活动的算法。人工智能正在成为未来自动驾驶汽车、飞机和安全系统的基础技术。
如今,一组研究人员正在努力教计算机不仅识别图像或绘画中的物体是什么,还要识别这些图像和绘画给人们带来的感受。
我说的是人工智能情感算法。
ArtEmis,通过绘画了解艺术
为了实现这一目标,Achlioptas和他的团队收集了一个名为ArtEmis的新数据集,该数据集最近在 在arXiv的预印本上发布。
数据集基于81.000幅WikiArt绘画。 由组成 来自440.000多人的6.500份书面回复 指出绘画如何使他们感到,并解释了为什么他们选择了这种特定的情感。
使用这些答案,Achlioptas和由斯坦福大学工程学教授领导的团队 列奥尼达斯·吉巴斯,他们训练了神经说话者。
这些是用书面文字做出反应的人工智能:在这种情况下,它们对视觉艺术产生情感反应并定义它们。
为什么是艺术?
研究人员选择专门使用艺术,因为艺术家的目标是唤起观众的情感。 ArtEmis的工作与主题无关,从静物画到人像或抽象画。
Guibas指出,这项工作是一种新的计算机视觉方法。
经典的计算机视觉采集工作是关于文字内容的。 “照片里有三只狗”,或者“有人正在用杯子喝咖啡”。相反,我们需要定义图像情感内容的描述。
列奥尼达斯·吉巴斯
8种情感类别
该算法将图像和绘画分为八个情感类别之一(从惊讶到娱乐,从恐惧到悲伤),然后在书面文本中解释这些图像中的哪些内容证明了情感阅读的合理性。
人工智能正在发挥其作用。他们可以向她“展示”一张她不知道的图像,作为回应,她会说出一个人看到它时的感受。
令人惊讶的是,研究人员表示,字幕准确地反映了图像的抽象内容,其方式远远超出了现有计算机视觉算法的能力。
不仅: 该算法不仅仅捕捉完整图像的广泛情感体验。它可以解读画作中的不同情感。
ArtEmis走得更远: 它还考虑了人类反应的主观性和可变性。
观看画作时,并非所有人都能看到并感受到同一件事。 看到蒙娜丽莎(Mona Lisa)感到有些高兴,其他人感到悲伤。 ArtEmis可以区分这些差异。
艺术家的工具
在短期内,研究人员预计ArtEmis可以成为艺术家在创作过程中评估其作品的工具,并确保他们的作品具有预期的影响。
它可以为艺术家的工作提供指导和灵感。设计新徽标的图形设计师可能会使用 ArtEmis 来瞄准其情感效果。
这只是开始。从画到人。
后来,经过进一步研究和完善,可以完善基于情感的算法。 人工智能将有助于为聊天机器人和对话头像等应用程序带来情感意识。
“我认为 ArtEmis 将人类心理学的见解带入了人工智能,”Achlioptas 说道。