【时间】人工智能赋能大都会艺术博物馆,百万馆藏尽收眼底

  大都会艺术博物馆收藏了 200 万件艺术品。就在两年前,大都会艺术博物馆启动了一项开放访问计划Open Access Program,承诺开放相关数据,将馆藏能够向公众公开的艺术品的影像和数据资料向大众开放。这项计划在大都会博物馆扩大全球影响力的使命承担了非常重要的角色,因为该计划帮助其馆藏藏品成为互联网上最容易被访问的被研究的,同时也是最有研究价值的艺术品之一。

  为了让每件艺术品都更容易被看到和研究,博物馆仔细编目和标记了所有馆藏艺术品。但是到目前为止,艺术品的编目和标记都是靠人工完成的,因为艺术品本身非结构化的属性使其难以实现自动化地编目和标记。大都会艺术博物馆目前正在试验微软 Azure 搜索Azure Search的认知搜索Cognitive Search功能,规模化地解读其馆藏艺术品挖掘隐藏在它们背后的洞察,在百科全书般的馆藏集合寻找艺术品之间的联系,并通过互联网上的信息强化人们对它们的了解。

  我们正处于新一轮‘文艺复兴’的关键时期,通过人工智能将艺术与科学相结合,帮助线上访客建立他们与艺术之间更加深入更加个性化的联系。

  Maria Kessler,大都会艺术博物馆数字合作高级项目经理

  拉人与艺术之间的距离

  大都会艺术博物馆是世界上最大的艺术博物馆之一,拥有 200 万件艺术品馆藏,代表着全球 5000 年的艺术传承。尽管大都会艺术博物馆的藏品陈列在纽约,但它的目标却是让全世界的人都能看到其百科全书式丰富的藏品。大都会艺术博物馆数字合作高级项目经理 Maria Kessler 表示 大都会艺术博物馆每年的游客访问量是 700 多万人次,但我们的目标是覆盖全球 39 亿互联网用户,让他们都有机会看到我们的馆藏艺术品。

  为了实现这一目标,大都会艺术博物馆推出了开放访问计划Open Access Program让人们可以通过它的官方网站或者开放 API 免费浏览并下载馆藏艺术品的图片和数据资料。Maria Kessler 说我们坚信,博物馆里总有一件艺术品可以打动世界上每个人。为此,我们更需要拉有艺术鸣的人与艺术之间的距离。我们的目标是研究出一种方法,使得全球观众能随时随刻地看到,并有机会去了解一件世界上数一数二的艺术藏品,将观众与艺术品连接在一起。

  数据化的艺术

  探索艺术需要大量的数据作为支撑。艺术有很多视觉元素例如艺术媒介技法物体人物色彩等。每件作品背后也都有各自的故事艺术家的背景居住环境以及谁影响了他们的创作风格等等。

  收集这些背后的艺术信息是很有挑战性的,在数字领域更是如此。你不可能像提取文件那样轻松地提取图像的信息,因为它们并不能被清晰明确地抓取。相反,这些信息需要先被识别和解释然后与艺术专家之前调查所得的信息整合在一起才能完成收集。

  大都会博物馆第一次对在线藏品使用主题关键字进行标记是通过人工完成的。大都会艺术博物馆藏品信息总经理 Jennie Choi 表示整个团队仔细检查艺术作品的数码图像,然后给他们看到的西贴上标签。这是一项相当耗费人力的工作,团队的成员对每一件艺术品都要细心检查。

  人工智能帮助人们找到与之相通的艺术作品

  大都会艺术博物馆现在正在研究如何利用人工智能大范围地获取藏品的新信息。博物馆与微软合作,开展了一个名为艺术探索者Art Explorer的概念验证项目。该项目利用微软 Azure 搜索的认知搜索Cognitive Search功能检测每件藏品生成所需的信息。

  当一件艺术品的数字图像和现有元数据被导入 Azure 搜索时,认知搜索的管道pipeline能够识别该艺术品描述的是哪些物体哪些艺术品在视觉上与之相似,以及与其相关的地理坐标。管道的其他部分能将所有网络上关于该艺术家的信息进行导入。最终得到一个丰富的元数据库,这个数据库被部署到一个搜索索引,并通过 Azure 的 Web 应用实现最终的应用。

  以这种方式处理藏品之后,用户可以通过开放访问集合Open Access collection浏览线上藏品,并从多个维度研究这些艺术品。例如,用户如果想要查看所有油画类型的线条绘图的描绘特定动物或人物的艺术品,某个艺术家的所有作品,或者是深入研究相关的艺术品,都可以通过这个方式实现。有了这些触手可及的艺术知识,以及满足用户多维度选择需求的动态导航功能,用户就能够以他们之前未曾尝试过的方式探索和发现那些触动过他们的艺术品。

  规模化有效益地生成所需知识

  大都会艺术博物馆利用基于人工智能的方法了解艺术,帮助自身在生成有用的知识的过程,大大减少所需的时间和精力。认知搜索管道仅耗时两就可以完成全部配置,随后只需要一个晚上的时间就可以录入数十万件艺术品的相关信息。而在过去的人工检查,一个人在一个时之内只能获取少数艺术品的一部分信息。大都会艺术博物馆数字部门的首席开发者 Spencer Kiser 表示通过微软 Azure 认知搜索功能,我们得以用更快的速度标记全馆藏品。

  更深刻地了解和欣赏艺术

  大都会艺术博物馆还利用人工智能丰富用户体验,鼓励人们以身临其境的方式探索艺术。认知搜索生成的元数据可以应用到新的搜索和导航索引,例如,人们可以通过搜索艺术品的创作地点,或是搜索它的部分描述找到这件艺术品。同样,展示视觉上相似的作品和其它相关的物品,也同样鼓励着人们跨越艺术品媒介和创作时间等维度,通过视觉语义探索丰富的博物馆馆藏。

  人们甚至可以从视觉上直观探索艺术作品的不同的维度例如,作品所描绘的主题作品的创作时间,或者同一艺术家的其它作品。Kessler 说我们真的很兴奋,因为认知搜索可以向我们展示包括与其相关的艺术品在内的更多信息,要是没有认知搜索,这些信息可能永远不会被发现。

  轻松部署解决方案

  Azure 搜索是一项管理全面的可以被完全托管的服,因此在构建新的艺术探索者Art Explorer的时候不需要建立有形的基础设施。Azure 搜索的开发速度也很快一个兼职开发人员在两的时间内就可以部署解决方案所需的所有 Azure 服,并依靠许多内置的 Azure 认知功能,在短时间内搭建好 Azure 搜索管道。

  新一轮的文艺复兴

  大都会艺术博物馆一直致力于探索新的方式,尝试将人们与艺术联系起,使人与艺术自由互动。随着人工智能的不断应用,大都会博物馆未很有可能开发出针对全球每个人不同的兴趣的动态展览。

  Kessler 表示通过人工智能,我们可以看到肉眼以前看不到的西。藏品之间的关系是有迹可循的每件艺术品自身和背后都有可以被挖掘的信息,这些信息将他们一件件地串联在一起。我们正处于新一轮‘文艺复兴’的时期,利用人工智能把艺术与科学融合在一起,能够帮助在线访客与艺术之间建立起一种更加深入的更个性化的联系。