利用XR技术保护历史文化遗产,MIT希望迈进建筑元宇宙
纳斯尔·帕萨清真寺(Khwaja Abu Nasr Parsa)是阿富汗巴尔赫一座壮观的清真寺。这座装饰复杂的建筑最早可追溯到 16 世纪,因其瓷砖和彩绘圆顶的绚丽色彩而被称为“绿色清真寺”。
如果交通便利,绿色清真寺会吸引很多游客。但巴尔赫位于阿富汗北部,距离乌兹别克斯坦边境大约 50 英里,很少有游客能到达这里。不过,现在任何人都可以通过麻省理工学院(MIT)的新项目“Ways of Seeing”(一种创新的历史保护方式)生动地了解这座清真寺。
结合3D及XR技术创造沉浸式体验
Ways of Seeing项目使用多种图像模式,为阿富汗的4个历史建筑遗址制作丰富的视觉记录,包括色彩丰富的3D态图像、VR图像(能够带观众参观建筑,有时甚至进入建筑内部)以及精美的手绘建筑效果图。该项目的图像已于今年6月底通过MIT图书馆提供给公众观看,并对公众开放。项目资料的一部分也将通过Archnet提供,Archnet是一个关于穆斯林社会建筑环境的开放资源,由MIT图书馆的阿迦汗文献中心和阿迦汗文化信托基金合作开发。
“2021年8月美国从阿富汗撤军后,副教务长Richard Lester召集了一批MIT的教职员工组成一个工作小组,思考我们作为一个学者团体在这个时间点可以做哪些对阿富汗人民有意义的事情。”领导这个项目的MIT政治学教授Fotini Christia说道,“Ways of Seeing是我与这群同事讨论后构思的一个项目,它真正继承了MIT的传统,将实地数据、技术和艺术相结合,保护遗产,服务世界。”
Christia是福特国际社会科学教授,也是MIT苏世民计算学院社会技术系统研究中心主任,曾在阿富汗广泛开展有关民间社会的实地研究。她认为这个项目是一个独特的机会,可以通过复杂的数字元素和精雕细琢的水墨画,为非凡的遗产地构建一个详细、易懂的记录。
MIT 06级建筑学硕士Jelena Pejkovic说道:“我们的想法是,这些图画将激发人们对这些遗产的兴趣和自豪感,以及一种尽可能长久地保护这些遗产的动力。”
Pejkovic 补充说道:“这些绘图非常耗时,对我来说,这也是创作的动力之一。它们要求你放慢脚步,全神贯注。你能从我们收集的这些材料中得到什么?如何花时间去观察、解读和理解眼前的一切?”
该项目的“数字转型战略”由Nikolaos Vlavianos领导,他是建筑系设计与计算小组的博士生。该小组利用尖端技术和无人机对大型建筑遗址进行3D数字重建,并在XR中创造沉浸式的体验。Vlavianos还对人类在XR和亲自体验这些空间时的心理和生理反应进行了研究。
Vlavianos说道:“我把这个项目看作是向更广阔的建筑元宇宙迈进的努力,它包括在XR中沉浸式体验世界各地由于政治、社会甚至文化限制而难以或无法进入的物理空间。元宇宙中的这些空间是信息枢纽,倡导一种生活、感知、视觉、听觉和触觉的体验方法。”
MIT阿迦汗教授兼阿迦汗伊斯兰建筑项目主任Nasser Rabbat也为项目的早期阶段提供了建议和指导。
该项目正式名称为“观看之道:记录阿富汗濒危建筑遗产(Ways of Seeing: Documenting Endangered Built Heritage in Afghanistan)”,包括对阿富汗4个不同历史遗址的成像。
它们是巴尔赫的绿色清真寺;喀布尔南部的佛教圆顶建筑帕尔旺佛塔;赫拉特的加瓦尔•萨阿德 (Gawhar Saad)陵墓,以纪念帖木儿皇帝的王后,她本人在14和15世纪也是一位极具影响力的人物;以及贾姆尖塔 (Minaret of Jam),这是一座200英尺高的非凡塔楼,可追溯到12世纪,位于阿富汗西部遥远的哈里河旁。
这些遗址涵盖了多种宗教和多种建筑类型。许多遗址位于阿富汗境内的偏远地区,游客(包括学者)无法轻易抵达。
用数万张照片重建遗址
Ways of Seeing项目由MIT艺术、科学和技术中心(CAST)的Mellon教职人员以及MIT人文、艺术和社会科学学院(SHASS)的教员提供资助。它由数据、系统和社会研究所(IDSS)、MIT苏世民计算机学院社会技术系统研究中心(SSRC)、MIT政治学系和SHASS共同发起。
参加MIT本科生研究机会项目(UROP)的两名韦尔斯利学院学生,大三学生Meng Lu和Muzi Fang也在Vlavianos的指导下参与了该项目,为儿童制作了一个涉及加瓦尔·萨阿德遗址的电子游戏。
为了生成图像,MIT团队与阿富汗当地的数字制作团队合作,前往4个遗址拍摄了数千张照片,并接受了Vlavianos的远程培训,以执行3D扫描空中作业。
团队工作人员通过收集15000到30000张图片记录了这些地点,而Vlavianos则通过计算生成了点云和带有详细纹理映射的网格几何图形。这些模型的成果包括静态图像、XR中的沉浸式体验以及Pejkovic使用的数据。
“Ways of Seeing项目采用了一种远程数据收集的混合模式。" Vlavianos说道,他在MIT工作期间,还在秘鲁的马丘比丘和希腊阿托斯山的西蒙诺斯·佩特拉修道院领导过类似的项目,“为了更轻松地制作类似的图像,我正在研究的下一步是利用同时部署在世界不同地点的自动无人机快速制作图像,并利用先进的神经网络算法从较少的图像中生成模型。”
未来,Vlavianos设想利用众包数据、历史图像、卫星图像,甚至让当地社区学习XR技术,记录和重建世界各地的其他遗址。
Pejkovic根据Vlavianos收集的数字模型绘制了图画,她小心翼翼地使用传统的渲染技术,首先按比例勾勒出每个结构的测量轮廓,然后逐渐在图画中着墨,使建筑物具有质感。她使用的着墨技术基于VERNADOC,这是一种由芬兰建筑师Markku Mattila开发的记录乡土建筑的方法。
Pejkovic说道:“我想重新发现传统的记录方式,直接用手测量,用手绘图。”十多年来,她一直活跃在文化遗产保护领域。
Pejkovic回忆说,她在第一次亲眼看到这种手绘效果图时,心里想着人类不可能画出这样的图画。随后她诙谐地补充道,“你知道MIT的座右铭是'mens et Manus',即头脑和手。”于是,她开始亲自动手绘制这些大比例的效果图,她绘制的Jam尖塔图像已经被MIT的团队打印成了清晰的 8 英尺版本。
“该项目的最终目的是让所有这些成果都与实地收集数据的阿富汗人共享,这些成果不仅提供给在世界各地流离失所的阿富汗难民,也提供给任何渴望亲眼目睹它们的人。” Christia说道,“制作这些遗址的数字孪生体也是为了成为未来任何保护工作的信息库。这种模式可以复制和推广到其他面临战争、环境灾难或文化侵占风险的遗产地。”