卡罗拉·比比安·舍恩利布开始攻读博士学位时。在2005年学习数学时，她的第一个项目之一是帮助修复维也纳的一幅中世纪壁画。这幅画曾被一间旧公寓的墙壁所隐藏，但它的残骸上布满了白色的洞，这是几年前拆除墙壁造成的损坏。Schönlieb的修复工具不是油漆、溶剂或树脂，而是算法。“维也纳大学的一些保护者开始恢复体力，”水果挞。“然后，我们要用数字技术来实现这一点。”
MACH计划结合了艺术史学家、文物保护者、古典主义者、中世纪主义者和数学家的专业知识，以推进文物修复和考古学。
在拍摄损坏的壁画照片后，Schönlieb研究算法可以使用这些照片填补缺失，损坏的绘画碎片，创造了一个数字样机的原始壁画所需的样子。当时，只有少数论文描述了数学家和保险人如何共同努力恢复艺术品。保守派和艺术历史学家刚刚开始在机器上数字化档案，保存绘画，手稿和陶器。
中世纪壁画的一部分，曾经隐藏在维也纳公寓墙后面。图像信用：马赫。
现在剑桥大学的应用数学教授Sc'O'NeLeb利用图像分析和处理来进行艺术修复和保护。目前，她与其他数学家和人文专家合作研究数学在文化遗产中的应用（马赫）主动性。该倡议将艺术史学家、保育员、考古学家和中世纪学者的专业知识与数学家的专业知识相结合，以推进修复和物质文化研究。
在他们目前的项目“揭开隐形面纱”中，MACH团队使用了MATLAB®通过算法对罗马陶器进行分类，分析绘画的横截面，让学者们能够看到文物之间的新关系，并以数字方式修复过于精致的彩绘手稿，而不适合进行物理修复。项目重点的这三个领域已经酝酿了数年。
Re-Illuminating手稿
马赫合作始于2013年，当时Schönlieb在该大学做了一场关于数字图像恢复的演讲。剑桥菲茨威廉博物馆(Fitzwilliam Museum)的工作人员参加了此次活动，该博物馆以古今艺术品为特色。他们认为Schönlieb的方法可以应用到他们的工作中。
当时，菲茨威廉博物馆(Fitzwilliam Museum)的手稿和印刷书籍的保藏人，在听到Schönlieb的图像修复演讲时，一直在寻求非侵入式的手稿修复方法。她找到Schönlieb，建议他们一起工作。那就是马赫项目诞生的时候。
当面对损坏的绘画和文物时，保守党面临困境。虽然他们可以选择将一块恢复到它的原始形式所示，但损坏本身就可以编年一个对象的历史记录。例如，中世纪的照明手稿是手写的书籍，写在羊皮纸上，具有彩绘装饰，通常包括金或银等贵金属。在某些情况下，手稿可能会故意删除或添加以消除所有权标记，或掩盖令人反感的形象。
“使用虚拟和数学方法，可以让你保持(发光的手稿)原来的样子，保留那段历史，并提供一个恢复的、原始的版本，它可能看起来像什么。”它让你有机会两全其美。”
Suzanne Reynolds，Fitzwilliam博物馆的策展人
“通过恢复，我们获得了什么，我们通过恢复失败了什么？”询问Suzanne Reynolds，在手稿和印刷书籍的Fitzwilliam博物馆策展人。Reynolds是Mach组的成员，与中世纪照明手稿一起工作。
细节
修复领域。
最后结果。
大面积破损的手稿被数字化修复。图片:©剑桥菲茨威廉博物馆。
插图手稿在修复时尤其成问题。与其他形式的绘画相比，它们很少被修复。与雷诺兹、Schönlieb和剑桥大学应用数学和理论物理系以及菲茨威廉博物馆的助理研究员西蒙·帕里索托(Simone Parisotto)合作，正在开发一款应用程序，以解决“揭开隐形面纱”项目的一个分支中的这些挑战。
这款应用程序是为保护人员设计的，使用MATLAB开发，使用图像处理技术来识别损坏，并虚拟地重建手稿中的图像。它依赖于修补，这个词最初指的是对一幅画进行物理重建。在数学领域，inpainting指的是用数字方式还原图像。
利用深度学习和偏微分方程，MACH小组的程序可以填补受损手稿的空白，并预测不同修复途径的结果。用户用来自相同或相关手稿的例子训练算法——越多越好——然后算法重新构建图像中需要恢复的缺失内容。
雷诺兹说:“使用虚拟和数学方法可以让你保持物体的原样，保留它的历史，并提供一个恢复的、原始的版本，它可能看起来像什么。”“它让你有机会两全其美。”
除了恢复外，数学方法不仅可以数字化档案，还可以利用人工智能，使档案数据更有用处对保险柜，艺术史学家和考古学家更有用。
聚集罗马陶器
“揭开看不见的面纱”第二个焦点的想法起源于2015年，当时剑桥大学古典文学高级讲师亚历山德罗·劳纳罗（Alessandro Launaro）带着一个问题来到Schönlieb。作为一名考古学家，劳纳罗专注于罗马时期，一直在意大利西部挖掘遗址。几乎总是这样，他发现了大量的日用陶器，用于烹饪等日常工作，但面临着分析数千个陶器形状、壶边和底座的艰巨任务。
“我有一个考古问题，对大量证据的分析，”劳纳罗说。虽然有系统和全面的目录可以帮助考古学家分析更精致的罗马陶器（精细陶器），但没有任何东西集中在他想了解更多的日常陶器上。
“有人可以通过所有这些[陶器片段]形状，但这是超级繁琐的。由于我们是人类，我们犯了错误，我们有时累了，我们可能会错过一些东西。算法不会轮胎。“
剑桥大学应用数学教授Carola-Bibiane Schönlieb说
陶器，顾名思义，是考古遗址中发现的大部分陶器。但考虑到这些陶器的形状千变万化，以及这些发现的数量之多，要弄清楚不同地点不同陶器类型之间的关系一直是一项挑战。
劳纳罗说:“因为普通物品代表着日常物品，它让我们能够看到比雕像、马赛克或博物馆里漂亮的彩绘壶更大比例的古代人口。”创建一个目录来记录这些物品和它们之间的关系，可以进一步提供宝贵的见解，以了解过去文明的日常生活。“但这不是一个人能轻易做到的，”他说。
Schönlieb和Parisoto认为他们可以帮助Launaro解决这个问题。“有人可以通过所有这些形状，但这是超级乏味，”Schönlieb说。“既然我们是人类，我们犯了错误，我们有时会累，我们可能会错过一些东西。算法不会轮胎。“
Parisotto和Schönlieb求助于MATLAB创建了劳纳罗设想的目录。2016年，他们试用了一种系统，旨在将一块陶器的侧面图与数据库中类似的图像进行匹配。考古学家根据其侧面形状对古代陶器进行分类，认为相似的形状表明了年代和功能关系。
古代罐由个人资料所代表的形状分类。假设类似的简档与相关的相关性。图像信用：马赫。
但它并不好。参考陶瓷图像没有很好地组织。该团队需要退后一步并自己做这组织。“鉴于它将涉及成千上万的独特形状的陶器，我们需要利用计算机的处理权力，”Launaro说。
为了填充和组织他们自己的陶器数据库，该团队添加了数千张图片，以及一些普通陶器的黑白简介。到2020年底，大约6000个陶器剖面将被包括在内。Parisotto正在使用无监督深度学习算法对相关陶器形状进行分组或聚类。该程序创建了分层的树状图，将陶器碎片分组，以便更好地向考古学家展示不同类型之间的关系。“我们的想法是从可用的对象中提取相关的特征，”Parisotto说，“并找到连接不同特征的关系。”
通过确定普通软件类型之间的关系，考古学家可以更好地将其开发和分布在空间和时间上。然后，这些关系可以提供关于贸易，结算模式或饮食习惯的重要发展的线索。Mach集团仍在开发和测试应用程序，但是，“最终的想法是创建一个工具，使考古学家能够更有效地解释他们挖掘和学习的网站，”Launaro说。
油漆碎片上的美术课
Kasia Targonska-Hadzibabic是一项与Mach团队和物理学通过培训协会的研究，正在研究“揭幕隐形”子项目，该子项目借鉴类似于罗马陶器数据库的原则。但代替陶器，targonska-havzibabic正在与Parisote一起使用，为涂料芯片横截面的数字图像构建一个平台，可以进行分类和比较。
在艺术品保护中，研究一幅画中小碎片的横截面可以揭示艺术家是如何创作这幅作品的。Targonska-Hadzibabic说:“它可以告诉你艺术家使用的技术，以及这幅画是如何绘制的。”
MACH团队还创建了一个系统，可以识别来自不同画作、艺术家或时期的油漆芯片横截面之间的联系，从而找出相似之处。
传统上，保存员会将这些横截面保存在树脂中，并在显微镜下检查不同的油漆层。近距离观察，树脂覆盖的油漆芯片看起来像一个彩色的多层三明治。Targonska Hadzibabic在艺术保护方面的同事一直在数字化他自己的颜料碎片截面档案，他想看看除了一位艺术家的技术之外，这些颜料碎片还能揭示什么。
从早期绘画大师的作品中画出横截面。图像信用：马赫。
targonska-hadzibabic与schönlieb一起创建一个系统，可以识别不同绘画，艺术家或时期的横截面之间的连接。横截面中的层并不均匀，不仅不同于颜色，而且在拍摄条件下的纹理，混合物和一致性方面不等。与罗马陶器项目一样，该团队正在使用MATLAB中的机器学习技术基于其特征将超过10,000个横截面的数字图像集成有意义的群体。
根据Targonska-Hadzibabic的说法，他们还不确定这些算法可能会揭示什么。她说:“这是一个迭代的过程，依赖于与文物保护人员的交流，从艺术史的角度寻找重要的相似之处。”
但通过他们的应用程序，他们希望管理员能够将源横截面中的层与数据库中其他横截面中的类似补丁进行比较。不仅应用程序用户可以看到这些结果，Targonska-Hadzibabic还在努力确保管理员可以根据他们的需要轻松修改结果。
在这个领域
来自考古、艺术保护和艺术历史专家的反馈对指导这些项目至关重要。“只有专家才能引导数据科学领域的人走上正确的道路，”帕里索托说。
FitzWilliam的Mach协作者刚刚开始测试这些应用程序，但目标是为所有学者和保护者发布这些资源，扩展其现有的工具箱。对于Launaro来说，公共件陶器参考目录将能够更详细地研究以前忽略的考古方面。
据雷诺兹称，马赫的数字手稿修复工具不仅可以帮助保存人，还可以扩大教学和公众参与的选择。雷诺兹说：“人们希望它对教学非常有用，因为它将使你能够以最佳状态处理物体的图像。”。该工具还可以扩展博物馆的虚拟产品，向公众展示真实的文物和数字“原件”
Targonska-Hadzibabic表示，编制一个能够识别样本之间联系的绘画横截面数据库，可以帮助专家识别新的绘画方法，并揭示艺术家和艺术品之间此前未知的联系。
然而，这些工具都无法取代人文学科专业人员的工作。“在某种程度上，你需要一个人来解释，”劳纳罗说。“但还有其他事情可以让我们的工作更简单、更直接，机器可以做到。”
标题图片：©剑桥菲茨威廉博物馆。
