В Вологодской области используют нейросети для восстановления фресок Дионисия
10 марта. ПРАВМИР. В селе Ферапонтово Вологодской области с помощью нейросетей пытаются восстановить росписи Дионисия 1502 года, пишет «Российская газета».
Изучением возможностей нейронных сетей в реставрации занимаются сотрудники Института космических исследований Российской академии наук (ИКИ РАН). Для реставрации используется нейросеть Stable Diffusion — глубокая модель машинного обучения, способная создавать изображения на основе текстовых описаний.
При этом доверять нейросети реставрацию пока рано, подчеркивает заведующий отделом учета и хранения Музея фресок Дионисия Игорь Хоботов.
«Не все идеально. Есть и “ошибки” — в частности, фреска с изображением праматери Евы, где положение глаза сильно смещено относительно того, которое мы ожидали бы увидеть. Такого рода “ошибки” можно исправить, продолжая “обучать” нейронную сеть на специально подобранных изображениях фресок и частей фресок», — говорит работник музея.
Оценить качество реконструкции можно также с помощью нейросети, рассказал ведущий математик отдела телекоммуникационных сетей и высокопроизводительных вычислительных комплексов ИКИ РАН Артем Просветов. Для этого нужно сформировать набор изображений с минимальными повреждениями и серию реконструированных рисунков, а затем сравнить общее впечатление нейросети от каждой из этих выборок.
Фрески собора Рождества Богородицы Ферапонтова монастыря — единственная роспись русского мастера Дионисия Мудрого, дошедшая до нашего времени почти в полном составе и подлинном виде с начала XVI века. В росписи есть некоторые утраты, часть из которых вызвана переделками в самом соборе.
