Data Secrets

Google выпустили ИИ-систему, которая помогает историкам интерпретировать древние шифры и надписи

Разного рода письмена встречались в древних государствах повсеместно, и при раскопках их находят очень часто. Но это могут быть как надписи с памятников или важные исторические заметки, так и просто приглашения на день рождения или любовные письма.

Интерпретировать подобное без контекста бывает просто невероятно сложно: в основном сделать это можно только за счет поиска уже расшифрованных текстов, похожих на данный синтаксисом, стилем, местом раскопки и пр.

И как раз Aeneas, который показали Google, может справляться с этим лучше людей, потому что историки тратят месяцы, сопоставляя шифры, а ИИ это делает за минуты. Также система умеет понимать рисунки и восстанавливать пропавшие кусочки текста, при этом впервые в мире даже в условиях, когда длина потерянного куска неизвестна.

Архитектура такая: decoder-only трансформер для обработки текста, ResNet для картинок, отдельные feed forward слои для определения даты, места и недостающих кусочков + обычное векторное сходство по эмбеддингам для поиска похожих текстов. Учили все на огромном кастомном датасете латинских текстов.

По метрикам – SOTA (да, лучше людей), и самое крутое, что Google сразу дают исследователям свободный доступ к инструменту (predictingthepast.com), а код и данные выкладывают в опенсорс.

Кстати, вот вам небольшая историческая справка: названа система в честь героя греческой мифологии Энея. Он был странником и героем Троянской войны, а еще предком основателей Рима Ромула и Рема.