Российские учёные создали тест для выявления проблем в работе ИИ-моделей белков

Исследователи из Института искусственного интеллекта AIRI разработали первый в мире набор тестов, оценивающих геометрическую точность генеративных ИИ-моделей, которые работают с трёхмерными структурами белков. Проверка 10 передовых систем показала, что лидирующие модели проходят стандартные бенчмарки почти на 100%, но в новом тесте лучшая набрала только 40 баллов. Это говорит о серьёзных ограничениях в понимании пространственной формы.