На совещании по регулированию искусственного интеллекта компания презентовала проект тестовых заданий и эталонов для оценки соответствия ИИ принятым в стране ценностям.
По словам участника совещания и источника, близкого к Минцифры.
Такие тесты призваны проверять соответствие ИИ принятым в стране ценностям.
Детали: проект пока на стадии концепции.
На совещании обсуждали, чтобы данные для тестов не становились публичными; разработчики не могли легко настраивать модели под тест.
Участники подчеркнули, что закрытый датасет может оказаться слишком сложным для прохождения и не позволить быстро развивать модели. Был предложен компромисс: для тестирования будут использоваться как закрытые, так и открытые данные с разной формулировкой вопросов.
Контекст
В конце июля был подписан закон о суверенных и национальных моделях ИИ, которые должны соответствовать законам страны и духовно‑нравственным ценностям.