Вузы смогут пользоваться платформой НГУ для подготовки данных к обучению искусственного интеллекта

Учёные Центра искусственного интеллекта Новосибирского государственного университета представили программную платформу «Каппа» для управления данными, на которых обучают и проверяют модели ИИ

«Каппа» сопровождает наборы данных для обучения и проверки моделей ИИ на всех этапах: от разметки — когда люди подписывают, что содержится в каждом примере, — и её проверки до публикации и наблюдения за работой. Система гарантирует качество данных, позволяет в точности повторить любой эксперимент и всегда хранит запись о том, кто, когда и какую разметку внёс.

С «Каппой» ошибку в данных можно исправить и закрепить исправление в новой версии набора данных, чтобы она не повторялась при каждом следующем обучении. Также на подготовленных наборах данных можно измерять качество любых моделей — как собственных, так и публичных.

Платформа уже прошла проверку на практике. Например, в совместной работе с Государственной публичной научно-технической библиотекой СО РАН «Каппа» обработала около 400 тысяч записей — оцифрованные карточки и их каталожные расшифровки. В разметке участвовали около 100 сотрудников библиотеки. В итоге получились обученная модель и контрольный набор данных для проверки других алгоритмов.

НГУ предложил другим вузам два варианта: бесплатно работать с платформой на серверах НГУ после регистрации на kappa.nsu.ru либо за 100 тысяч рублей в год купить лицензию на её установку на собственных серверах вуза. Также команда НГУ готова обсудить с вузом пилотный проект на 30 дней — специалисты оценят, насколько наборы данных вуза готовы к повторному использованию, и помогут найти в них возможные перекосы.

Источник: НГУ