АВТОМАТИЗАЦИЯ экспертизы
Кейс 2
Создали систему, которая оценивает сложные открытые ответы с точностью более 95%, работает в 9−11 раз быстрее человека и обходится в 90 раз дешевле, открывая массовый доступ к экспертной оценке.
Как ИИ стал асессором в СОВНЕТ-IPMA
Вызов
СОВНЕТ — Национальная ассоциация управления проектами, представляющая IPMA (International Project Management Association) в России. Организация проводит профессиональную сертификацию специалистов по управлению проектами
Клиент
Что было не так?
Ручная проверка каждого теста требует значительного времени эксперта.

Большие трудозатраты асессоров

Разнородность ответов кандидатов

При проверке работ асессорам приходится адаптироваться к стилю изложения каждого кандидата и извлекать смысл из непоследовательных или нестандартных формулировок.

Высокая стоимость тренировок

Трудозатраты делают тестирование дорогим, а тренировочные проверки — недоступными для большинства кандидатов.
02
03
01
Что было сделано

  • Модель оценки анализирует ответы и выставляет баллы по 4 критериям с точностью более 95% относительно профессиональных экспертов. ИИ-асессор понимает смысл и оценивает логику аргументации, даже если кандидат использует нестандартные формулировки.

  • Модель обратной связи формирует персонализированные рекомендации по улучшению ответов по 4 критериям: соответствие вопросу, глубина и логика аргументации, полнота ответа, ясность и структура.
Разработка специализированных моделей
Этап 01
Оценочная модель внедрена как самостоятельный сервис в национальную платформу профессиональной сертификации СОВНЕТ-IPMA в России.
Обучение на реальных данных
этап 02
На базе полномасштабной модели создан сервис pmtraining.online — цифровая платформа для тренировочной подготовки кандидатов с мгновенной обратной связью от ИИ. Кандидат получает детальный план по усилению своих компетенций, что делает процесс подготовки быстрым, прозрачным и результативным.
Создание коммерческого сервиса PMTraining
этап 03
После
Точная экспертиза
Коммерциализация решения
Снижение себестоимости
Кратное ускорение проверки
Итог
До
Ручная проверка ответов
Разнородные формулировки
Высокая стоимость тренировок
Большие трудозатраты экспертов
Проект для СОВНЕТ-IPMA демонстрирует, как ИИ может не заменять, а усиливать экспертизу людей. Мы автоматизировали рутинную проверку, сохранив высочайшее качество оценки, и сделали профессиональный анализ доступным для тысяч кандидатов.

Ключевое достижение — способность системы работать с разнородными ответами. ИИ-асессор понимает смысл, адаптируется к стилю каждого человека и оценивает компетенции кандидата.

Подход масштабируется на любую область знаний с открытыми вопросами и может быть адаптирован для образовательных учреждений, медицинских и юридических сертификаций и т. д.
90х
Ускорение проверки
9-11х
Точность относительно профессиональных асессоров
Результаты
95%
Снижение себестоимости тренировочной проверки
Мы разработали первую в мире ИИ-систему, способную не только оценивать открытые ответы на профессиональные вопросы, но и формировать развивающие рекомендации на уровне профессионального асессора IPMA. ИИ-асессор адаптируется к индивидуальному стилю изложения каждого кандидата и сопоставляет его логику с эталонными ответами.
Что говорят пользователи о проекте PMTraining
ИИ усиливает экспертизу, а не заменяет её
Система автоматизирует рутинную проверку, оставляя экспертам работу со спорными и сложными случаями. Такой подход позволяет масштабировать профессиональную оценку и сделать качественную подготовку доступной большему числу кандидатов.
Обсудить задачу
К другим кейсам
Made on
Tilda