5 октября HackerRank открыла клиентам общий доступ к Chakra — своему ИИ-интервьюеру для технических должностей — после примерно шести месяцев бета-тестирования, сообщает TechCrunch. Во время интервью кандидат работает в среде разработки с репозиторием кода и ИИ-помощником. Chakra наблюдает за работой, задаёт уточняющие вопросы и формирует оценку для команды найма. Для кандидата частью оценки становится и путь к ответу.

Главное изменение

  • Что изменилось: По сообщению TechCrunch от 5 октября, HackerRank перевела Chakra из примерно шестимесячного бета-тестирования в общий доступ для клиентов.
  • Почему это важно:Команда найма может рассматривать работу и беседу кандидата вместе с оценками компетенций, получая больше материалов, чем только готовый код.
  • Что пока неизвестно:Заявления HackerRank о количестве интервью, оценках кандидатов и справедливости принадлежат компании. Доступные источники не подтверждают, что оценки Chakra предсказывают результаты работы или одинаково хорошо работают для разных групп кандидатов.

Интервью следует за ходом работы

В описании Chakra от HackerRankработодатели могут превратить описание должности в интервью с настраиваемыми разделами, вопросами и критериями оценки. Кандидат выполняет задание в интерактивной среде, похожей на среду разработки. В примере компании инженер изучает кодовую базу, планирует исправления, меняет код и проверяет результат. TechCrunch сообщает, что у кандидата есть ИИ-помощник, а Chakra может спросить о выборе подхода или его адаптации к новым ограничениям.

HackerRank заявляет, что Chakra оценивает слова и действия кандидатов в практической части, а работодателям предоставляет оценки компетенций, сводку сильных сторон и пробелов, а также объяснения, связанные с расшифровкой беседы и выполненной работой. Если оценка удивляет, отчёт даёт менеджеру по найму материал для проверки. Сам по себе он не показывает, измеряет ли критерий будущие рабочие результаты.

HackerRank также рекламирует метки подозрительного поведения, например неразрешённой помощи извне. Страница продукта отличает такое поведение от разрешённого использования ИИ во время интервью. TechCrunch передаёт заявление компании, что в интервью Chakra таких меток было на 70–80% меньше, чем в сопоставимых традиционных оцениваниях; сравнение различалось по регионам и уровню должности, а исходные данные в публикации не приведены. Более низкая частота меток сама по себе не показывает, как часто происходили нарушения.

Что могут изучить работодатели

В справке HackerRank об интервью с ИИ-помощником описаны просмотр подсказок кандидата и ответов помощника в реальном времени, общий редактор, история изменений проекта и расшифровка чата после интервью. Эти детали помогают понять более широкую модель наблюдения, созданную HackerRank для интервью. Однако страница прямо относится к прежнему интерфейсу Interview, а не к спецификации Chakra. Командам следует уточнить, какие представления доступны в их аккаунте Chakra.

Для самой Chakra страница продукта обещает объяснения оценок на основе расшифровки и работы кандидата. TechCrunch описывает подробный отчёт для менеджеров по найму. Компания также заявляет, что ответственность за решение о найме остаётся за человеком; генеральный директор Vivek Ravisankar сказал TechCrunch, что Chakra оценивает кандидатов, а окончательное решение принимают люди. Проверка человеком особенно важна, если оценка ИИ слабо обоснована или расходится с реальной работой.

Использование — не то же самое, что проверенная точность

HackerRank заявляет, что интервью Chakra прошли более 500 000 кандидатов, а средняя оценка опыта кандидатами превышает 4,8 из 5. TechCrunch сообщает, что во время бета-тестирования продукт пробовали Snowflake, Snorkel и Capgemini. По словам компании, цифры показывают значительное использование, но источники не приводят методику оценки, долю ответивших или независимые доказательства справедливости оценок и их способности предсказывать дальнейшие результаты.

HackerRank утверждает, что сравнивает оценки ИИ с оценками экспертов и анализирует предвзятость. В открытых материалах продукта нет результатов или методов, необходимых для проверки этих заявлений. Покупатель может запросить отчёты о проверке и аудите, точные критерии для своих должностей и способ сверять объяснения оценок с данными кандидата. Кандидатам важно знать, что записывается и как используется.

На странице Chakra есть ссылка на бесплатный пробный период, запись на демонстрацию и запрос образца интервью. Специальные цены Chakra и тарифы, включающие доступ, не раскрыты. BIG CHANGE изучила документацию и публикацию TechCrunch; мы не проводили интервью в Chakra и не проверяли аккаунт работодателя.