HackerRankは10月5日、技術職向けAI面接官Chakraを約6か月のベータを経て顧客に一般公開したと、TechCrunchは報じた。候補者はコードリポジトリとAIアシスタントを備えた開発用キャンバスで面接に臨む。Chakraは作業を見守り、追加質問を行い、採用チーム向けの評価を作成する。候補者にとっては、答えに至る過程も評価の一部になる。

大きな変化

  • 何が変わったか：TechCrunchの10月5日の報道によると、HackerRankは約6か月のベータを終え、Chakraを顧客向けに一般提供した。
  • なぜ重要か：採用チームは、完成したコード提出物だけでなく、候補者の作業や会話を能力スコアと合わせて確認できる。
  • まだ分からないこと：HackerRankが示す面接件数、候補者評価、公平性に関する主張は、いずれも企業側の説明だ。公開情報からは、Chakraのスコアが仕事の成果を予測することや、候補者グループ間で同様に機能することは確認できない。

作業の過程を見る面接

HackerRankのChakraの説明では、雇用主は職務記述を基に、独自のセクション、質問、採点基準を含む面接を作成できる。候補者は開発環境に似たライブキャンバスで課題に取り組む。会社の例では、エンジニアがコードベースを調べ、修正を計画し、変更を加え、結果を検証する。TechCrunchによると、候補者はキャンバス内でAIアシスタントを使い、Chakraから選んだ方法の理由や新たな制約への適応方法を尋ねられることがある。

HackerRankによると、Chakraは実作業中の候補者の発言と行動を採点し、雇用主には能力スコア、強みと不足の要約、記録と作業に基づく理由を提示する。評価が予想外の場合、採用担当者が確認する材料になる。ただし、このレポートだけでは採点基準が将来の仕事ぶりを測るかは分からない。

HackerRankは、許可されていない外部支援などの疑わしい行動を示すフラグ機能も宣伝している。製品ページは、こうした行為と面接中に許可されたAI利用を区別する。TechCrunchは、類似する従来型評価よりChakra面接でフラグが70～80%少なかったという会社の主張を伝えた。比較結果は地域や職位の経験年数で異なり、元データは記事に示されていない。フラグ率が低いだけでは、不正行為がどれほど起きたかは分からない。

雇用主が確認できるもの

HackerRankのAI支援面接ヘルプページには、候補者のプロンプトとアシスタントの応答のリアルタイム表示、共同編集画面、プロジェクト変更の表示、面接後のチャット記録が説明されている。これらはHackerRankが面接向けに構築した広い観察モデルを理解する手がかりになる。ただし、このページが明示的に対象としているのは従来のInterview体験であり、Chakraの機能仕様ではない。各チームは自分たちのChakraアカウントで実際に何を確認できるかを確かめる必要がある。

Chakraの製品ページは、候補者の記録と作業に基づくスコアの説明を約束する。TechCrunchは採用担当者向けの詳細レポートを紹介している。同社は採用結果の責任は人間にあるとも説明しており、CEOのVivek RavisankarはTechCrunchに、Chakraが候補者を採点し最終判断は人が行うと語った。AIスコアの根拠が弱い場合や実際の作業と食い違う場合、人による確認が特に重要になる。

導入と検証は別の話

HackerRankによると、Chakraの面接を完了した候補者は50万人を超え、候補者による体験の平均評価は5点満点で4.8を上回る。TechCrunchはSnowflake、Snorkel、Capgeminiがベータ中に試したと伝えた。同社によれば相当数の利用を示す数字だが、情報源は評価方法、回答率、スコアの公平性や将来の成果予測を裏付ける独立した証拠を示していない。

HackerRankはAI採点を人間の専門家と比較し、偏りの分析も行うと述べている。公開製品ページには主張を評価するために必要な結果や方法が掲載されていない。導入側は関連する検証・監査報告、職種で使う正確な採点基準、候補者の記録とスコアの説明を照合する方法を求められる。候補者にも、何が記録され、どう使われるかを知る利害がある。

Chakraのページには無料トライアル、デモ予約、サンプル面接の申請リンクがある。Chakra固有の料金や、どの顧客プランにアクセス権が含まれるかは明らかにしていない。BIG CHANGEは資料とTechCrunchの記事を確認したが、Chakraで面接を行ったり雇用主アカウントを確認したりしていない。