HackerRank將於10月5日向客戶正式開放Chakra,這是一款面向技術職位的AI面試官,此前測試約六個月,TechCrunch報導。候選人會在帶有程式碼儲存庫和AI助理的開發畫布中完成面試。Chakra會觀察其操作、提出後續問題,並為招聘團隊產生評估。對候選人來說,解題過程也成為評估的一部分。
重大變化
- 發生了什麼變化:據TechCrunch 10月5日報導,HackerRank已將Chakra從約六個月的測試階段轉為面向客戶正式開放。
- 為何重要:招聘團隊可以結合候選人的操作、對話和能力評分進行審查,比只看最終提交的程式碼有更多資料可供判斷。
- 尚待明確之處:HackerRank對面試數量、候選人評分和公平性的說法均來自公司。現有來源無法證明Chakra評分能預測工作表現,或在不同候選人群體中同樣有效。
面試跟隨實際操作
在HackerRank對Chakra的介紹,雇主可以把職位描述轉化為面試,並自訂環節、問題和評分標準。候選人在類似開發環境的即時畫布中完成任務。公司的範例要求工程師檢查程式碼庫、規劃修正方案、修改程式碼並驗證結果。TechCrunch報導,候選人可在畫布中使用AI助理,Chakra還會詢問其選擇某種方法的原因,或如何因應新限制調整方法。
HackerRank表示,Chakra會為候選人在實作環節中的言行評分,並向雇主提供能力分數、優勢與不足摘要,以及依據對話紀錄和實際操作給出的理由。當評分令人意外時,這份報告為招聘主管提供可核查的資料。但僅憑報告本身,無法判斷評分標準是否能衡量未來工作表現。
HackerRank也宣傳可標記可疑行為,例如未經許可尋求外部協助。產品頁面將此類行為與面試中允許使用AI區分開來。TechCrunch轉述公司的說法:與類似傳統評估相比,Chakra面試中的此類標記低70%至80%;但差異因地區和資歷而異,報導未提供底層資料。標記率較低本身不能說明實際違規行為發生的頻率。
雇主可以檢視什麼
HackerRank的AI輔助面試說明頁介紹候選人提示詞和助理回覆的即時可見性、共用編輯器、專案變更檢視,以及面試後的聊天紀錄。這些細節有助說明HackerRank為面試建立的整體觀察模式。不過,該頁面明確適用於其舊版Interview體驗,並非Chakra功能規格。團隊應確認自己的Chakra帳戶實際提供哪些檢視畫面。
對於Chakra本身,產品頁面承諾提供以候選人對話紀錄和實際操作為依據的評分說明。TechCrunch稱招聘主管可檢視詳細報告。公司也表示,招聘結果仍由人負責;執行長Vivek Ravisankar告訴TechCrunch,Chakra負責評分,最終決定由人作出。當AI評分依據薄弱或與實際工作不符時,人工複核尤其重要。
採用情況不等於驗證
HackerRank稱已有超過50萬名候選人完成Chakra面試,候選人對體驗的平均評分高於5分制的4.8分。TechCrunch稱Snowflake、Snorkel和Capgemini在測試期間試用過該產品。這些數字依公司說法顯示使用量可觀,但來源未提供評分方法、回覆率,也沒有獨立證據證明評分公平或能預測後續表現。
HackerRank稱會將AI評分與人類專家評分進行比較,並進行偏差分析。公開產品頁面沒有發布評估這些說法所需的底層結果或方法。採購方可以要求相關驗證和稽核報告、職位使用的具體評分標準,以及將評分說明與候選人紀錄對照審查的方式。候選人也有切身利益了解記錄了什麼以及這些資訊如何使用。
該Chakra頁面提供免費試用、預約示範和申請樣例面試的入口。頁面未揭露Chakra專屬價格,也未說明哪些客戶方案包含此服務。BIG CHANGE審閱了相關文件和TechCrunch報導;我們沒有進行Chakra面試,也沒有查看雇主帳戶。



