HackerRank将于10月5日向客户正式开放Chakra,这是一款面向技术岗位的AI面试官,此前测试约六个月,TechCrunch报道称。候选人会在带有代码仓库和AI助手的开发画布中完成面试。Chakra会观察其操作、提出后续问题,并为招聘团队生成评估。对候选人来说,解题过程也成为评估的一部分。

重大变化

  • 发生了什么变化:据TechCrunch 10月5日报道,HackerRank已将Chakra从约六个月的测试阶段转为面向客户正式开放。
  • 为何重要:招聘团队可以结合候选人的操作、对话和能力评分进行审查,比只看最终提交的代码有更多材料可供判断。
  • 尚待明确之处:HackerRank对面试数量、候选人评分和公平性的说法均来自公司。现有来源无法证明Chakra评分能够预测工作表现,或在不同候选人群体中同样有效。

面试跟随实际操作

在HackerRank对Chakra的介绍,雇主可以把职位描述转化为面试,并自定义环节、问题和评分标准。候选人在类似开发环境的实时画布中完成任务。公司的示例要求工程师检查代码库、规划修复方案、修改代码并验证结果。TechCrunch报道称,候选人可使用AI助手,Chakra还会询问其选择某种方法的原因或如何适应新约束。

HackerRank表示,Chakra会为候选人在实操环节中的言行评分,并提供能力分数、优劣势摘要,以及依据对话记录和实际操作给出的理由。评分令人意外时,报告为招聘经理提供可核查的材料;但它本身无法说明评分标准能否衡量未来工作表现。

HackerRank还宣传可标记可疑行为,例如未经许可寻求外部帮助。产品页面将此类行为与面试中允许使用AI区分开来。TechCrunch转述公司的说法:与类似传统评估相比,Chakra面试中的此类标记低70%至80%;差异因地区和资历而异,报道未提供底层数据。标记率较低本身不能说明实际违规行为发生的频率。

雇主可以查看什么

HackerRank的AI辅助面试帮助页面介绍候选人提示词和助手回复的实时可见性、共享编辑器、项目变更视图,以及面试后的聊天记录。这些细节说明了HackerRank为面试建立的整体观察模式。不过,该页面明确适用于其旧版Interview体验,并非Chakra功能规格。团队应确认自己的Chakra账户实际提供哪些视图。

对于Chakra本身,产品页面承诺提供基于候选人对话记录和实际操作的评分解释。TechCrunch称招聘经理可查看详细报告。公司还表示招聘结果仍由人负责;首席执行官Vivek Ravisankar告诉TechCrunch,Chakra负责评分,最终决定由人作出。当AI评分依据薄弱或与实际工作不符时,人工复核尤其重要。

采用情况不等于验证

HackerRank称已有超过50万名候选人完成Chakra面试,候选人平均体验评分高于5分制的4.8分。TechCrunch称Snowflake、Snorkel和Capgemini在测试期间试用过该产品。这些数字按公司说法显示使用量较高,但来源未提供评分方法、回应率,也没有独立证据证明评分公平或能预测后续表现。

HackerRank称会将AI评分与人类专家评分进行比较,并开展偏差分析。公开产品页面没有发布评估这些说法所需的结果或方法。采购方可以要求验证和审计报告、岗位使用的具体评分标准,以及将评分解释与候选人记录对照审查的方式。候选人也有切身利益了解记录了什么以及这些信息如何使用。

该Chakra页面提供免费试用、预约演示和申请样例面试的入口。页面未披露Chakra专属价格,也未说明哪些客户方案包含服务。BIG CHANGE审阅了相关文档和TechCrunch报道;我们没有进行Chakra面试,也没有查看雇主账户。