AI 流利度评估

此功能是 AI 附加组件的一部分。欲了解更多信息,请参阅 高级评估。

AI 流畅度衡量候选人在评估期间使用 AI 助手的有效程度。

关键收益

AI 流畅度评估提供以下好处:

  • AI协作能力: 通过评估候选人在解决问题时如何整合AI工具,区分战略性AI使用和过度依赖。

  • 质量优先于频率: 衡量候选人沟通需求和应用AI建议的有效性,而不是跟踪使用频率。

  • 增强的差异化: 揭示了在编码分数相似的候选人之间,解决问题方法和工具使用策略的差异。

  • 现代工程准备度: 表明候选人对解决方案进行迭代并在先前工作基础上构建的能力

注意: AI Fluency 评估支持以下问题类型:

  • 编码

  • 项目

AI Fluency 的工作原理

AI Fluency 使用大型语言模型(LLM)和标准评估标准来评估候选者与 AI 交互中的行为模式。

系统分析候选人和 AI 助手之间的完整对话历史,包括提示、操作和响应。

AI 流利度评估侧重于以下维度:

  • 上下文质量: 候选人如何清晰而有效地沟通需求并提供相关技术上下文。

  • 批判性思维: 展示独立推理和分析的证据,AI 作为支持工具而不是判断的替代品。

  • 协作: 候选人如何在问题中进展,基于之前的互动并随时间细化解决方案。

AI 流利度等级

AI 流利度根据候选人与 AI 助手的互动情况分配以下等级:

  • A级(高 AI 流利度):通过战略性工具使用、清晰沟通、独立分析和迭代完善,展示了有效的 AI 合作。

  • B级(中等 AI 流利度):表现出合理的 AI 合作与逐步提升的熟练度。表明有提升一致性或深度的机会。

  • C级(低 AI 流利度):表明 AI 合作有限,需要改进对 AI 工具的有效使用。

注意:该评估对所有候选人适用相同的标准,无论其经验水平如何。

启用 AI 流畅度评估

要启用 AI 流畅度:

  1. 启用 高级评估 在测试级别设置中。有关更多信息,请参见 启用高级评估。

    注意: AI 流利度评估是 高级评估 包且无法单独启用。

  1. 启用 监考模式 在测试级别设置中。有关详细信息,请参阅 启用监考模式。

查看 AI 流畅度结果

AI Fluency 结果同时出现在 概览报告 和 详细报告。

在概览报告中查看 AI Fluency 结果

要在概览报告中查看 AI Fluency 结果:

AI Fluency Webinar (1).gif
  1. 登录您的 HackerRank for Work 账户使用您的凭证。

  2. 前往 Tests 标签页。

  3. 打开您想要审查的测试。

  4. 前往 Candidates 标签页。

  5. 点击候选人的姓名以打开 Summary Report。

  6. 滚动到 AI Fluency 部分以查看以下详细信息:

    • 整体 AI Fluency 等级(A、B 或 C)

    • 等级的简要说明

    • 按评估维度划分

对于每个维度,选择 参考 以查看支持评估的候选人–AI 交互摘录。

在详细报告中查看 AI 流畅性结果

要在详细报告中查看特定问题的 AI 流畅性评估细节:

  1. 打开候选人的 摘要报告.

  2. 滚动到相关的 编码 或 项目 问题.

  3. 点击问题打开 详细报告.

  4. 前往 候选人评估 选项卡并定位 AI 流畅度 部分以查看以下详细信息:

    ai fluecny.png
    • 整体 AI 流畅度等级(A、B 或 C)

    • 等级的简要说明

    • 按评估维度分解

对于每个维度,选择 参考 以查看支持评估的候选人–AI 交互摘录。

注意:

  • AI 流利度补充您的评估。请将其与其他评估指标一起审阅。

  • 评分方法会考虑问题的难度和类型,以确保在各种问题和复杂度层级之间进行公平评估。

常见问题 (FAQ)

AI 流利性是否适用于每个测试?

不。只有在高级评估和监考模式为测试启用。