Beyond the Resumé: A Rubric-Aware Automatic Interview System for Information Elicitation

1. LLM作为专家代理：大型语言模型（LLMs）可以作为低成本的主题专家（SMEs）代理，在早期招聘阶段有效获取简历中缺失的细致、特定岗位的候选人信息。
2. 信念更新机制：系统包含一个LLM评判者（Judge）和一个LLM面试官（Interviewer），评判者通过校准的概率信念更新机制，跟踪和更新候选人基于评估准则（rubric）的潜在特质信念状态。
3. 信念收敛与特质恢复：在模拟面试中，评判者的信念更新（通过总变差距离衡量）随面试轮次显著下降（约3倍），表明信念趋于稳定；最终信念能以76.1%的准确率恢复模拟候选人的潜在特质（archetype），远高于仅凭简历的16.7%。
4. 可审计性：系统生成信息丰富的面试记录和完全可审计的信念更新日志，支持更明智的决策。
5. PBA法官的稳定性：对比两种法官（独立和基于先前信念感知PBA），PBA法官在信念更新的稳定性方面表现更优，这对于信念收敛的有效性至关重要。

Judge校准：使用3个简历领域（平面设计、销售、机器学习工程），每个领域10份公开匿名简历（共30份），每个领域自定义3个序数级别（低、中、高）的评估准则。共进行540个变形测试。系统评估（模拟）：使用180个模拟配置文件（3个rubric领域 * 10份简历 * 6个原型），每份配置文件模拟12轮面试。所有LLM组件均使用GPT5 (gpt-5-2025-08-07)。