Anthropic 如何设计抗 AI 的技术笔试:三轮迭代与开放挑战
Anthropic 性能优化团队负责人 Tristan Hume 复盘了其性能工程师笔试的三轮迭代:自 2024 年初起约 1000 名候选人完成该测试,Claude Opus 4 在 4 小时限时内超过几乎所有人类,Claude Opus 4.5 又追平顶尖人类成绩,他因此两次重新设计题目,最终改用高度受限指令集的编程谜题。团队同时公开原始笔试作为开放挑战,并给出各模型在模拟机器上的时钟周期成绩,其中 Claude Opus 4.5 在改进后的测试时计算框架下达到 1363 周期,低于 1487 周期者可投递简历。
匹配字段标题、摘要、正文
