：Michael Mroczka
译者：平川
策划：褚杏娟
众所周知，ChatGPT正在颠覆性地重塑工作场景，无论是在小型企业的任务自动化管理上，还是在Web开发人员编写React组件的过程中，其卓越表现令人赞叹不已。而在interviewing.io平台上，我们聚焦于探究ChatGPT将如何革新技术面试这一核心环节。
近日，在TikTok上流传的一段视频中，一名工程师利用ChatGPT精准解答了面试官的所有问题，引发了公众对技术面试是否会被轻易“作弊”的热议。社交媒体上的反应强烈且一致：
Reddit用户断言：“ChatGPT的到来预示着编码时代的终结。”
YouTuber悲叹：“软件工程已死，ChatGPT是杀手锏。”前Twitter用户疑惑：“ChatGPT会否成为编码面试消亡的标志？”
显而易见，ChatGPT能够在面试过程中提供帮助，但关键在于：
1. 它究竟能提供多大程度的帮助？
2. 作弊并成功逃脱惩罚有多容易？
3. 那些依赖LeetCode问题进行筛选的企业，是否需要对面试流程做出重大调整？
为了寻找答案，我们精心策划了一场“作弊实验”，邀请了一众专业面试官和用户参与其中。剧透一下：企业需立刻调整面试问题类型！
【实验准备及设计】
interviewing.io作为面向工程师的面试实践平台与招聘市场，拥有数千名专业面试官和同样数量众多的求职者在此模拟面试、备战实战。在这场实验中，我们选取了三组不同类型的面试问题，并特别强调面试官对此次研究的目的毫不知情，他们被告知实验旨在追踪面试官在提问标准和非标准问题时的决策趋势。
- LeetCode原题：直接从LeetCode选取未做任何修改的问题。
- 改良LeetCode问题：对LeetCode题目进行微调，虽保留相似性，但有显著区别。
- 自定义问题：与网络现存所有问题均无直接联系的独特问题。
面试官来自我们的专业团队，分为三组对应上述三种问题类型；而面试者则来自于积极求职且具备4年以上工作经验、熟悉ChatGPT和编码面试的活跃用户池。他们被要求在面试中使用ChatGPT以测试其作弊能力，并明确告知不要依靠自身技能过关，而是主要借助ChatGPT。
总计进行了37场面试，有效面试为32场。其中包括分别针对三种问题类型的11场、9场和12场面试。值得注意的是，由于平台支持匿名，所有面试均为音频形式，确保用户能在安全无压力的环境中快速学习和成长，尽管这使得实验略失真实感，毕竟在真实的面试场景下，面对镜头作弊难度会增加，但并不能完全杜绝作弊现象。
面试结束后，面试官和面试者都需要填写退场调查问卷，以便了解在使用ChatGPT作弊过程中的困难，以及面试官对于可能存在作弊行为的面试评估情况。
【实验结果揭示】
剔除无效样本后，结果显示，在面对不同类型问题时，各组的表现差异明显。对照组为平台其他模拟面试的平均通过率53%，而大多数模拟面试采用LeetCode风格的问题，这在FAANG等公司尤为常见。
- 使用“LeetCode原题”组别，面试通过率高达73%，多数参与者反馈ChatGPT提供了近乎完美的解决方案。
- “改良LeetCode问题”组别，虽然问题有所调整，但67%的求职者仍能顺利通过，表明ChatGPT能够应对面试官对问题的细微改动。
- “自定义问题”组别的通过率最低，仅为25%，远低于其他两组及对照组平均水平。
尤其值得注意的是，尽管面试官在整个实验过程中没有察觉到面试者的作弊行为，他们在评价求职者表现时信心满满，72%的人对自己的招聘决定表示有信心。甚至有一位面试官认为部分面试者表现优异，建议邀请他们加入interviewing.io担任面试官或导师。
然而，当面试者面临完全自定义的问题时，他们的表现显著下滑，而且没有一个面试者因为作弊被发现。面试官在反馈中并未提及对作弊的担忧，更多关注的是求职者解决问题的质量、遗漏的边缘情况、代码的组织结构以及沟通效果等方面。
结论清晰且迫切：企业必须立即着手改变面试问题类型，转向自定义问题设置，否则将面临求职者利用ChatGPT作弊而导致面试有效性严重受损的风险！ChatGPT已让标准原题变得不再可靠，仅依赖这类问题的企业将在招聘过程中陷入被动境地。
自定义问题不仅能有效防止作弊，还能筛选出那些只会死记硬背LeetCode答案的求职者（实验数据显示，自定义问题组的通过率明显低于对照组）。此外，高质量的个性化问题能够提升求职者的面试体验，使他们更愿意投身于您的公司。我们的研究表明，顶级面试官的一大特质就是善于提出原创问题，这些问题往往能够反映出公司的实际业务挑战，从而激发求职者对公司工作的热情。
然而，企业在设计自定义问题时需注意，简单的改编LeetCode原题并不足以抵御作弊。问题的关键在于输入和输出必须唯一，避免ChatGPT能够识别出它们与已存在的问题之间的关联。例如，即使给经典问题套上故事背景，但如果问题本质和输入输出保持不变，ChatGPT依然能够轻松解答。
因此，我们鼓励企业内部创建共享文档，记录日常工作中遇到的有趣问题，以此为基础提炼出自定义面试问题。提出真正独特且具有实践意义的问题，让求职者深入了解公司的工作，同时也推动整个行业向前发展，减少单纯依赖记忆LeetCode题目来获取面试优势的现象。
最后，对于正在求职的朋友们，请务必坚守诚信原则。尽管当前某些同事可能利用ChatGPT在面试中作弊并暂时获得优势，但随着企业面试流程的不断优化，这种情况将会得到改变。作弊不仅违背道德，还会增加心理压力，实施起来也并非易事。与其冒险作弊，不如将精力投入到实践中，适应新的面试模式，以展现真正的工程实力。
【视频案例分享】（请查看原文链接）
实验过程中，一位面试者虽然借助ChatGPT给出了准确的答案，但在分析时间复杂性时却遭遇困境，导致面试过程紧张而混乱。可见，即便是熟练的求职者，借助AI作弊也会面临诸多困难。
总结来说，ChatGPT的出现或许将成为催化行业面试标准转型的契机，从注重死记硬背转向真实检验工程能力，让我们共同见证这一变革的到来。本文由InfoQ翻译，未经授权禁止转载，访问原文链接可了解更多详情：[https://interviewing.io/blog/how-hard-is-it-to-cheat-with-chatgpt-in-technical-interviews](https://interviewing.io/blog/how-hard-is-it-to-cheat-with-chatgpt-in-technical-interviews)
