职责描述
猎达人力代北京万事云科技公司招聘
招聘职位 北京Al Coding Agent 评测工程师
工作性质 实习生可转正
招聘城市 北京
岗位职责描述
1.阅读真实项目代码和任务要求,理解项目结构、功能目标及验收标准
2.搭建项目环境,能够设计并执行用户视角的验收流程,结合实际交互、代码、日志及自动化测试交叉验证结果
3.审查不同模型生成的代码改动,判断功能是否正确、实现是否完整、是否存在边界问题和回归风险
4.根据任务要求编写和优化Rubric,形成明确且可执行的评分标准
5.按照Rubric对不同模型的最终结果进行评分,记录主要问题和能力差异
6.根据需要补充测试用例,发现现有测试未覆盖的问题
7.参与后端、前端、系统运维及AI工程等不同类型的代码任务评测
任职资格
1、计算机、软件工程、人工智能等相关专业优先。其他专业具备编程基
础或相关项目经验者同样欢迎。
2.熟练掌握至少一门主流编程语言,如Python、TypeScript、JavaScript等
3.熟悉Git、Shell和Docker,能够拉取项目、查看Diff、运行测试、定位错误,并使用容器搭建隔离且可复现的运行环境
4.熟悉数据结构、算法和基本的软件工程规范
5.能够独立阅读代码仓库,理解模块关系和代码改动的影响范围
6.能够评估代码的正确性、边界处理、可读性、安全性和可维护性
7.具备Rubric编写能力,能够基于原始需求编写用户可观测、可复现、可判定的Rubric
8.了解大模型代码生成和Agent多轮修改流程,能够客观评价模型的最终结果
9.逻辑清晰,能够把自然语言需求转化为具体的验收标准
10.具备较强的代码阅读、测试验证和问题定位能力
11.不只依赖现有测试,能够主动发现遗漏场景和潜在问题
12.能够清晰输出Rubric、评分依据和模型对比结论
13.评分客观,能够用代码、测试结果和任务要求支撑判断
加分项:
1.熟悉Python、前端开发、并发、队列和任务调度
2.熟悉JavaScript、TypeScript、React、Vue等前端技术
3.了解模型训练、推理、代码Agent或大模型评测
4.有代码审查、自动化测试、开源项目或代码评测经验
5.有在真实仓库中使用代码Agent完成开发、修复或评测的可展示经验
工作地点 北京丰台区汇亚大厦43F-1
福利待遇
薪酬待遇:实习生:日薪500元/天
转正薪资:12000-18000元+社保
工作时间 周一至周五,周末双休,法定节假日休,早九晚六,项目紧急时需加班,加班优先调休
面试流程 简历筛选(内部技术筛选通过后客户筛选,T+1日反馈简历是否通过结果)
面试:一轮线上或线下面试,面试通过后一周内入职。