人工智能算法测试员

职业归属

所属职业：人工智能训练师

职业编码：4-04-05-05

职业分类路径：社会生产服务和生活服务人员 › 信息传输、软件和信息技术服务人员 › 软件和信息技术服务人员 › 人工智能训练师

“在数据的裂缝里听见算法说谎的声音”

一句话定义

专门给人工智能产品的算法找毛病、量性能的人，用数据和场景反复试探，判断算法算得准不准、扛不扛得住、有没有偏心眼。

常见叫法：算法质检员，行业里有时叫这个，意思是像工厂质检一样筛算法的问题；模型评测员，偏学术圈的说法。

似曾相识

就像新车出厂前要撞几次墙、跑几圈烂路，算法也得有人专门设计刁钻题目考它，看它会犯什么傻。

要是缺了这一环，刷脸付钱可能把双胞胎认错，导航软件能把车导进河里，推荐系统会越推越让人生气。

常被误会成只管写代码的人，其实代码是别人写的，只负责挑刺和量尺寸；也被当成修算法的，其实发现问题后怎么改是别人的事。

主打工作

准备测试用的数据和场景，模拟真实世界里算法可能遇到的各种情况，包括故意使绊子的极端情况。
跑测试，记录算法在不同条件下的表现，比如算得快不快、准不准、稳不稳定。
对比算法输出和预期结果，定位问题出在哪一步，是数据看错了、公式算错了，还是边界情况没考虑到。
写测试报告，把发现的问题和量化的性能数字说清楚，让别人能看懂问题的严重程度。
维护测试环境和工具，保证每次测的条件一致，不然前后两次结果没法比。
精力分配准备数据和设计测试场景约占三成，实际跑测试和记录结果约占四成，分析问题写报告约占两成，维护环境和工具约占一成。

工作场景

室内办公环境，工位上多台显示器，旁边有专门跑测试的服务器或云计算资源。

周围安静，键盘声为主，偶尔有人讨论某个算法为什么会在这个数据上翻车，墙上或屏幕里常贴着测试进度和bug列表。

天天和写算法的人、产品经理、标注数据的人打交道，有时候也要对接真正用这算法的业务方。

容易混淆的工种

协作工种

人工智能训练师一起确定算法该达到什么标准，对方提供训练好的模型，这边负责验收。

数据标注员一起保证测试用的数据标注准确，不然测出来的分数没意义。

人工智能工程技术人员一起分析算法为什么会出错，对方看代码改结构，这边提供问题现象和数据证据。

软件测试工程师一起保证整个产品从界面到后台都稳当，对方测功能流程，这边专门盯算法模块。

工作时间

一般跟着项目走，有上线节点前会密集加班，平时相对规律，但算法一更新就要重新测一轮。

节假日理论上休息，但线上系统出问题或紧急上线时得随时响应，年假能休但经常被打断。

怎么入行

大多数人是从计算机、数学、统计相关专业毕业进来的，校招或社招时看重有没有编程基础和数据分析经验，入门门槛一般要过用人单位的笔试面试，考编程、数据结构、机器学习基础这些。也有从传统软件测试转过来的，补学算法知识后慢慢上手。对身体没有硬要求，但长时间盯屏幕、熬夜赶节点是常态，眼睛和腰吃不消的人得掂量掂量。