Evals

Articles tagged "Evals"

1 articles in total

我找了份月薪 7 万的 FDE 工作,结果进厂贴了一天二维码?!

本文是AI编程博主鱼皮分享的FDE(Forward Deployed Engineer,前线部署工程师)真实工作经历。作者应聘月薪7万的DeepSeex公司FDE岗位后,首个项目是为一家生产背带裤的服装厂部署AI报修助手。项目初期客户期望实现预测性维护,但由于工厂缺乏机器运行数据,FDE团队将目标调整为先理顺报修流程并积累结构化维修数据。现场调研发现,工人报修时对同一台机器有不同叫法(如“三号机”“老平车”),故障信息在电话转述中丢失,维修记录仅靠纸质单和群聊,完整率不足50%。鱼皮通过贴二维码扫码定位机器、建立机器别名映射表解决了识别问题,随后从一年纸质报修单和群聊中整理出300条真实案例作为评估集(Evals)。在车间噪音环境下,语音识别常将“断线”误识别为“断电”,通过引入降噪处理和纠错词典,并将术语统一,将AI提取关键信息的准确率从81%提升至93%,达到验收标准。系统上线后,报修信息送达时间从6分钟缩短至2分钟以内,维修记录完整率提升至90%以上,试点工人使用率超过80%。项目收尾时将配置方法和经验沉淀为文档和产品通用模块。文章最后总结了FDE岗位的核心能力要求:需要前后端与AI开发能力,50%的出差率,能拆解模糊需求、建立评估方法、处理企业级部署,并同时与多方角色沟通。

Read More