大模型评测工程架构师 - Seed Model

团队介绍：字节跳动 Seed 团队成立于 2023 年，致力于寻找通用智能的新方法，追求智能上限，为科技和社会发展作出贡献。

Seed 团队在 AI 领域拥有长期愿景与决心，团队研究方向涵盖 MLLM、GenMedia、AI for Science、机器人等，在中国、新加坡、美国等地设有实验室和岗位。目前，团队已推出业界领先的通用大模型以及前沿的多模态能力，支持豆包、即梦、TRAE 等超过 50 个应用场景，并通过火山引擎开放给企业客户。第三方数据显示，豆包 App 用户量在中国市场排名第一，豆包大模型日均 Token 调用量行业领先。

1、负责字节跳动大模型评估工程体系的建设，设计并实现评测的关键工程能力：任务编排与调度、分布式并发执行、环境隔离与可复现运行、失败重试与容错、资源治理与成本优化；
2、设计评估相应的平台、框架能力，支持多类型评测任务稳定运行：包含但不限于文本模型、多模态模型、Agent等；
3、探索业界前沿的大模型相关工程技术，持续提升平台、框架能力。

1、对语言大模型、多模态大模型、智能代理Agent技术以及大模型的部署流程有基本的了解和认识；
2、具备熟练的Python/Go语言编程能力和良好的编程习惯和代码管理能力；
3、熟悉服务端基础技术，包括但不限于HDFS、Ray、消息队列等，能够高效地进行后端服务的开发与维护。