【实习】大模型评测实习生
Posted Updated 9
views
Summary
Internship on Meituan's large-model (LLM) evaluation team: designing evaluation metrics and test plans, running LLM/Agent evaluations across task scenarios, analyzing results into structured attribution reports, and building/maintaining evaluation tooling for automation. Core requirements are Python data processing plus a basic grasp of LLM/Agent principles.
1、参与大模型评测体系的设计与优化，协助制定评测指标和测试方案。
2、执行大模型在多个任务场景下的评测，并收集并分析评测数据，输出结构化报告并归因，为模型优化提供数据支持。
3、协助搭建和维护评测工具链，提升评测效率与自动化水平。
1、大学本科及以上学历，应用统计、数据科学、计算机、人工智能等相关专业优先。
2、对Agent/LLM应用原理有基本认知，乐于探索用AI方式解决工作问题；有LLM标注、评测实操经验者优先。
3、具备良好的逻辑分析能力和数据敏感度，熟练使用Python进行数据处理。
4、工作认真负责，具备良好的沟通能力和团队协作精神。
1、深入接触前沿大模型技术，积累AI评测实战经验。
2、与资深数据科学工程师紧密合作，快速提升技术视野与专业能力。