职位职责：
1、调研公开评测方法，并将公开评测集集成至内部平台；
2、深度配合垂类业务探索智能高效的大模型应用效能自动化评估方案，主导开发评估体系/工具；
3、制定大模型评估在应用方向的评估标准，主导评估体系构建，主导大模型评估工作。
职位要求：
1、本科及以上学历，计算机科学与技术、软件工程、大数据技术、人工智能等相关专业优先；
2、具备英文文献阅读能力，发表过计算机相关国际论文优先；
3、具备优秀的沟通协调能力和团队协作意识，有相关工作经历及项目管理经验，熟悉Python程序开发及其他语言，具备较强的技术能力，有良好的编码风格及创新优化意识优先；
4、了解PE/Workflow及智能技术，有大模型训练/评估经验，熟悉大模型评测方法，大模型产品应用深度用户优先，对搜索场景或医疗业务场景有深度了解的同学优先。