开源大模型测试
NLP主流大模型如GPT3/chatGPT/T5/PaLM/LLaMA/GLM等的原理
2024规则
在IMO2024的前几周(2024.07.10),参赛者需要提交一个打算在 EC2 P4 (8x A100)或同等设备上运行的 Docker 镜像。在比赛当天,会同时在AWS硬件运行,和人类选手同时竞争。
- 很有可能设立第一个 IMO 几何问题解决方案奖(多模态)
- 打算从选择题数学奥林匹克竞赛开始(例如 US AIME or UK Junior/Intermediate/Senior Math challenge)
- AWS注册需要VISA银行卡——我们可能没法在比赛环境上实测