SMP 2023 ChatGLM 金融大模型挑战赛
赛事简介
欢迎参加 SMP 2023 ChatGLM 金融大模型挑战赛（The Evaluation of Large Model of Finance Technology，SMP2023-ELMFT）。 第十一届全国社会媒体处理大会（The Eleventh China National Conference on Social Media Processing, SMP 2023）将于 2023 年 11 月在合肥召开。全国社会媒体处理大会专注于社会媒体处理领域的科学研究和工程开发，为传播最新的学术研究与技术成果提供广泛的交流平台。SMP 2023 由中国中文信息学会社会媒体处理专委会主办，安徽大学、中国科学技术大学和合肥工业大学，以及合肥综合性国家科学中心数据空间研究院联合承办。 SMP 2023 ChatGLM 金融大模型挑战赛由中国中文信息学会社会媒体处理专委会主办，北京智谱华章科技有限公司（以下简称智谱 AI）、上海安硕信息技术股份有限公司（以下简称安硕信息）、阿里云计算有限公司（以下简称阿里云）、魔搭社区和北京交通大学联合承办，天池平台为指定赛事平台。本届比赛的目标是共同推动大模型在金融领域的发展，并邀请广大开发者和相关技术团队为大模型时代加速创新。
一、赛事日程
报名：2023 年 7 月 20 日-8 月 16 日。在天池平台完成个人信息注册，即可报名参赛。
初赛：2023 年 7 月 20 日-8 月 16 日。参赛团队通过天池平台下载镜像，本地调试算法，在线提交结果，系统进行实时评测并返回成绩。初赛排名前 40 名的团队将进入复赛。
复赛：2023 年 8 月 17 日-8 月 29 日。复赛仍然为在线提交结果，实时评测并返回成绩。复赛前 8 名队伍晋级决赛答辩环节。
决赛：暂定 2023 年 9 月初，具体时间另行通知。决赛将以线下或线上答辩的形式进行，晋级决赛的队伍需提前准备答辩材料，包括答辩 PPT、参赛总结、核心代码。
颁奖：2023 年 11 月 23 日-11 月 26 日，具体日期另行通知。获奖团队将参加 SMP 2023 大会，进行技术报告，并接受现场颁奖典礼。
二、奖项设置
本次大赛奖金池共计 10 万元人民币现金奖励和价值超 200 万元的模型、算力、API 等资源，具体如下（以下奖金均为税前
冠军（1 名）：
- 3 万元人民币奖金，颁发获奖证书
- 智谱 ChatGLM2-12B 的商用授权推理服务 1 年（价值 180 万元人民币）
- 阿里云「ChatGLM2-12B 部署算力」GPU 算力 1 年（价值 30 万元人民币）
亚军（2 名）：
- 每只队伍可获得 2 万元人民币奖金，颁发获奖证书
- 价值 2 万元的智谱 AI API 费用
- 阿里云「ChatGLM2-6B 部署算力」训练&部署 GPU 算力（价值 2 万元人民币 ）
季军（5 名）：
- 每只队伍可获得 6 千元人民币奖金，颁发获奖证书
- 价值 1 万元的智谱 AI API 费用
- 阿里云「ChatGLM2-6B 部署算力」训练&部署 GPU 算力（价值 1 万元人民币 ）
三、赛题描述
本次比赛要求参赛选手以 ChatGLM2-6B 模型为中心制作一个问答系统，回答用户的金融相关的问题，不允许使用其他的大语言模型。参赛选手可以使用其他公开访问的外部数据来微调模型，也可以使用向量数据库等技术。
本次比赛评估模型能力的赛题按照涉及模型的能力和复杂程度大体分为初级、中级、高级三种类型，每种类型的题目拥有不同的分值：
初级：数据基本查询（40 分）
参赛者需要利用提供的 ChatGLM2-6B 开源模型和上市公司年报原始数据，并以此为基础创建信息问答系统。系统需能够解决基本查询，如：某公司 2021 年的研发费用是多少？等问题。
中级：数据统计分析查询（30 分）
在初级阶段的基础上，参赛者需要进行金融数据的统计分析和关联指标查询。系统需基于各类指标，提供问题和答案，如：某公司 2021 年研发费用增长率为多少？等问题。
高级：开放性问题（30 分）
如：某公司 2021 年主要研发项目是否涉及国家创新领域，如新能源技术、人工智能等？
比赛各阶段的详细内容和评测方式，请参考比赛官网。
四、加入比赛
报名参赛
加入比赛群
