基于文心大模型智能阅卷平台设计
第十五届中国大学生服务外包创新创业大赛
中国大学生服务外包创新创业大赛是全国普通高校学科竞赛排行榜内竞赛,本届赛事,百度飞桨设立了“基于文心大模型的智能阅卷平台设计与开发”和“文心一言插件设计与开发”两个赛道,报名截止日期为3月20日。
比赛时间:2024/01/01 – 2024/07/01
- 【资料下载】 第十五届服创大赛参赛手册、赛题手册等系列材料下载
- 【重要时间点】 2024年3月20日前完成官网及AI Studio本赛题页面报名!
一、比赛介绍
中国大学生服务外包创新创业大赛是中国高等教育学会全国普通高校学科竞赛排行榜竞赛之一,分为区域赛和全国决赛两个阶段。中国大学生服务外包创新创业大赛(以下简称“服创大赛”或“大赛”)是服务外包领域唯一的创新、创业国家级赛事。 服创大赛紧贴现代服务经济和创新、创业、创富主题,强调应用导向和产学互动,在服务外包领域搭建一个大学生创新与创业能力展示平台。大赛引导社会公众和青年学生关注现代服务产业,吸引企业关注高校青年学生,促进高校教育改革贴合新兴产业发展需求;创新人才培养和人才评价体系,引导和促进高校加强服务外包人才培养,为产业发展营造良好氛围;逐渐成为国内一流,具有国际影响力的服务外包行业青年创新创业展示盛典。
二、赛题背景
在当前大语言模型(LLM)快速发展的技术背景下,教育领域正在经历着重大的变革。在试卷评阅场景中,教师对自动化和智能化的评阅需求逐渐凸显。因此,设计一个自动评阅平台,结合计算机视觉的图像分析和大语言模型的语义理解与生成能力,有望提高试卷评阅的效率、准确性和评阅维度丰富性。
三、场景问题
- 评阅效率与成本问题:传统评阅面临评阅速度较慢、人力需求大的问题,特别是在大量试卷需要评阅时,评阅及反馈时效性能否被满足,将是一个巨大的挑战;
- 有阅无评问题:在实际评阅场景中。往往需要更具有针对性和个性化的评价和建议,而不仅仅是分数反馈。在这过程中,评阅者需要将关键概念,结合学生自身特点进行充分关联,提供更贴近学生需求的知识延展和学科建议;
- 学情信息跟踪实际问题:评阅者在实际操作中难以全面、数字化地记录学生的评价和进步情况,进而影响评估的针对性和指导性作用;
- 实际评阅风格的单一问题:在实际评阅过程中,评语描述表达方式相对统一,难以通过多样化的评语风格来更好地引导学生理解知识点和提高学业水平;
- 学科限制与切换问题:由于不同学科具有独特的评价标准和要求,传统评阅工具难以在不同学科间切换,需要更多的学科专业性和差异化的评阅方式。
**本赛题要求选手面向教育领域, 基于文心一言的模型能力,发挥其在内容理解和生成方面的能力优势,打造出面向评阅者的交互式、智能化和个性化的智能阅卷平台。**赛题详细说明见页面【赛题说明】板块。
四、赛题任务与开发说明
本命题产品要求选手深入理解评阅场景与需求,深度发挥大语言模型和深度学习的技术优势,打造可以云端或本地部署的软件平台。
任务清单
包括但不限于以下功能:
- 试卷图像快速采集与存储;
- 字符识别与提取;
- 内容理解与评阅内容生成;
- 评阅内容的二次编辑;
- 评阅结果的可视化、整理与导出;
- 学情数据可视化;
- 跨平台支持;
- 实时采集与分析(可选);
- 其它拓展功能和创新方向,如软硬一体解决方案。
开发工具与数据接口
- 大模型能力调用指定平台:飞桨星河社区ERNIE Bot SDK。
- OCR工具:PaddleOCR
- 其他深度学习模型:基于PaddlePaddle
四大技术要求与指标
视觉技术要求
- 准确性要求:要求集成高准确率的OCR(Optical Character Recognition)技术,确保对学生手写或打印的文字进行准确、快速的识别,以提高评阅的效率和准确性,准确性在百度提供的数据集(后续提供)上,达到较为可观的准确率。
- 多格式支持:要求能够对汉字、英文、数学公式、表格等尽可能丰富的字符类型进行识别。
- 速度要求:要求部署后的模型识别速度尽可能高速。
- 深度学习框架要求:要求基于PaddleOCR完成模型建设与部署。
大模型技术的使用要求
- 要求通过飞桨星河社区ERNIE Bot SDK进行文心大模型的调用(每位选手赠送100万Token的免费额度)。
- 飞桨星河社区ERNIE Bot SDK令牌获取地址:https://aistudio.baidu.com/index/accessToken 每位选手赠送100万Token的免费额度。
- ERNIE Bot SDK基础教程:https://aistudio.baidu.com/projectdetail/6779542
评阅结果可视化与数据管理要求
可选择在图片本身进行相关评阅结果的标注,也可以在附属界面进行显示。
外部数据的融合要求
除了利用大模型本身的知识,还可以充分利用外部学科相关数据,例如学科标准、题型模板等,以提高评阅的专业性和准确性。
提交要求
提交位置
- 大赛官网:http://www.fwwb.org.cn/
- AI Studio提交页面。
提交内容
- 项目概要介绍;
- 项目简介PPT;
- 项目详细方案;
- 项目演示视频;
- 其他要求提交的材料: ①产品使用手册:包括产品功能架构、使用流程图和典型学习示例; ②产品交互演示:对产品的交互过程进行录制; ③项目的详细分工及过程文档:对团队成员的角色、分工、排期和过程进行记录;
- 团队自愿提交的其他补充材料。
五、参赛阶段
本届大赛分为区域赛(2024年5月)和总决赛(2024年7月),区域赛有西部、中部、东部和北部区域赛。
- 西部区域赛由西安电子科技大学牵头承办,包括:陕西、四川、重庆、宁夏、青海、甘肃、新疆、西藏 8 个省(自治区、直辖市)。
- 中部区域赛由中南大学牵头承办,包括:湖南、湖北、河南、广东、广西、云南、贵州、海南8个省(自治区、直辖市)。
- 东部区域赛由南京大学牵头承办,包括:江苏、上海、浙江、福建、江西、安徽、香港、澳门、台湾9个省(自治区、直辖市、特别行政区)。
- 北部区域赛由山东大学牵头承办,包括:北京、天津、山东、河北、山西、内蒙古、辽宁、吉林、黑龙江9个省(自治区、直辖市)。
总决赛具体地点和时间在之后更新。
六、参赛对象
- 全国高等学校(本科类和高职高专类院校)具有正式学籍的全日制在校学生(含 2024 年应届毕业生)及毕业不超过 5年(2019 年后毕业)的大学生。
- 仅限选一个竞赛类别参赛;已获本大赛往届全国赛奖项(包括一、二、三等奖)的项目,不可报名参加本届大赛。
- 参赛队每队队员数量上限 5 人,指导老师数量上限 2人。
七、参赛形式
报名:在大赛官网进行报名,报名时间为 2024年12月22日起至2024年3月20日止。
九、大模型开发SDK交流社群
![基于文心大模型智能阅卷平台设计,第15届中国大学生服务外包创新创业大赛,24/3/20报名截止](https://www.aigc.cc/wp-content/themes/onenav/images/t.png)
十、赛事小助手微信
![基于文心大模型智能阅卷平台设计,第15届中国大学生服务外包创新创业大赛,24/3/20报名截止](https://www.aigc.cc/wp-content/themes/onenav/images/t.png)
其它
大模型能力调用
- 飞桨星河社区ERNIE Bot SDK令牌获取地址:https://aistudio.baidu.com/index/accessToken 每位选手赠送100万Token的免费额度。
- ERNIE Bot SDK基础教程:https://aistudio.baidu.com/projectdetail/6779542