(资料图)
凤凰网科技讯 《AI前哨》 5月10日消息,粉笔(02469.HK)方面透露,从粉笔智能批改系统系统开发至今,累计批改题目1.5亿道。其中,2022年粉笔智能批改系统服务220万人,共计批改题目6467万道。
根据粉笔内部计算,教师对每道题进行同等质量的评分大概需要5-10分钟,以此推算教师人工批改题目的成本约为10元/题,假设人工可承载系统同等的工作量,需要支付超过6亿元的人工成本。
据了解,粉笔的智能批改系统所应用的技术与ChatGPT同属于Transformer深度神经网络模型,只是根据不同分支在进行探索,该系统的部分功能是基于BERT模型开发研究的。在日常工作中,整个系统在预处理、召回、过滤和排序等阶段,都有很多部分与人工智能结合紧密,用到了多种机器学习相关模型,其中有传统的机器学习模型,比如CRF(条件随机场,用于分类)、GBDT(梯度提升决策树,用于得分预测),也有更为智能的深度学习相关的模型,比如BERT+BiLSTM(用于大作文分段),RoBERTa(用于语义匹配),BERT-SUM(用于分论点提取)等,从而达到更为精准的评判效果。
举个例子,用户在答题时写了“文旅结合”,系统输入的得分点为“文旅融合”,意思相近的表述系统可以通过语义分析给出分数,因此该系统的得分正确率及召回率均在80%以上,一道大题从评估到得出最终分数,用时需95毫秒,效率高于人工评判。