(原标题:上海发布寰宇首个以金融业务才调为中枢的团体尺度,南财全媒体集团参编)
21世纪经济报说念记者李览青 上海报说念
12月6日,在中共上海市委金融委员会办公室、上海市经济和信息化委员会的指导下,上海市东说念主工智能行业协会和上海金融业招引会调治髻布寰宇首个以金融业务才调为中枢的团体尺度《金融大模子专揽评测指南》(以下简称《评测指南》),上海库帕想科技有限公司发布多维度金融大模子评测数据集(2024版)。
动作团标单元,南边财经全媒体集团参与《评测指南》的草拟与校庄重过。
据悉,《金融大模子专揽评测指南》,以金融业务为中枢,以金融机构模子专揽为导向,从模子基础、金融安全与价值对都、金融风险限制、金融专科领略、金融业务扶持拓展等5个维度185项观念条目,构建了金融领域大模子的才调测评框架。
模子基础才调方面,围绕模子基础厚实和推演功能,指南界说了包括文天职类、信息抽取等在内的11项单模态、图文检索、视频问答等在内的6项多模态观念条目。金融安全与价值对都才调方面,围绕模子的可靠性、可诠释注解性以及阴私保护,指南设想了内容合规、文化价值、伦理价值等在内的9项观念条目。金融风险限制才调方面,围绕模子在骨子专揽中的风险驻扎与限制,指南建议了利率风险、汇率风险、舆情风险等在内的19项观念条目。金融专科领略才调方面,围绕模子的金融基础常识和信息解读,指南归纳了司帐核算、财务报表编制与分析等在内的23项观念条目。金融业务扶持拓展才调方面,围绕银行、基金、保障、证券、相信等5个领域,指南索求了28项业务场景,包括存贷款业务、量化来去等在内的117项观念条目。《金融大模子专揽评测指南》同步细化了关系的评测内容,给出了关系的评测设施与器具,并以附录的体式给出了评测分级尺度。
金融大模子评测数据集(2024版),以金融业务的视角,结合金融行业的推论,是金融领域大模子专揽见效评测的紧要持手。
评测数据集比照最高水平、最佳尺度,具有界限大、结构优、价值对都等脾气,相宜金融领域对常识鲜嫩度、万般性和高密度的举座条目。
金融机构比照《金融大模子专揽评测指南》才调测评框架,共设想评测数据44000余句对。聚焦“模子基础才调”,围绕筹谋才调、逻辑推理等6个维度,设想评测数据22000余句对。聚焦“金融安全与价值对都才调”,围绕信息内容、社会顺序等13个维度,设想评测数据2000余句对。聚焦“金融风险限制才调”,围绕合规、市集、操作等5类金融风险,设想评测数据1000余句对。聚焦“金融业务扶持拓展才调”,围绕舆情分析、智能投研等3项业务场景,设想评测数据12000余句对。聚焦“金融专科领略才调”,围绕金融专科常识、IPO图表等6种常识类型,设想评测数据7000余句对。后续,金融评测数据集将依期更新,样例集已在Open Data Lab和绽放原子社区发布。
据了解,《金融大模子专揽评测指南》和金融大模子评测数据集的发布是深远金融垂类专揽,设施和带领金融领域用好模子的紧要里程碑。关系评测求教也将在近期发布。