中国法院司法案例智能评价——体系、技术与模型

案例质量评价体系是加强和规范审判质量管理和监督，客观评价法官的办案质量，落实错案责任，促进审判质量和审判效率提高的重要依据。但是，案例质量评价体系构建研究在国内刚刚起步，对于评价体系的要件构成与结构、各评价指标的形成及其考核对象、考核目的等，均需要做细致阐述与说明。本书围绕价体系的要件构成与结构、各评价指标的形成及其考核对象、考核目的等方面内容开展广泛走访，在收集大量素材、访谈结果的基础上，对法院案例质量评价体系进行深入研究。

王锐法学博士，国家法官学院教授，国际法官研修部主任。最高人民法院审判理论研究会“类案同判”专项研究首席专家组成员、金融保险组首席专家，最高人民法院破产法修订工作小组成员。参与破产法编纂研究、多部司法解释与金融纪要的研究论证工作。担任国家重点研发计划课题、最高人民法院重点专项等研究课题的负责人。研究方向主要为金融法、数据法。近年来，主要关注领域为人工智能与司法审判、审判管理与案例研究的融合，部分成果以咨询建议等方式引入实践。

目录第一章以信息技术辅助司法案例多主体多维度质量评价/ 001一、为什么司法案例需要被多主体、基于多维度评价/ 003（一）为什么司法案例需要被评价/ 003（二）为什么司法案例需要接受多主体评价/ 005（三）为什么司法案例需要基于多维度评价/ 013二、司法案例质量评价需要智慧支持/ 018三、以信息技术支撑司法案例质量评价的方法探索/ 019（一）多主体协同司法案例质量评价体系/ 019（二）多主体协同司法案例质量评价要素语义认知技术/ 020（三）多主体协同司法案例质量评价模型/ 021（四）司法案例智能服务平台/ 021第二章多主体协同司法案例质量评价指标体系/ 023一、构建多主体协同司法案例质量评价指标体系的原则/ 025（一）综合性原则/ 025（二）典型性原则/ 026（三）可操作性原则/ 026（四）可比性原则/ 026（五）动态性原则/ 026二、多主体协同司法案例质量评价的内容/ 027（一）民事案例取样：涉外金融借款合同纠纷/ 027（二）刑事案例取样：走私、贩卖、运输、制造毒品罪/ 029三、多主体协同司法案例质量评价的方式/ 030（一）人工评价/ 030（二）AI辅助评价/ 035（三）多主体协同司法案例质量评价结果/ 038四、多主体协同司法案例质量评价指标体系/ 039（一）指标体系设计/ 039（二）通用指标/ 046（三）类型化指标/ 049第三章相似度多维分析：类案裁判数据库核心算法的实现框架/ 055一、相关研究回顾/ 058二、本研究的算法实现/ 060（一）本研究的整体算法框架/ 060（二）数据预处理/ 061（三）标签化和标签共现分组/ 062（四）相似度多维分析/ 064三、算法框架的小样本验证/ 068（一）实验过程和结果/ 068（二）实验结果的辅助验证/ 071第四章基于司法案例质量评价指标的模型构建技术/ 073一、通用指标/ 075（一）文本/ 075（二）说理/ 082（三）释法/ 087二、类型化指标/ 089（一）新型/ 089（二）热度/ 091（三）普遍/ 092（四）疑难/ 093（五）影响/ 095三、结论/ 096第五章司法案例质量评价智慧解决方案及泛在化应用/ 099一、基于机器学习的司法案例质量评价方案研究/ 101（一）数据预处理/ 101（二）模型训练/ 102（三）模型评价/ 103二、基于人工评价的司法案例质量评价方案的设计与实现/ 103（一）基于人工评价的司法案例质量评价模型的设计/ 103（二）基于人工评价的司法案例质量评价模型的实现/ 104三、智能辅助案例评价泛在化应用/ 104（一）司法审判/ 104（二）法官培训/ 105（三）法学研究/ 106（四）涉外法治建设/ 106（五）法学教育/ 107（六）普法宣传/ 107第六章司法数据如何支撑泛在化司法案例研究/ 109一、以农村集体资产权益“分配到户”为例分析技术应用/ 112（一）相关法律纠纷的态势分析/ 113（二）“分配到户”模式的实践样态及其挑战/ 122二、基于多维度、可泛化的诈骗应用检测和大模型分析溯源技术在反诈治理中的司法应用/ 133（一）基于多维度、可泛化的诈骗应用检测技术/ 135（二）基于大模型技术的诈骗场景识别分析技术/ 146三、以数据“三化”提升案例研究质效的建议与展望/ 150（一）以要素化规定数据研发“怎么做”，提升司法案件关联性，解决案例研究的基础性问题/ 150（二）以资产化明确数据门户“有什么”，提升质效数据准确率，解决案例研究的平台性问题/ 153（三）以中台化约束数据服务“谁能用”，提升诉讼信息整合度，解决案例研究的框架性问题/ 156第七章司法大语言模型评估框架路线分析/ 161一、司法大模型评估框架构建背景/ 163二、法律认知能力评估框架/ 165（一）任务定义/ 167（二）记忆/ 168（三）理解/ 169（四）逻辑推理/ 171（五）辨别/ 173（六）生成/ 174（七）伦理/ 175三、结语/ 177附?录附录一?以涉外金融借款合同纠纷为例进行指标体系实验验证/ 181附录二?以走私毒品案为例进行指标体系实验验证/ 185附录三?智能评价依据的部分规范性文件及答记者问/ 189