LegalAI公开数据集的整理、总结及介绍(持续更新ing…)

news/2024/10/30 11:28:59/

诸神缄默不语-个人CSDN博文目录

最近更新日期:2023.6.7
最早更新日期:2023.6.7

文章目录

  • 1. 司法判决预测
  • 2. 通用语料
  • 3. 其他集成项目
  • 4. 推理
  • 5. NLU
  • 6. NLG
    • 1 QA
    • 2 文本摘要
  • 7. 信息抽取
    • 1 命名实体识别
    • 2 句子边界检测(分句)

1. 司法判决预测

中文:

  1. CAIL2018
    刑法
    1. 原始论文:CAIL2018: A Large-Scale Legal Dataset for Judgment Prediction
      Overview of CAIL2018: Legal Judgment Prediction Competition
    2. 数据下载地址:https://cail.oss-cn-qingdao.aliyuncs.com/CAIL2018_ALL_DATA.zip(对数据的具体介绍除上面的论文外,还可以参考:thunlp/CAIL: Chinese AI & Law Challenge)
    3. 任务:(分类)预测法条、罪名、刑期

2. 通用语料

多语言:

  1. MultiLegalPile在这里插入图片描述
    1. 原始论文:(2023) MultiLegalPile: A 689GB Multilingual Legal Corpus
    2. 数据下载地址:https://huggingface.co/datasets/joelito/Multi_Legal_Pile
    3. 项目包含的数据:
      1. https://huggingface.co/datasets/joelito/eurlex_resources
      2. https://huggingface.co/datasets/joelito/legal-mc4
      3. Pile of Law
  2. LexFiles
    1. 原始论文:(2023 ACL) LeXFiles and LegalLAMA: Facilitating English Multinational Legal Language Model Development

西班牙语:

  1. Spanish Legal Domain Corpora
    1. 原始论文:(2021) Spanish Legalese Language Model and Corpora
    2. 数据下载地址:Spanish Legal Domain Corpora | Zenodo

英语:

  1. CaseHOLD
    English Harvard Law case corpus (1965-2021)
    1. 原始论文:(2021 ICAIL) When does pretraining help?: assessing self-supervised learning for law and the CaseHOLD dataset of 53,000+ legal holdings
  2. Pile of Law
    1. 原始论文:(2022 NeurIPS) Pile of Law: Learning Responsible Data Filtering from the Law and a 256GB Open-Source Legal Dataset
    2. 数据下载地址:https://huggingface.co/datasets/pile-of-law/pile-of-law

中文:

  1. 华律网法律咨询数据及论文所需语料库;同时发表的论文:法律咨询文本分类系统设计与研究
    The legal consultation data and corpus of the thesis from China law network.Replication Data for: Design and research of legal consultation text classification system. - Data Driven Innovation Research Competition for University of China

3. 其他集成项目

多语言:

  1. LexGLUE
    coastalcph/lex-glue: LexGLUE: A Benchmark Dataset for Legal Language Understanding in English
    1. 原始论文:(2021) LexGLUE: A Benchmark Dataset for Legal Language Understanding in English
  2. LEXTREME
    1. 原始论文:(2023) LEXTREME: A Multi-Lingual and Multi-Task Benchmark for the Legal Domain
    2. 数据下载地址:https://huggingface.co/datasets/joelito/lextreme

还没整理完的:

  1. https://github.com/neelguha/legal-ml-datasets

4. 推理

  1. legalbench
    1. 原始论文:(2022) LegalBench: Prototyping a Collaborative Benchmark for Legal Reasoning
    2. 数据下载地址:https://github.com/HazyResearch/legalbench

英语:

  1. SARA:大概来说就是推理某种情况是否适用于某某法律(美国税法中的9个Section)
    1. 原始论文:(2020) A Dataset for Statutory Reasoning in Tax Law Entailment and Question Answering

5. NLU

  1. SemEval 2023 Task 6: LegalEval - Understanding Legal Texts
    1. 任务:Rhetorical Roles Labeling,命名实体识别,可解释的司法判决预测

6. NLG

1 QA

中文:

  1. JEC-QA
    法考数据集
    https://jecqa.thunlp.org/
    1. 原始论文:(2020 AAAI) JEC-QA: A Legal-Domain Question Answering Dataset

2 文本摘要

英文:

  1. BillSum

7. 信息抽取

1 命名实体识别

葡萄牙语(巴西):

  1. CDJUR-BR
    1. 原始论文:(2023) CDJUR-BR – A Golden Collection of Legal Document from Brazilian Justice with Fine-Grained Named Entities

2 句子边界检测(分句)

多语言:

  1. MultiLegalSBD(英语、西班牙语、德语、意大利语、葡萄牙语、法语)
    1. 原始论文:(2023 ICAIL) MultiLegalSBD: A Multilingual Legal Sentence Boundary Detection Dataset
    2. 数据下载地址:https://huggingface.co/datasets/rcds/MultiLegalSBD

http://www.ppmy.cn/news/263555.html

相关文章

蓝牙的工作频段

蓝牙的波段为2400–2483.5MHz(包括防护频带)。这是全球范围内无需取得执照(但并非无管制的)的工业、科学和医疗用(ISM)波段的 2.4 GHz 短距离无线电频段。 蓝牙使用跳频技术,将传输的数据分割成…

图数据库(二):Java操作图数据库

在上篇文章中,我们介绍了什么是Neo4j,什么是Cypher以及Neo4j的使用,今天我们学习一下如何使用Java操作Neo4j图数据库。 Cypher查询 在使用Java操作Neo4j之前,我们先了解一点,Cypher语句简单查询。 本文使用的是Neo4j…

排名前十的运动蓝牙耳机品牌,排名最靠前的几款运动耳机分享

在选购运动耳机的时候,我们应该看重耳机的哪方面要求?是佩戴舒适性呢,还是音质。运动耳机除了这两个条件,还要在防水方面效果好,一款运动耳机怎么会没有防水性能呢?既要稳固舒适也要防水,音质方…

夜跑的时候用什么蓝牙耳机比较好、最好用的跑步蓝牙耳机排名

有一说一跑步运动真的是一件很枯燥的事情,尤其是一个人去跑的时候,连个眼神交流的人都没有。这也导致很多人在跑了几天之后,就不愿意在继续跑下去了。我以前就是这样的,每次跑步各种发誓一定会坚持下去,但是跑了十几二…

新手必看:蓝牙耳机什么牌子的好用?2023年蓝牙耳机排名

上班通勤、健身运动、游戏娱乐都离不开蓝牙耳机,蓝牙耳机市场这几年逐渐饱和,涌现了大量的品牌,蓝牙耳机什么牌子的好用成为热议话题,新手们在挑选时会参考排行榜,小编接下来将盘点2023年蓝牙耳机排名。 ●JEET Air 2蓝…

开发一个Android应用:从零到一的实践指南

开发一个Android应用:从零到一的实践指南 在这篇博文中,我们将逐步探讨如何从头开始构建一个Android应用。我们将从最基本的环境搭建开始,然后深入讨论组件、布局和其他核心概念。在完成整个过程后,你将会掌握一个简单但完整的An…

护眼台灯那个牌子好?护眼灯品牌推荐

随着手机、电脑等的发展,我们对眼睛的使用越来越过度,然后对眼睛造成的伤害也越来越大,现代人真的该注意对视力的保护了。其实保护视力应该从小抓起,小朋友们在晚上学习的时候呢,家长们应该给他们准备一盏护眼灯&#…

Linux安装和配置nsq

NSQ简介 NSQ 是一个实时分布式消息平台,旨在大规模运行,每天处理数十亿条消息。 它提倡没有单点故障的分布式和分散式拓扑结构,实现容错和高可用性,同时保证可靠的消息传递。请看特点和保证。 在操作上,NSQ很容易配…