Command Palette

Search for a command to run...

LCCC 大型清洁汉语会话语料库

日期

2 年前

大小

939.48 MB

机构

清华大学

发布地址

github.com

论文链接

arxiv.org

LCCC(全称为 Large-scale Cleaned Chinese Conversation corpus)由清华大学和三星中国研究院于 2020 年发布。

数据集主要包含两部分:LCCC-base(680 万个对话)和 LCCC-large(1200 万个对话)。研究团队设计了一套严格的数据过滤流程来确保该数据集中对话数据的质量,该流程基于一组规则和一个在手动注释的 110K 个对话对上训练的分类器构建。研究团队所过滤的噪声包括:脏文字、特殊的字符、表情、语法不通的语句、上下文不相关的对话等。清理后的数据集和预训练模型将促进短文本对话建模的研究。

LCCC.torrent
做种 1正在下载 0已完成 289总下载次数 526
  • LCCC/
    • README.md
      1.38 KB
    • README.txt
      2.76 KB
      • data/
        • lccc.zip
          939.48 MB

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
LCCC 大型清洁汉语会话语料库 | 数据集 | HyperAI超神经