中文语料库资源汇总

本文汇总了现在比较流行和常见的中文语料库资源的索引。

语料库在线:

语料库在线有现代汉语和古代汉语的语料,都是些句子,是有标记的。
http://www.cncorpus.org/index.aspx

现代汉语语料库:

  • 语料库:国家语委现代汉语平衡语料库
  • 语料库样本数:9487个(样本数即篇章数)
  • 语料库字符数:19455328个(含汉字、字母、数字、标点等)
  • 语料库总词语数:12842116个(含单字词、多字词、字母词、外文祠、数字串、标点符号等)
  • 语料库总词语个数:162875(指语料库出现的分词单位的个数)
  • 语料库总汉字词语个数:151300(含汉字的词语个数,不包括外文词、标点、数字串等)
  • 语料库说明:国家语委现代汉语语料库是一个大规模的平衡语料库,语料选材类别广泛,时间跨度大。在线提供检索的语料经过分词和词性标注,可以进行按词检索和分词类的检索。

通过签订使用权许可协议,提供语料库的有偿使用

  • 科研用途
  • 商业用途

    为从事汉语教学与研究的科研人员、教师、学生提供无偿的检索统计等服务

  • 语料检索、例句提取、字词频率统计等
  • 检索的数量、范围有一定限制

    为教育部、国家语委的相关科研项目提供数据支持

  • 语料库、标注语料库、相关软件等
  • 联系人:肖航 exiaohang@163.com

样本:10010za(哲学)
毛/nhf 泽东/nhs 同志/n 指出/v ,/w 在/p 事物/n 的/u 内在/f 矛盾/n 中/nd ,/w 存在/v 着/u 主要/a 的/u 矛盾/n 和/c 矛盾/n 的/u 主要/a 方面/n ;/w 这/r 进一步/v 说明/v 任何/r 事物/n 的/u 内在/f 矛盾/n 是/vl 复杂/a 的/u ,/w 严密/a 的/u ,/w 它们/r 的/u 运动/v 发展/v 必然/d 是/vl 有/v 规律/n 的/u ,/w 不/d 是/vl 可以/vu 任意/d 变动/v 的/u 。/w 上述/n 唯物辩证法/n 的/u 基本/a 概念/n 已/d 从/p 人类/n 的/u 社会/n 实践/n 和/c 科学/n 实践/n 取得/v 丰富/a 的/u 证明/n 。/w 一切/r 事物/n 都/d 有/v 内在/f 矛盾/n 这/r 概念/n ,/w 是/vl 以/p 物质/n 可/vu 分割/v 性/k 和/c 不可/vu 穷尽/v 性/k 的/u 认识/n 为/vl 基础/n 的/u 。/w
样本:10010303jc(历史)
到/v 公元前/nt 2/m 世纪/nt ,/w 罗马/ns 已经/d 占有/v 地中海/ns 周围/nd 从/p 西班牙/ns 到/v 小亚细亚/ns 的/u 许多/a 地方/n 、/w 北非/ns 的/u 一/m部分/n 和/c 地中海/ns 上/nd 的/u 许多/a 岛屿/n ,/w 一/d 跃/v 而/c 为/vl 地中海/ns 的/u 一/m 大/a 强/a 国/n 。/w 奴隶/n 制度/n 随着/p 对/p 外/nd 扩张/v 高度/a 发展/v 起来/vd 。/w 罗马/ns 每/r 征服/v 一/m 个/q 地方/n ,/w 常常/d 把/p 那里/r 的/u 人/n 全部/n 卖/v 为/vl 奴隶/n 。/w 海盗/n 又/d 常/d 拐/v 掠/v 人口/n 卖/v 作/v 奴隶/n 。/w 因此/c 奴隶/n 数量/n 很/d 多/a ,/w 售价/n 也/d 低/a 。/w

北京大学-计算语言学研究所

http://www.icl.pku.edu.cn/

现代汉语语法信息词典

比较全面的信息,有八万词。
http://www.icl.pku.edu.cn/icl_groups/syntac-dictn.asp (网站多年未更新了,联系人:doubtfire@sina.com.cn)
(说明:http://www.icl.pku.edu.cn/icl_groups/syntac-dictn/specification.htm)

《人民日报》语料

哈工大语料库

哈工大信息检索研究中心汉语依存树库

哈工大信息检索研究中心同义词词林扩展版

  1. HIT-CIR将全部资源的10%样本以及相关的规范和说明文档放到主页上
  2. 如果您对这些资源有兴趣,可以下载样本、规范和说明文档,决定是否需要该项资源100%的数据;
  3. 如果确认希望获得全部资源100%的数据,请详细填写《哈工大信息检索研究中心(HIT-CIR)共享资源和程序库协议》,并请您所在课题组的负责人直接将填好后的《协议》作为附件发邮件给车万翔老师(car@ir.hit.edu.cn),在协议中默认同意下述条款。
    1. 不可商用
    2. 不可扩展
    3. 成果声明在发表论文和申报成果时将声明“使用了哈工大信息检索研究中心语言技术平台中的的某资源或者某程序模块”,并且发信给car@ir.hit.edu.cn,说明发表论文题目,出处等情况。

数据堂