博客
关于我
HanLP的依存分析
阅读量:356 次
发布时间:2019-03-04

本文共 1033 字,大约阅读时间需要 3 分钟。

前言

HanLP2.1支持包括简繁中英日俄法德在内的104种语言上的10种联合任务:分词(粗分、细分2个标准,强制、合并、校正3种)、词性标注(PKU、863、CTB、UD四套词性规范)、命名实体识别(PKU、MSRA、OntoNotes三套规范)、依存句法分析(SD、UD规范)、成分句法分析、语义依存分析(SemEval16、DM、PAS、PSD四套规范)、语义角色标注、词干提取、词法语法特征提取、抽象意义表示(AMR)。

HanLP提供RESTful和native两种API,分别面向轻量级和海量级两种场景。

在线演示资源、HanLP教学资源、HanLP GitHub等。

安装

Native 安装

  • 创建虚拟环境(非必要操作)
  • conda create -n hanlp python=3.7
    1. 安装HanLP(在线安装失败时,可选择离线安装)
    2. pip install hanlp-2.1.0a36.tar.gz

      RESTful 安装

      pip install hanlp_restful

      HanLP的使用(以native为例)

    3. 查询HanLP中所有的预训练模型
    4. hanlp.pretrained.ALL
      1. 使用HanLP进行预定义任务执行
      2. import hanlphanlp.load(hanlp.pretrained.mtl.CLOSE_TOK_POS_NER_SRL_DEP_SDP_CON_ELECTRA_SMALL_ZH)hanlp.HanLP(['清华大学研究核能的教授有哪些'])
        1. 可选子任务功能
        2. hanlp.HanLP(['清华大学研究核能的教授有哪些'], tasks='tok')hanlp.HanLP('清华大学研究核能的教授有哪些', tasks=['pos', 'dep'])hanlp.HanLP('清华大学研究核能的教授有哪些', tasks=['pos/863', 'dep'])
          1. 可视化输出
          2. hanlp.HanLP(['清华大学研究核能的教授有哪些']).pretty_print()

            工具学习系列

            以下为多个工具的词性标注、依存句法分析、语义依存分析等能力对比:

            pos/tag dep sdp
            LTP
            SpaCy 基于扩展标注
            DDParser
            HanLP 、、DM、PAS、PSD 、
            Stanford CoreNLP Penn Chinese Treebank Tag Set()
            jieba 兼容的标记法 不支持 不支持

    转载地址:http://jflh.baihongyu.com/

    你可能感兴趣的文章
    python3爬虫抓取智联招聘职位信息代码
    查看>>
    Python3爬虫数据入数据库---把爬取到的数据存到数据库,带数据库去重功能
    查看>>
    python3的 pymysql把mysqldb库取代了,让python 3支持mysqldb的解决方法
    查看>>
    Python3笔记——IDE的选择
    查看>>
    python3简单使用requests 用户代理,cookie池
    查看>>
    Python3组播通信编程实现教程(发送者+接收者)
    查看>>
    Python3编写网络爬虫10-数据存储方式三-CSV文件存储
    查看>>
    python3读取redis返回数据带有'b'的问题
    查看>>
    Python3连接MySQL
    查看>>
    Python关于isinstance函数的解析 | 附Demo(全)
    查看>>
    Python3:setup.py:完成所有任务的PIP安装(Build_ext+Install)
    查看>>
    python4.0 gil_Python 并发编程系列--1、浅谈GIL历史及对多线程的影响
    查看>>
    python60行绘图程序_天底下最简单的QT画图板,就一个类,60行代码
    查看>>
    Python: AES加密与解密
    查看>>
    Python: Range() 最大尺寸;动态的还是静态的?
    查看>>
    Python: Windows下用 multiprocessing 的深坑
    查看>>
    python:Could not find platform independent libraries <prefix>解决方法
    查看>>
    Python:datetime tzinfo 时区名称文档
    查看>>
    Python:deepcopy(list) vs new_list = old_list[:]
    查看>>
    Python:Google API - 从消息中获取 mimeTypes
    查看>>