一、说明 博主的配置 1：window10 2：myeclipse 3：jdk1.8 备注：文章分享自贾继康的博客，博客使用的hanlp是1.6.8的版本。大家可以去下载最新的1.7版本了，也比较推荐使用最新的这个版本！ 二、资源获取 1、hanlp jar包获取：可以github上下载。本文中使用的是hanlp-1.6.8.zip版本 2、数据包获取...
第1章新手上路 自然语言处理是一门融合了计算机科学、人工智能以及语言学的交叉学科。这门学科研究的是如何通过机器学习等技术，让计算机学会处理人类语言，乃至实现终极目标----理解人类语言或人工智能。 自然语言处理这个术语没有被广泛的定义，注重语言学结构的学者喜欢使用计算语言学(CL)，强调最终目的的学者更偏好自然语言理解(NLU)。 1.1自然语言与编程语言...
1、hanlp简介 HanLP是由一系列模型与算法组成的Java工具包，目标是普及自然语言处理在生产环境中的应用。HanLP具备功能完善、性能高效、架构清晰、语料时新、可自定义的特点。 Hanlp具有以下功能： 中文分词 词性标注 命名实体识别 依存句法分析 关键词提取新词发现 短语提取 自动摘要 文本分类 拼音简繁 2、hanlp安装 第一步：han...
直接pip install pyhanlp的时候会提示缺少Microsoft Visual c++环境， 其实没有Microsoft Visual c++环境也是可以的， 可以先安装jpype1，然后在pip install pyhanlp就行了。 步骤： ①在python非官方库网站上下载库jpyre1的whl文件， 文件链接https://www.lf...
1. 背景 近日项目要求基于爬取的影视评论信息，抽取影视的关键字信息。考虑到影视评论数据量较大，因此采用Spark处理框架。关键词提取的处理主要包含分词+算法抽取两部分。目前分词工具包较为主流的，包括哈工大的LTP以及HanLP，而关键词的抽取算法较多，包括TF-IDF、TextRank、互信息等。本次任务主要基于LTP、HanLP、Ac双数组进行分词，采...
刚开始用都不知道要怎么安装，包括什么文件。百度了下发现正常安装就可以用，不用下多余的东西，但是但是但是但是但是但是但是但是 用pycharm安装不行，pip安装不行，也是见鬼了。 解决方法： 1、手动安装JPype1 pip install D:softJPype1-0.6.2-cp36-cp36m-win_amd64.whl 这个安装包可以在这里下 ...
一、Numpy NumPy系统是Python的一种开源的数值计算包。 包括： 1、一个强大的N维数组对象Array； 2、比较成熟的（广播）函数 库； 3、用于整合C/C++和Fortran代码的工具包； 4、实用的线性代数、傅里叶变换和随机数生成函数。 numpy和稀疏矩阵运算包scipy配合使用更加方便。 安装： pip install numpy 二...