PHPAnalysis中文分词类详解


Posted in PHP onJune 13, 2014

PHPAnalysis是目前广泛使用的中文分词类,使用反向匹配模式分词,因此兼容编码更广泛,现将其变量与常用函数详解如下:

一、比较重要的成员变量

$resultType   = 1        生成的分词结果数据类型(1 为全部, 2为 词典词汇及单个中日韩简繁字符及英文, 3 为词典词汇及英文)
                                    这个变量一般用 SetResultType( $rstype ) 这方法进行设置。
$notSplitLen  = 5        切分句子最短长度
$toLower      = false    把英文单词全部转小写
$differMax    = false    使用最大切分模式对二元词进行消岐
$unitWord     = true     尝试合并单字(即是新词识别)
$differFreq   = false    使用热门词优先模式进行消岐

二、主要成员函数列表

1、public function __construct($source_charset='utf-8', $target_charset='utf-8', $load_all=true, $source='')
函数说明:构造函数
参数列表:
$source_charset      源字符串编码
$target_charset      目录字符串编码
$load_all            是否完全加载词典(此参数已经作废)
$source              源字符串
如果输入输出都是utf-8,实际上可以不必使用任何参数进行初始化,而是通过 SetSource 方法设置要操作的文本

2、public function SetSource( $source, $source_charset='utf-8', $target_charset='utf-8' )
函数说明:设置源字符串
参数列表:
$source              源字符串
$source_charset      源字符串编码
$target_charset      目录字符串编码
返回值:bool

3、public function StartAnalysis($optimize=true)
函数说明:开始执行分词操作
参数列表:
$optimize            分词后是否尝试优化结果
返回值:void
一个基本的分词过程:
//////////////////////////////////////
$pa = new PhpAnalysis();

$pa->SetSource('需要进行分词的字符串');

//设置分词属性
$pa->resultType = 2;
$pa->differMax  = true;

$pa->StartAnalysis();

//获取你想要的结果
$pa->GetFinallyIndex();
////////////////////////////////////////

4、public function SetResultType( $rstype )
函数说明:设置返回结果的类型
实际是对成员变量$resultType的操作
参数 $rstype 值为:
1 为全部, 2为 词典词汇及单个中日韩简繁字符及英文, 3 为词典词汇及英文
返回值:void

5、public function GetFinallyKeywords( $num = 10 )
函数说明:获取出现频率最高的指定词条数(通常用于提取文档关键字)
参数列表:
$num = 10  返回词条个数
返回值:用","分隔的关键字列表

6、public function GetFinallyResult($spword=' ')
函数说明:获得最终分词结果
参数列表:
$spword    词条之间的分隔符
返回值:string

7、public function GetSimpleResult()
函数说明:获得粗分结果
返回值:array

8、public function GetSimpleResultAll()
函数说明:获得包含属性信息的粗分结果
属性(1中文词句、2 ANSI词汇(包括全角),3 ANSI标点符号(包括全角),4数字(包括全角),5 中文标点或无法识别字符)
返回值:array

9、public function GetFinallyIndex()
函数说明:获取hash索引数组
返回值:array('word'=>count,...) 按出现频率排序

10、public function MakeDict( $source_file, $target_file='' )
函数说明:把文本文件词库编译成词典
参数列表:
$source_file   源文本文件
$target_file   目标文件(如果不指定,则为当前词典)
返回值:void

11、public function ExportDict( $targetfile )
函数说明:导出当前词典全部词条为文本文件
参数列表:
$targetfile  目标文件
返回值:void

PHP 相关文章推荐
PHP 和 MySQL 开发的 8 个技巧
Oct 09 PHP
php数组函数序列之array_values() 获取数组元素值的函数与方法
Oct 30 PHP
那些年一起学习的PHP(二)
Mar 21 PHP
php Imagick获取图片RGB颜色值
Jul 28 PHP
PHP图片处理之图片背景、画布操作
Nov 19 PHP
php实现事件监听与触发的方法
Nov 21 PHP
Yii视图CGridView列表用法实例分析
Jul 12 PHP
PHP中ajax无刷新上传图片与图片下载功能
Feb 21 PHP
深入解析Laravel5.5中的包自动发现Package Auto Discovery
Sep 13 PHP
浅析PHP 中move_uploaded_file 上传中文文件名失败
Apr 17 PHP
laravel框架之数据库查出来的对象实现转化为数组
Oct 23 PHP
PHP上传图片到数据库并显示的实例代码
Dec 20 PHP
ThinkPHP缓存方法S()概述
Jun 13 #PHP
采用ThinkPHP中F方法实现快速缓存实例
Jun 13 #PHP
浅析ThinkPHP中execute和query方法的区别
Jun 13 #PHP
采用thinkphp自带方法生成静态html文件详解
Jun 13 #PHP
PHP中使用gettext解决国际化问题的例子(i18n)
Jun 13 #PHP
Yii结合CKEditor实现图片上传功能
Jun 13 #PHP
在Yii框架中使用PHP模板引擎Twig的例子
Jun 13 #PHP
You might like
一个php作的文本留言本的例子(六)
2006/10/09 PHP
laravel 获取某个查询的查询SQL语句方法
2019/10/12 PHP
laravel 模型查询按照whereIn排序的示例
2019/10/16 PHP
yii 框架实现按天,月,年,自定义时间段统计数据的方法分析
2020/04/04 PHP
javascript 延迟加载技术(lazyload)简单实现
2011/01/17 Javascript
passwordStrength 基于jquery的密码强度检测代码使用介绍
2011/10/08 Javascript
基于JavaScript 类的使用详解
2013/05/07 Javascript
js数值计算时使用parseInt进行数据类型转换(jquery)
2014/10/07 Javascript
node.js开机自启动脚本文件
2014/12/24 Javascript
浅谈jquery采用attr修改form表单enctype不起作用的问题
2016/11/25 Javascript
利用JS屏蔽页面中的Enter按键提交表单的方法
2016/11/25 Javascript
jquery 手势密码插件
2017/03/17 Javascript
解决Vue2.0自带浏览器里无法打开的原因(兼容处理)
2017/07/28 Javascript
jquery点击回车键实现登录效果并默认焦点的方法
2018/03/09 jQuery
vuejs2.0运用原生js实现简单拖拽元素功能
2020/08/21 Javascript
[59:59]EG vs IG 2018国际邀请赛小组赛BO2 第二场 8.16
2018/08/17 DOTA
[01:01:41]DOTA2-DPC中国联赛 正赛 PSG.LGD vs Magma BO3 第二场 1月31日
2021/03/11 DOTA
Python的Flask站点中集成xhEditor文本编辑器的教程
2016/06/13 Python
对PyTorch torch.stack的实例讲解
2018/07/30 Python
Python 分享10个PyCharm技巧
2019/07/13 Python
Python使用内置函数setattr设置对象的属性值
2020/10/16 Python
Python实现迪杰斯特拉算法并生成最短路径的示例代码
2020/12/01 Python
python爬虫爬取某网站视频的示例代码
2021/02/20 Python
基于HTML5 的人脸识别活体认证的实现方法
2016/06/22 HTML / CSS
旧时光糖果:Old Time Candy
2018/02/05 全球购物
Whittard官方海外旗舰店:英国百年茶叶品牌
2018/02/22 全球购物
Charlotte Tilbury澳大利亚官网:英国美妆品牌
2018/10/05 全球购物
英国的潮牌鞋履服饰商店:size?
2019/03/26 全球购物
新奥尔良珠宝:Mignon Faget
2020/11/23 全球购物
内科护士节演讲稿
2014/09/11 职场文书
民警个人对照检查剖析材料
2014/09/17 职场文书
大雁塔英文导游词
2015/02/10 职场文书
电影红河谷观后感
2015/06/11 职场文书
资深HR教你写好简历中的自我评价
2019/05/07 职场文书
python实现进度条的多种实现
2021/04/29 Python
如何自己动手写SQL执行引擎
2021/06/02 MySQL