org.apdplat.word.corpus

类 Evaluation

java.lang.Object

org.apdplat.word.corpus.Evaluation

public class Evaluation
extends Object

利用人工标注的语料库 对分词算法效果进行评估 评估采用的测试文本有253 3709行，共2837 4490个字符 评估结果位于target/evaluation目录下： corpus-text.txt为分好词的人工标注文本，词之间以空格分隔 test-text.txt为测试文本，是把corpus-text.txt以标点符号分隔为多行的结果 standard-text.txt为测试文本对应的人工标注文本，作为分词是否正确的标准 result-text-***，***为各种分词算法名称，这是word分词结果 perfect-result-***，***为各种分词算法名称，这是分词结果和人工标注标准完全一致的文本 wrong-result-***，***为各种分词算法名称，这是分词结果和人工标注标准不一致的文本

作者:

杨尚川

构造器概要

构造器

构造器和说明
Evaluation()

方法概要

限定符和类型	方法和说明
static EvaluationResult	evaluation(String resultText, String standardText) 分词效果评估
static EvaluationResult	evaluation(String resultText, String standardText, String perfectResult, String wrongResult) 分词效果评估
static int	generateDataset(String file, String test, String standard) 生成测试数据集和标准数据集
static void	main(String[] args)

从类继承的方法 java.lang.Object

clone, equals, finalize, getClass, hashCode, notify, notifyAll, toString, wait, wait, wait

构造器详细资料

Evaluation

public Evaluation()

方法详细资料

main

public static void main(String[] args)
                 throws Exception

抛出:

Exception

generateDataset

public static int generateDataset(String file,
                                  String test,
                                  String standard)

生成测试数据集和标准数据集

参数:

file - 已分词文本，词之间空格分隔

test - 生成测试数据集文件路径

standard - 生成标准数据集文件路径

返回:

测试数据集字符数

evaluation

public static EvaluationResult evaluation(String resultText,
                                          String standardText,
                                          String perfectResult,
                                          String wrongResult)

分词效果评估

参数:

resultText - 实际分词结果文件路径

standardText - 标准分词结果文件路径

perfectResult - 分词完美内容保存文件路径

wrongResult - 分词错误内容保存文件路径

返回:

评估结果

evaluation

public static EvaluationResult evaluation(String resultText,
                                          String standardText)

分词效果评估

参数:

resultText - 实际分词结果文件路径

standardText - 标准分词结果文件路径

返回:

评估结果