org.apdplat.word.corpus

Class Bigram

java.lang.Object

org.apdplat.word.corpus.Bigram

public class Bigram
extends Object

二元语法模型

Author:

杨尚川

Constructor Summary

Constructors

Constructor and Description
Bigram()

Method Summary

Modifier and Type	Method and Description
static Map<List<Word>,Float>	bigram(List<Word>... sentences) 含有语境的二元模型分值算法 计算多种分词结果的分值 利用获得的二元模型分值重新计算分词结果的分值 补偿细粒度切分获得分值而粗粒度切分未获得分值的情况
static float	bigram(List<Word> words) 计算分词结果的二元模型分值
static int	getFrequency(String first, String second)
static int	getMaxFrequency()
static float	getScore(String first, String second) 获取两个词一前一后紧挨着同时出现在语料库中的分值 分值被归一化了： 完全没有出现分值为0 出现频率最高的分值为1
static void	reload()

Methods inherited from class java.lang.Object

clone, equals, finalize, getClass, hashCode, notify, notifyAll, toString, wait, wait, wait

Constructor Detail

Bigram

public Bigram()

Method Detail

reload

public static void reload()

getMaxFrequency

public static int getMaxFrequency()

bigram

public static Map<List<Word>,Float> bigram(List<Word>... sentences)

含有语境的二元模型分值算法 计算多种分词结果的分值 利用获得的二元模型分值重新计算分词结果的分值 补偿细粒度切分获得分值而粗粒度切分未获得分值的情况

Parameters:

sentences - 多种分词结果

Returns:

分词结果及其对应的分值

bigram

public static float bigram(List<Word> words)

计算分词结果的二元模型分值

Parameters:

words - 分词结果

Returns:

二元模型分值

getScore

public static float getScore(String first,
                             String second)

获取两个词一前一后紧挨着同时出现在语料库中的分值 分值被归一化了： 完全没有出现分值为0 出现频率最高的分值为1

Parameters:

first - 前一个词

second - 后一个词

Returns:

同时出现的分值

getFrequency

public static int getFrequency(String first,
                               String second)