org.apdplat.word

Class WordSegmenter

java.lang.Object

org.apdplat.word.WordSegmenter

public class WordSegmenter
extends Object

中文分词基础入口 默认使用双向最大匹配算法 也可指定其他分词算法

Author:

杨尚川

Constructor Summary

Constructors

Constructor and Description
WordSegmenter()

Method Summary

Modifier and Type	Method and Description
static void	main(String[] args)
static void	processCommand(String... args)
static void	seg(File input, File output) 对文件进行分词，移除停用词 使用双向最大匹配算法
static void	seg(File input, File output, SegmentationAlgorithm segmentationAlgorithm) 对文件进行分词，移除停用词 可指定其他分词算法
static List<Word>	seg(String text) 对文本进行分词，移除停用词 使用双向最大匹配算法
static List<Word>	seg(String text, SegmentationAlgorithm segmentationAlgorithm) 对文本进行分词，移除停用词 可指定其他分词算法
static void	segWithStopWords(File input, File output) 对文件进行分词，保留停用词 使用双向最大匹配算法
static void	segWithStopWords(File input, File output, SegmentationAlgorithm segmentationAlgorithm) 对文件进行分词，保留停用词 可指定其他分词算法
static List<Word>	segWithStopWords(String text) 对文本进行分词，保留停用词 使用双向最大匹配算法
static List<Word>	segWithStopWords(String text, SegmentationAlgorithm segmentationAlgorithm) 对文本进行分词，保留停用词 可指定其他分词算法

Methods inherited from class java.lang.Object

clone, equals, finalize, getClass, hashCode, notify, notifyAll, toString, wait, wait, wait

Constructor Detail

WordSegmenter

public WordSegmenter()

Method Detail

segWithStopWords

public static List<Word> segWithStopWords(String text,
                                          SegmentationAlgorithm segmentationAlgorithm)

对文本进行分词，保留停用词 可指定其他分词算法

Parameters:

text - 文本

segmentationAlgorithm - 分词算法

Returns:

分词结果

segWithStopWords

public static List<Word> segWithStopWords(String text)

对文本进行分词，保留停用词 使用双向最大匹配算法

Parameters:

text - 文本

Returns:

分词结果

seg

public static List<Word> seg(String text,
                             SegmentationAlgorithm segmentationAlgorithm)

对文本进行分词，移除停用词 可指定其他分词算法

Parameters:

text - 文本

segmentationAlgorithm - 分词算法

Returns:

分词结果

seg

public static List<Word> seg(String text)

对文本进行分词，移除停用词 使用双向最大匹配算法

Parameters:

text - 文本

Returns:

分词结果

segWithStopWords

public static void segWithStopWords(File input,
                                    File output,
                                    SegmentationAlgorithm segmentationAlgorithm)
                             throws Exception

对文件进行分词，保留停用词 可指定其他分词算法

Parameters:

input - 输入文件

output - 输出文件

segmentationAlgorithm - 分词算法

Throws:

Exception

segWithStopWords

public static void segWithStopWords(File input,
                                    File output)
                             throws Exception

对文件进行分词，保留停用词 使用双向最大匹配算法

Parameters:

input - 输入文件

output - 输出文件

Throws:

Exception

seg

public static void seg(File input,
                       File output,
                       SegmentationAlgorithm segmentationAlgorithm)
                throws Exception

对文件进行分词，移除停用词 可指定其他分词算法

Parameters:

input - 输入文件

output - 输出文件

segmentationAlgorithm - 分词算法

Throws:

Exception

seg

public static void seg(File input,
                       File output)
                throws Exception

对文件进行分词，移除停用词 使用双向最大匹配算法

Parameters:

input - 输入文件

output - 输出文件

Throws:

Exception

processCommand

public static void processCommand(String... args)

main

public static void main(String[] args)