一种基于统计的汉语切词方法

• 作者: 刘海峰 王元元
• 来源期刊: 工程地质计算机应用
• 学科: 地球科学
• 关键词: 自动分词 搭配 最大概率 样本均值 样本方差
• 年，卷（期）: gcdzjsjyy,（2）
• 页码范围: 16-19
• 页数: 4页
• 分类号: P426.62

摘要

汉语分词是中文信息处理系统的基础。本文的主要目的是：提出一种概率模式与统计手段相结合的方法进行汉语切词。首先采用一种基于概率的算法对汉语文本进行切分，然后在此基础上借助样本方差这一统计手段对切分结果进行检验、修正；利用两种模型相结合的方式，提高切分的准确率。