检索结果-南通市图书馆

检索条件"主题词=条件随机场域"

共 1 条记录，以下是1-10 订阅

全选清除本页清除全部题录导出标记到"检索档案"

详细简洁

排序：

基于Morfessor的维吾尔语词干提取和词性标注的研究

基于Morfessor的维吾尔语词干提取和词性标注的研究

引用

作者：米尔阿迪力江·麦麦提新疆大学

学位级别：硕士

翻译系统的性能与语料库规模是密不可分的,语料库质量也直接影响到最后的翻译结果。因此自动词性标注与词干提取作为创建标注语料库中的基础性工作具有非常重大的研究意义。维吾尔语自然语言处理研究中维吾尔语自动词干提取和词性标注... 详细信息

翻译系统的性能与语料库规模是密不可分的,语料库质量也直接影响到最后的翻译结果。因此自动词性标注与词干提取作为创建标注语料库中的基础性工作具有非常重大的研究意义。维吾尔语自然语言处理研究中维吾尔语自动词干提取和词性标注是跟上述一样必不可少的一部分,本文中为了提高基于MOSES的维汉双向统计机器翻译的翻译质量,必须扩大标准的维汉平行语料库的规模,然后机器翻译训练集、开发和测试集中加词性标注和词干提取。此外维吾尔语词性标注和词干提取研究工作开始到现在不同人用不同的方法来实现,但是结果并不理想。在本文中分别引用了基于Morfessor的词干提取算法和基于条件随机场域(CRF)的词性标注方法。分别介绍CRF和Morfessor的原理并对其进行实验。为搜集语料本文开发了一个基于WEB的维哈柯多语种网上数据采集工具,本文90%的实验数据都是由此工具得到;由于CRF和Morfessor都对开发集和测试集的数据格式有严格要求,因此本文开发了两个预处理软件。本文通过在CRF中修改模版文件,并在LINUX平台上不断做实验,最后得到词性标注模型并调用该模型开发出自动词性标注系统。在Morfessor中必须大量的数据上做实验训练出最好的词干提取模型,只调用此模型进行词干提取不能解决维吾尔语中的元音弱化、脱落等问题。因此本文利用处理以上问题的算法于该模型结合开发出自动词干提取系统;最后测试结果显示本系统的维吾尔语自动词性标注准确率达到了89.73%,自动词干提取准确率达到了86.80%。基于以上研究成果本文的基于MOSES的维汉双向统计机器翻译的BLEU分也从原来的23.42提高到目前的25.38

关键词：维吾尔语词干提取 Morfessor 词性标注条件随机场域

来源：

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

全选清除本页清除全部题录导出标记到“检索档案”

共1页 << < 1 > >>

回到顶部

执行限定条件

欢迎您,

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

请选择保存的检索档案：

请选择收藏分类：

通借通还

欢迎您,

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：