检索结果-南通市图书馆

在线全文

学校读者我要写书评

暂无评论

基于统计规则的交集型歧义处理方法

吉林大学学报（理学版） 2006年第2期44卷 223-228页

作者：翟凤文赫枫龄左万利吉林大学软件学院长春130012

中文分词是中文信息处理的基础,歧义问题是中文分词的一个难点,而交集型歧义问题占歧义问题的90%以上,因此对交集型歧义问题的研究是中文分词研究的一个重点.通过反复的实验和对实验结果的分析,提出了5条规则,并根据这5条规则给出了一... 详细信息

中文分词是中文信息处理的基础,歧义问题是中文分词的一个难点,而交集型歧义问题占歧义问题的90%以上,因此对交集型歧义问题的研究是中文分词研究的一个重点.通过反复的实验和对实验结果的分析,提出了5条规则,并根据这5条规则给出了一种针对交集型歧义字段切分的算法,实验结果表明,基于该算法实现的分词系统DSfenci,对于交集型歧义消解的准确率高于95.22%.

关键词：交集型歧义规则统计

基于SVM和k-NN结合的汉语交集型歧义切分方法

在线全文

学校读者我要写书评

暂无评论

中文信息学报 2001年第6期15卷 13-18页

作者：李蓉刘少辉叶世伟史忠植中国科技大学研究生院(北京)计算机教学部北京100039 中国科学院计算技术研究所智能开放实验室北京100080

本文提出了基于支持向量机 (SVM)和k 近邻 (k NN)相结合的一种分类方法 ,用于解决交集型伪歧义字段。首先将交集型伪歧义字段的歧义切分过程形式化为一个分类过程并给出一种歧义字段的表示方法。求解过程是一个有教师学习过程 ,从歧义... 详细信息

本文提出了基于支持向量机 (SVM)和k 近邻 (k NN)相结合的一种分类方法 ,用于解决交集型伪歧义字段。首先将交集型伪歧义字段的歧义切分过程形式化为一个分类过程并给出一种歧义字段的表示方法。求解过程是一个有教师学习过程 ,从歧义字段中挑选出一些高频伪歧义字段 ,人工将其正确切分并代入SVM训练。对于待识别歧义字段通过使用SVM和k NN相结合的分类算法即可得到切分结果。实验结果显示使用此方法可以正确处理 91 .6%的交集歧义字段 ,而且该算法具有一定的稳定性。

关键词：支持向量类代表点交集型歧义汉语自动分词歧义切分 SVM k-近邻分类方法

在线全文

学校读者我要写书评

暂无评论

一种快速的交集型歧义检测方法

计算机应用研究 2008年第11期25卷 3259-3261页

作者：刘健张维明国防科学技术大学信息系统与管理学院长沙410073

中文分词中,交集型歧义检测方法采用的双向最大匹配法与全切分方法存在着各自的弊病,无法满足大规模数据的精确处理。为此,提出了一种快速的交集型歧义检测方法,引入次长词进行检测,能高效准确地检测出中文文本中的交集型歧义。经实验验... 详细信息

中文分词中,交集型歧义检测方法采用的双向最大匹配法与全切分方法存在着各自的弊病,无法满足大规模数据的精确处理。为此,提出了一种快速的交集型歧义检测方法,引入次长词进行检测,能高效准确地检测出中文文本中的交集型歧义。经实验验证,该方法在精度与速度两方面均能满足大规模语料的处理。

关键词：中文分词交集型歧义最长交集字段

在线全文

学校读者我要写书评

暂无评论

基于混合模型的交集型歧义消歧策略

计算机工程与应用 2008年第21期44卷 5-8页

作者：李天侠戴新宇陈家骏南京大学计算机软件新技术国家重点实验室南京210093 南京大学计算机科学与技术系南京210093

针对交集型歧义这一汉语分词中的难点问题,提出了一种规则和统计相结合的交集型歧义消歧模型。首先,根据标注语料库,通过基于错误驱动的学习思想,获取交集型歧义消歧规则库,同时,利用统计工具,构建N-Gram统计语言模型;然后,采用正向/逆... 详细信息

针对交集型歧义这一汉语分词中的难点问题,提出了一种规则和统计相结合的交集型歧义消歧模型。首先,根据标注语料库,通过基于错误驱动的学习思想,获取交集型歧义消歧规则库,同时,利用统计工具,构建N-Gram统计语言模型;然后,采用正向/逆向最大匹配方法和消歧规则库探测发现交集型歧义字段;最后,通过消歧规则库和评分函数进行交集型歧义的消歧处理。这种基于混合模型的方法可以探测到更多的交集型歧义字段,并且结合了规则方法和统计方法在处理交集型歧义上的优势。实验表明,这种方法提高了交集型歧义处理的精度,为解决交集型歧义提供了一种新的思路。

关键词：交集型歧义消歧规则统计语言模型评分函数全切分

在线全文

学校读者我要写书评

暂无评论

藏文分词中交集型歧义字段的切分方法研究

西藏大学学报（社会科学版） 2010年第S1期25卷 196-197页

作者：普布旦增欧珠西藏大学工学院西藏拉萨850000

藏文自动分词是藏文信息处理中一项不可缺少的基础性工作,是藏文搜索引擎、语法信息词典建设、机器翻译、语音合成、文本自动分类、自动摘要、自动校对等等研究的基础工作。藏文自动分词中歧义消除也是关键技术,文章提出了藏文交集型歧... 详细信息

藏文自动分词是藏文信息处理中一项不可缺少的基础性工作,是藏文搜索引擎、语法信息词典建设、机器翻译、语音合成、文本自动分类、自动摘要、自动校对等等研究的基础工作。藏文自动分词中歧义消除也是关键技术,文章提出了藏文交集型歧义的切分方法即双向扫描识别和最大概率分词算法进行处理的方法。

关键词：藏文分词交集型歧义最大概率

在线全文

学校读者我要写书评

暂无评论

一种消除中文匹配中交集型歧义的方法

计算机辅助工程 2005年第2期14卷 36-38页

作者：杨芳杨振山同济大学计算机系上海200092

讨论一种消除中文匹配过程中所产生的交集型歧义的方法。该方法通过词典切分方法对中文文本进行切分,找出文本中的词语,作为理解中文的前提。对于匹配结果中出现的交集型歧义,通过计算匹配词语与其交集词语各自字符之间的互信息值来消除... 详细信息

讨论一种消除中文匹配过程中所产生的交集型歧义的方法。该方法通过词典切分方法对中文文本进行切分,找出文本中的词语,作为理解中文的前提。对于匹配结果中出现的交集型歧义,通过计算匹配词语与其交集词语各自字符之间的互信息值来消除,互信息值较大的词说明该字符组合的可能性比较大。最后给出一个实际的消除歧义的例子,说明该方法的实用性。

关键词：中文匹配交集型歧义互信息值

在线全文

学校读者我要写书评

暂无评论

基于CFRs模型的交集型歧义消解研究

电脑知识与技术 2018年第6X期14卷 263-264,268页

作者：尤慧丽江苏省淮安技师学院江苏淮安223001

中文自动分词是中文信息处理的基础,交集型歧义字段的消解又是中文自动分词中的重点。本文将CRFs模型用于交集型歧义字段的歧义消解中。该算法将交集型歧义字段的消解任务由二值分类的问题转化为序列标注的问题,这样不仅能处理任意链长... 详细信息

中文自动分词是中文信息处理的基础,交集型歧义字段的消解又是中文自动分词中的重点。本文将CRFs模型用于交集型歧义字段的歧义消解中。该算法将交集型歧义字段的消解任务由二值分类的问题转化为序列标注的问题,这样不仅能处理任意链长的交集型歧义字串,而且能够充分利用上下文环境的信息,在不同的上下文环境中对真歧义字串进行正确的切分。

关键词：中文自动分词交集型歧义 CRFs模型序列标注