检索结果-南通市图书馆

中文信息学报 2021年第9期35卷 75-81页

作者：郝永彬周兰江刘畅昆明理工大学信息工程与自动化学院云南昆明650504 西南交通大学信息科学与技术学院四川成都611756

老挝语是一种无空格切分的字母语言,在进行自然语言处理工作时需要首先进行分词处理。现有分词算法主要为首先使用规则进行音节切分,然后根据音节切分结果进行老挝语分词,存在错误传递等问题。该文提出一种基于神经网络的端到端老挝语... 详细信息

老挝语是一种无空格切分的字母语言,在进行自然语言处理工作时需要首先进行分词处理。现有分词算法主要为首先使用规则进行音节切分,然后根据音节切分结果进行老挝语分词,存在错误传递等问题。该文提出一种基于神经网络的端到端老挝语分词方法,基于多任务联合学习思想,将老挝语音节切分与分词工作进行结合,实现了基于双向长短时记忆循环神经网络(BiLSTM)的端到端老挝语分词模型。实验表明,端到端的老挝语分词模型准确率达到89.02%,较以往分词模型有所提升。

关键词：老挝语分词音节切分多任务学习端到端模型

来源：

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

基于双向长短期记忆神经网络的老挝语分词方法

引用

计算机工程与科学 2019年第7期41卷 1312-1317页

作者：何力周兰江周枫郭剑毅昆明理工大学信息工程与自动化学院

作为语言最小独立运行且有意义的单位,将连续型的老挝语划分成词是非常有必要的。提出一种基于双向长短期记忆BLSTM神经网络模型的老挝语分词方法,使用包含913 487个词的人工分词语料来训练模型,将老挝语分词任务转化为基于音节的序列... 详细信息

作为语言最小独立运行且有意义的单位,将连续型的老挝语划分成词是非常有必要的。提出一种基于双向长短期记忆BLSTM神经网络模型的老挝语分词方法,使用包含913 487个词的人工分词语料来训练模型,将老挝语分词任务转化为基于音节的序列标注任务,即将老挝语音节标注为词首(B)、词中(M)、词尾(E)和单独成词(S)4个标签。首先将老挝语句子划分成音节并训练成向量,然后把这些向量作为BLSTM神经网络模型的输入来预估该音节所属标签,再使用序列推断算法确定其标签,最后使用人工标注的分词语料进行实验。实验表明,基于双向长短期记忆神经网络的老挝语分词方法在准确率上达到了87.48%,效果明显好于以往的分词方法。

关键词：神经网络音节双向长短期记忆老挝语分词

来源：

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

汉老双语句子相似度计算方法研究

汉老双语句子相似度计算方法研究

引用

作者：何力昆明理工大学

学位级别：硕士

大规模的汉语和老挝语平行句对语料库是实现汉老双语机器翻译必不可少的资源,汉老双语句子的相似度计算无疑是构建平行语料库最基础、最重要的途径。受老挝语现有资源少、分词准确率低等因素影响,目前仍无很好的方法将汉老双语句子联系... 详细信息

大规模的汉语和老挝语平行句对语料库是实现汉老双语机器翻译必不可少的资源,汉老双语句子的相似度计算无疑是构建平行语料库最基础、最重要的途径。受老挝语现有资源少、分词准确率低等因素影响,目前仍无很好的方法将汉老双语句子联系起来并计算其相似度,针对这一问题,本文进行了以下方面的研究工作。第一,老挝语分词方法。本文受中文四词位标注分词方法的启发,根据老挝语词语由音节构成的语言特点,使用人工分词语料进行基于音节的四词位标注(BMES),并预训练双向长短期记忆BLSTM(Bidirectional Long Short-Term Memory)神经网络模型。首先将老挝语句子划分成音节并训练成向量,然后把这些向量作为BLSTM神经网络模型的输入预估该音节所属标签,再使用序列推断算法确定其标签,最后实验证明本方法的老挝语分词效果好于以往的分词方法。第二,计算汉老双语句子相似度。受跨语言分布表示学习的启发,本文使用汉老双语对齐句向量预训练深度典型关联分析DeepCCA(Deep Canonical Correlation Analysis)模型联系双语句子并计算其相似度。首先分别向量化表示双语句子,然后使用预训练的DeepCCA模型,将双语句向量映射到新的空间内,最后在新空间内利用映射后句向量的余弦距离来计算汉老双语句子相似度。实验证明本方法能有效计算汉老双语句子相似度。第三,进一步提升计算汉老双语句子相似度的准确率。为进一步提升相似度计算的准确率,本文在深度典型关联分析方法的基础上,抽取汉老双语之间的句长、数字匹配及其句向量之间线性与非线性的相似度特征,使用融合多特征的方法进一步计算汉老双语句子相似度。首先根据对齐语料,抽取汉老双语文本的数字匹配、句子长度、DeepCCA与线性CCA相似度四个特征,然后通过对不同特征进行加权来使计算结果达到最好。实验结果显示,本方法能够更好地计算汉老双语句子之间的相似度。

关键词：汉语和老挝语句子相似度计算老挝语分词深度典型关联分析多特征

来源：

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

欢迎您,

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

在线全文

在线全文

请选择保存的检索档案：

请选择收藏分类：

通借通还

欢迎您,

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

在线全文

在线全文

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：