检索结果-南通市图书馆

基于英汉平行语料的way构式汉语再词汇化模式研究

在线全文

学校读者我要写书评

暂无评论

外语教学与研究 2015年第1期47卷 42-54,159-160页

作者：于翠红山东工商学院山东省烟台市264005

英语way构式结构相对固定、动词使用灵活多样且编码程度较高,为汉语再词汇化带来很大挑战。本文基于英汉双语平行语料,对way构式的汉语表达式进行归纳和分析,发现汉语再词汇化需要在事件元素及其潜在语义进行识别和拆解的基础上,结合汉... 详细信息

英语way构式结构相对固定、动词使用灵活多样且编码程度较高,为汉语再词汇化带来很大挑战。本文基于英汉双语平行语料,对way构式的汉语表达式进行归纳和分析,发现汉语再词汇化需要在事件元素及其潜在语义进行识别和拆解的基础上,结合汉语句法结构和语言使用倾向进行还原和重构。主要遵循三种模式:1)汉语固有动词或短语表达式;2)"显明方式、手段附属语+动词"组合表达式;3)连动表达式。该结果对于揭示way构式跨语言识解和事件成分融入汉语的可能途径提供了有益研究思路,对于探讨英汉动态事件的认知路径、不同词汇化取向及类型学特征也具有重要启发。

关键词： way构式再词汇化动态事件平行语料

在线全文

学校读者我要写书评

暂无评论

基于平行语料和翻译概率的多语种词对齐方法

中文信息学报 2019年第12期33卷 37-44页

作者：杨飞扬赵亚慧崔荣一易志伟延边大学计算机科学与技术学院智能信息处理研究室

为了实现多语种词对齐,该文提出一种以点互信息为基础的翻译概率作为改进的多语种单词关联强度度量方法。首先,论证了在服从Zipf定律的普通频级词区域,单词间关联强度的点互信息度量法可简化为翻译概率;其次,对汉语、英语、朝鲜语平行... 详细信息

为了实现多语种词对齐,该文提出一种以点互信息为基础的翻译概率作为改进的多语种单词关联强度度量方法。首先,论证了在服从Zipf定律的普通频级词区域,单词间关联强度的点互信息度量法可简化为翻译概率;其次,对汉语、英语、朝鲜语平行语料进行句子对齐、分词和去停用词等预处理后计算平行语料单词之间的翻译概率,取翻译概率最高的前k个词作为候选翻译词,并通过优化处理提高了词对齐准确率。实验结果表明,该方法可以不完全依赖语料规模,在小规模语料中取得94%以上的准确率,为跨语言小众文献及低资源语言词对齐提供了技术基础。

关键词：词对齐平行语料翻译概率 Zipf定律

在线全文

学校读者我要写书评

暂无评论

从互联网上自动获取领域平行语料

现代图书情报技术 2014年第12期 36-43页

作者：邵健章成志南京理工大学经济管理学院南京210094

【目的】对获取的双语语料进行分类,对分类后的双语语料进行句子对齐处理,生成领域平行语料。【方法】利用基于SVM算法的文本分类器对获取的中英双语语料进行分类。使用长度法和词汇法相结合的句子对齐工具对分类后的语料进行句子对齐工... 详细信息

【目的】对获取的双语语料进行分类,对分类后的双语语料进行句子对齐处理,生成领域平行语料。【方法】利用基于SVM算法的文本分类器对获取的中英双语语料进行分类。使用长度法和词汇法相结合的句子对齐工具对分类后的语料进行句子对齐工作,为提高句子对齐的正确率,利用人工对齐的中英平行语料计算中英文句子长度参数,结合中英双语词典,获取高质量的专业领域平行语料。【结果】使用该方法,对每个领域语料进行句子对齐后,取得95.45%的句子对齐正确率。计算得到的句子平均长度比为1.7777,方差为1.2640。【局限】由于双语语料的初始对齐程度比较好,因此句子对齐正确率可能不具有普遍代表性。【结论】从实验结果看,该方法是有效的,能够获取质量令人满意的领域平行语料。

关键词：句子对齐文本分类平行语料机器翻译

在线全文

学校读者我要写书评

暂无评论

汉语-印尼语平行语料自动对齐方法研究

广西师范大学学报（自然科学版） 2019年第1期37卷 89-97页

作者：郑铿涛林楠铠付颖雯王连喜蒋盛益广东外语外贸大学信息科学与技术学院广东广州510420 广州市非通用语种智能处理重点实验室(广东外语外贸大学) 广东广州510420

双语平行语料库是多语种自然语言处理的重要资源,已被广泛地应用于机器翻译、机助人译、翻译知识抽取与跨语言信息检索等领域中。本文针对汉语-印尼语平行语料的自动对齐与可比语料的自动提取问题,提出了基于锚点和词典相结合的段落对... 详细信息

双语平行语料库是多语种自然语言处理的重要资源,已被广泛地应用于机器翻译、机助人译、翻译知识抽取与跨语言信息检索等领域中。本文针对汉语-印尼语平行语料的自动对齐与可比语料的自动提取问题,提出了基于锚点和词典相结合的段落对齐方法,并在此基础上采用基于置信区间的长度模型实现句子对齐,同时,为了快速提高汉语-印尼语平行语料库的构建效率,还提出了基于跨语言文档相似度的可比语料提取方法。实验结果表明,本文提出的平行语料对齐方法和可比语料提取方法的准确率较传统方法有显著的提高,说明本文提出方法是有效的、可行的。

关键词：平行语料语料库构建可比语料段落对齐句对齐

在线全文

学校读者我要写书评

暂无评论

英汉平行语料中双语兼类词消歧研究

山东大学学报（工学版） 2011年第6期41卷 18-23,30页

作者：冯敏萱曲维光南京师范大学文学院江苏南京210046 南京师范大学计算机科学与技术学院江苏南京210046 江苏省信息安全保密技术研究中心江苏南京210097

对于一部分目前统计处理消歧效果较差、但出现频率又很高的兼类词,手工编写针对性极强的消歧规则。在未经词汇对齐的平行语料中,实现了基于个性规则的词性消歧方法。本研究为5个典型兼类词(过去、计划、与、back、so)设计的平行消歧算法... 详细信息

对于一部分目前统计处理消歧效果较差、但出现频率又很高的兼类词,手工编写针对性极强的消歧规则。在未经词汇对齐的平行语料中,实现了基于个性规则的词性消歧方法。本研究为5个典型兼类词(过去、计划、与、back、so)设计的平行消歧算法,在大规模平行语料中得到了验证,平均F值达到了98.45%。研究结果表明该规则具有不受上下文长度和模板数量限制、特别适合于双语平行处理、消歧效果好等优点。

关键词：平行语料词性消歧兼类词自动识别中文信息处理

双语平行语料库在翻译实践中的应用 ——以联合国新闻部《联合国概况》英译汉图书项目为例

在线全文

学校读者我要写书评

暂无评论

双语平行语料库在翻译实践中的应用 ——以联合国新闻部《联合国...

作者：林殷颖上海外国语大学

学位级别：硕士

语料库储存着大量真实的语言资源。学界普遍认为把语料库应用于翻译现象研究始于英国学者莫娜·贝克(Mona Baker)。随着计算机技术的快速发展,语料库研究也取得了显著的成绩,国内外建立了不同语种组合的语料库。但是,截至目前,对于语料... 详细信息

语料库储存着大量真实的语言资源。学界普遍认为把语料库应用于翻译现象研究始于英国学者莫娜·贝克(Mona Baker)。随着计算机技术的快速发展,语料库研究也取得了显著的成绩,国内外建立了不同语种组合的语料库。但是,截至目前,对于语料库的研究主要集中在大型语料库,对于各专业领域小型语料库的研究相对来说较为滞后。本文以上海外国语大学高级翻译学院DPI团队承接的联合国新闻部《联合国概况》英译汉图书项目为案例,探讨双语平行语料库在翻译实践中的应用。本文介绍了笔者在《联合国概况》项目过程中语料的使用情况,论述了双语语料能够帮助译者补充背景知识、分析文本特征和制定翻译策略,有助于译者参考词语搭配、句式结构。但是,利用语料也存在一些风险,如语料存在翻译错误、信息过时等问题。在此基础上,笔者提出DPI团队建立小型语料库的流程和策略,为团队自建小型语料库提供参考。

关键词：联合国翻译双语语料平行语料语料库

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于跨语言句向量的平行语料挖掘系统

基于跨语言句向量的平行语料挖掘系统

作者：桑佳俊华中科技大学

学位级别：硕士

随着近几年深度学习的不断发展,神经网络给机器翻译带来了巨大的提升。而机器翻译所需平行语料的质量越高、分布越广,神经网络就能学习到越多的翻译知识,机器翻译的效果也越好。虽然一些机构或组织致力于提供优质的平行语料,但是在小语... 详细信息

随着近几年深度学习的不断发展,神经网络给机器翻译带来了巨大的提升。而机器翻译所需平行语料的质量越高、分布越广,神经网络就能学习到越多的翻译知识,机器翻译的效果也越好。虽然一些机构或组织致力于提供优质的平行语料,但是在小语种上的平行语料依旧非常匮乏。如何获取更多的平行语料一直都是热门话题。好在互联网拥有海量的数据,很多网站都有多语言版本,其不同语言版本的网页内容一一对应且互译,这些互译的文本可以被挖掘出来作为平行语料使用。平行语料挖掘系统旨在探索如何从互联网资源中挖掘平行语料,开发了平行语料挖掘系统。具体来说,主要工作分为三个方面:首先,提取URL链接中语种标识的特征,从海量URL集合中筛选出具有多语言版本的网页;其次,使用爬虫抓取平行网页中的所有文本信息,并进行细致的清洗工作;最后,基于跨语言句向量对网页文本进行句子对齐,得到最终的平行语料。为了解决以往平行语料挖掘方法只支持个别语种的不足,提出的基于跨语言句向量对齐法能够同时挖掘多个语种的平行语料,并且扩展至更多语种也非常方便,具有普适性。系统以common crawl数据集作为挖掘对象,在16个语种上获得了近1000万条高质量的平行语料。挖掘到的平行语料在机器翻译模型上的表现与开源的OPUS平行语料效果相近,作为数据增量能够提升机器翻译效果。

关键词：平行语料机器翻译句对齐跨语言句向量

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于平行语料库的双语术语抽取

基于平行语料库的双语术语抽取

作者：何福江北京理工大学

学位级别：硕士

双语术语抽取是自然语言处理领域的一个重要课题,它被广泛地应用在机器翻译、信息抽取、双语信息检索、辅助机器翻译等方面。本文采用了基于平行语料库的双语术语抽取方法,该方法在单语术语抽取的基础上,从平行语料中统计出共现矩阵,再... 详细信息

双语术语抽取是自然语言处理领域的一个重要课题,它被广泛地应用在机器翻译、信息抽取、双语信息检索、辅助机器翻译等方面。本文采用了基于平行语料库的双语术语抽取方法,该方法在单语术语抽取的基础上,从平行语料中统计出共现矩阵,再用相似度函数的方法生成对齐词典,最后抽取出互为翻译的术语对。论文主要工作包括:详细分析了基于平行语料库的双语术语抽取技术,介绍了目前常用的词对齐方法,并将单语抽取的候选术语看作是一个词,然后对语料进行编码,从而把短语对齐转化成了词对齐;详细介绍了四种相似度函数:Dice系数、χ2检验、对数释然比、互信息以及它们的优缺点。统计出平行语料中不同词和术语的共现矩阵,然后用相似度函数的方法计算相关度,生成对齐词典。同时分析此方法的不足,结合多种方法对此进行改善:(1)为减小单语抽取的不平衡,提出使用基于相同原理和方法的单语术语抽取工具;(2)针对中文多词术语到英文单词术语对齐准确率不高的情况,提出用HMM模型优化词对齐,提高了词对齐的准确度,进而提高了双语术语抽取的准确率。基于上述方法,开发了一个双语术语抽取系统,并做了三方面的实验:不同相似度函数对术语抽取正确率的影响、不同语料规模对术语抽取结果的影响、改进之后的方法对术语抽取结果的影响。实验发现:针对本文使用的语料,χ2检验是效果最好的相似度函数;随着语料规模的增大,双语术语抽取的准确率最开始快速提高,最后逐渐趋于稳定;使用HMM模型优化词对齐后,双语术语抽取的准确率提高了2.5%。本文开发的双语术语抽取系统,已经作为商品化软件,在华建IAT辅助翻译系统中投入实际应用。

关键词：平行语料词对齐共现矩阵相似度函数双语术语抽取

基于平行语料的三种语言语篇反指对比研究 ——以《骆驼祥子》汉语原著及其英、西译本为例

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于平行语料的三种语言语篇反指对比研究 ——以《骆驼祥子》汉...

作者：焦梦园西安外国语大学

学位级别：硕士

指称现象是语言学、心理学和计算机科学等学科研究的热点问题之一。其中反指的现象前人关注并不多,针对几种语言对比的相关研究更为少见。不同语言的反指现象有同有异,是考察语言普遍性和汉语特色的重要议题之一。本文基于《骆驼祥子》... 详细信息

指称现象是语言学、心理学和计算机科学等学科研究的热点问题之一。其中反指的现象前人关注并不多,针对几种语言对比的相关研究更为少见。不同语言的反指现象有同有异,是考察语言普遍性和汉语特色的重要议题之一。本文基于《骆驼祥子》的汉语原著和英语、西班牙语的译著,进行平行语料的对比分析,旨在揭示汉语反指现象的特色,并对比不同语言反指的异同。基于平行语料的对比,语义几乎一致,更能说明不同语言词法、句法和语篇特色,有助于我们观察反指现象的跨语言异同。通过对比分析上述平行语料本文的主要发现如下:(一)在三种语言中,在汉语原著使用反指的294例中,英语用反指的有33例,占比11.22%;西语用反指的有42例,占比33.33%;汉语原著不用反指的情况下,英语用反指的有107例,西语用反指的有235例。汉语共有294例,英语共有140例,西语共有277例,总计711例。(二)汉、英、西三种语言反指现象有同有异,相同点是:1.三种语言均在句首使用零形式反指下文中的显性主语;2.三种语言中部分零形主语小句的词汇形式相同,相同的部分为动词、介词和连词;3.三种语言中部分显性主语小句的词汇形式相同,出现频率最高的均为第三人称代词“他”。不同点是:1.汉语使用反指,而英语译文不用反指占比88.78%,有两种主要类型:主谓一致性的影响和主语替换。西语译文不用反指的情况占比66.67%,有四种类型:主语替换、动词缺失、主谓一致性的影响和变换语气。2.汉语原文不用反指,外语译文用反指。分析了英语中的107条语料和西语中的235条语料得出以下结论:第一,英语中最常见的形式是零形式反指下文中的第三人称代词;第二,在不同语言的对译间,中西对译相较于中英对译小句省略情况较多,因此中西对译较中英对译而言,句中主语省略情况较多;第三,在不同语言对译中,主语替换的频率高于主语省略。(三)总结影响三种语言反指的共同因素为:1.背景化表达的需要;2.语篇衔接功能的需要;3.句中不同表义成分的需要;4.语篇主题的影响。影响三种语言反指的差异因素为:1.词法的影响;2.句法的影响。

关键词：反指平行语料汉英对比汉西对比