基于动态权重的多模型集成水产动物疾病防治事件抽取方法
Multi-model integrated event extraction for aquatic animal disease prevention and control based on dynamic weight作者机构:大连海洋大学信息工程学院/辽宁省海洋信息技术重点实验室大连116023 设施渔业教育部重点实验室(大连海洋大学)大连116023
出 版 物:《华中农业大学学报》 (Journal of Huazhong Agricultural University)
年 卷 期:2023年第42卷第3期
页 面:80-87页
核心收录:
学科分类:08[工学] 080203[工学-机械设计及理论] 0802[工学-机械工程]
基 金:设施渔业教育部重点实验室开放课题(2021MOEKLECA-KF-05) 计算机体系结构国家重点实验室开放课题(CARCH201921) 辽宁省教育厅高等学校基本科研项目面上项目(20220056) 辽宁省教育科学“十四五”规划课题(JG21DB076)
主 题:水产动物疾病 事件抽取 ERNIE MacBERT 动态权重 健康养殖
摘 要:为提高水产动物疾病防治事件抽取的准确性,有效解决抽取过程中出现的专有名词边界模糊和事件实体过长等问题,本研究将动态权重思想引入多模型集成的事件抽取方法中。改进后的方法利用百度自然语言理解开放平台(enhanced representation through knowledge integration,ERNIE)和澎湃BERT(MLM as correction BERT,MacBERT)2个预训练模型来学习文本语义信息;采用动态权重的gate模块融合特征;将学习到的语义信息传入双向长短时记忆网络(bi-directional long shortterm memory,BiLSTM)中,并通过条件随机场(conditional random field,CRF)对输出标签序列进行约束。选取ERNIE⊕MacBERT-CRF模型和ERNIE⊕MacBERT-BiLSTM-CRF模型(⊕代表简单相加求平均的融合方法)作为对照模型对提出的方法进行融合性能对比试验验证,结果显示,该方法 F1值达74.15%,比经典模型BiLSTM-CRF提高了20.02个百分点。结果表明,该方法用于水产动物疾病防治事件抽取具有更好的效果。