检索结果-南通市图书馆

在线全文

学校读者我要写书评

暂无评论

web日志挖掘

东南大学学报（自然科学版） 2002年第1期32卷 15-18页

作者：宋爱波胡孔法董逸生东南大学计算机科学与工程系南京210096

提出了一种新颖的MBP算法 ,它利用关联规则挖掘发现的频繁项目集以加快速度 ,能找出所有满足阀值约束的频繁浏览路径 ,该算法是很有效的 .同时 ,针对web浏览和日志文件固有的模糊性和不确定性 ,还讨论了web页面的模糊聚类问题 .最后。

关键词： web日志数据挖掘模糊聚类推荐系统自适应web站点 MBP算法规则挖掘

油菜多组学数据库开发及基于web日志的异常检测

在线全文

学校读者我要写书评

暂无评论

油菜多组学数据库开发及基于Web日志的异常检测

作者：魏璐露华中农业大学

学位级别：硕士

油菜是我国重要的油料作物。油菜产业每年向国民提供约520万吨优质食用植物油,约占国内油料作物总产油量的50%。然而我国食用植物油产量已连续10年以上低于需求量,大量的消费缺口由国外进口来填补。据悉,2021年国内进口食用植物油超过1,... 详细信息

油菜是我国重要的油料作物。油菜产业每年向国民提供约520万吨优质食用植物油,约占国内油料作物总产油量的50%。然而我国食用植物油产量已连续10年以上低于需求量,大量的消费缺口由国外进口来填补。据悉,2021年国内进口食用植物油超过1,000万吨,对外依存度达70%。同时,国内油菜育种技术相比国外,在优质品种育成速度和成功率方面仍存有较大差距。随着“后基因组”时代的到来,油菜基础研究领域积累了海量组学资源。如何将这些多组学数据优势转化为育种优势,是当前乃至未来很长一段时间油菜遗传育种的核心研究内容之一。为了逐步实现这一目标,本研究首先搭建了油菜转录组数据库Bn TIR和油菜变异组数据库Bn VIR;在此基础上,通过系统地整合Bn TIR、Bn VIR、油菜泛基因组数据库Bn PIR以及大规模的多组学数据,构建了全面、安全稳定的油菜多组学数据库Bn IR。主要结果如下:（1）油菜转录组数据库Bn TIR的设计与实现。系统全面的基因表达信息有助于研究者快速挖掘和分析与油菜重要性状相关的目标基因及其表达特征,为基因的功能研究提供相应的基础和支撑。本研究对涵盖油菜苗期、开花期、成熟期三个阶段、全组织的273个高分辨率样本进行转录组测序,搭建油菜转录组数据库Bn TIR（网址:http://***/Bn TIR）。该数据库集合了基因表达信息查询、e FP可视化、基因共表达网络、基因组浏览器等功能模块,并提供基因ID转换、序列比对、序列提取、转录因子家族、转录因子调控网络以及热图绘制等工具,为研究者提供了一个方便快捷、功能全面的信息获取平台,有利于油菜功能基因组学和候选基因的定位研究,推动油菜遗传育种的发展。（2）油菜变异组学数据库Bn VIR的设计与实现。完整、丰富的遗传变异集合是遗传育种中准确定位到遗传位点和候选基因、分子标记辅助遗传育种以及种质资源鉴定的重要基础。本研究首先搜集了2,311份核心油菜种质的群体重测序数据,通过处理和分析获得10,091,900个遗传变异,并基于群体基因型、118份表型数据以及309份材料的基因表达数据等资源,构建油菜变异组数据库Bn VIR（网址:http://***/Bn VIR）。该数据库集合了变异信息查询、种质资源查询、群体遗传学和进化分析等功能模块,并提供在线变异注释、连锁不平衡热图绘制工具,为研究者提供了一个快速、高效地挖掘油菜候选变异/基因的平台,对今后分子标记的开发、候选基因的功能研究以及油菜育种改良具有十分重要的意义。（3）油菜多组学数据库Bn IR的设计与实现。为充分利用油菜研究领域积累的海量组学数据,助力油菜重要性状相关功能基因的挖掘与定位,本研究对Bn TIR、Bn VIR与Bn PIR进行了整合,并增添11个油菜参考基因组、100,947条种子发育20天和40天的群体表达量数据、2,791个样本的转录组数据、13,343,263条种子甲基化数据以及通过全基因组关联分析（Genome-Wide Association Studies,GWAS）、表达数量性状位点定位（Expression Quantitative Trait Loci,e QTL）产生的1,431,217条GWAS结果和121,720,300个e QTL位点等多组学资源,构建油菜多组学数据库Bn IR（网址:http://***/）。该系统后端存有64张数据表,前台包括10个主要的功能模块和87个功能子页面,允许用户通过基因名称、基因编号、基因索引和染色体位置等多种方式获取结果数据,实现了整合查询、可视化展示大量油菜组学数据的功能。研究人员借助Bn IR能快速地开展基于候选基因的油菜分子标记研究,对油菜种质资源的精准鉴定、评价、利用以及分子育种具有重要推动作用。（4）开展web异常检测,保障Bn IR稳健运行。及时地检测Bn IR接收的web异常流量,是Bn IR提供稳定、长期以及安全服务的重要保障。本研究将HTTP CISC2010公共数据集和Bn IR中1,668,668条原始web日志记录作为实验对象,训练了13个机器学习算法模型来检测Bn IR接收的web异常流量。并基于性能最佳的支持向量机、决策树和多层感知器的堆叠（stacking）集成模型搭建web异常检测系统,实现了Bn IR日志数据的存储、数据预处理、异常检测、异常存储和流量分类结果展示功能。测试结果表明,web异常检测能发挥保障Bn IR服务稳定性、数据安全性的作用,可以为数据库稳健的运行保驾护航。

关键词：甘蓝型油菜多组学数据库生物数据可视化 web日志异常检测

基于支持向量机的web日志用户标志修正算法

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

计算机集成制造系统 2011年第8期17卷 1851-1855页

作者：邹根闻立杰清华大学计算机科学与技术系北京100084 清华大学软件学院北京100084 清华大学信息系统安全教育部重点实验室北京100084 清华大学信息科学与技术国家实验室(筹) 北京100084

针对用户删除Cookie导致的web日志用户标志不准确的情况,提出了一种基于支持向量机的用户标志修正算法。首先训练一个分类器判断两个会话是否属于同一个用户,然后计算两个不同标志用户之间的相似度,最后将日志进行分组,发现所有删除Coo... 详细信息

针对用户删除Cookie导致的web日志用户标志不准确的情况,提出了一种基于支持向量机的用户标志修正算法。首先训练一个分类器判断两个会话是否属于同一个用户,然后计算两个不同标志用户之间的相似度,最后将日志进行分组,发现所有删除Cookie的用户并进行标志的修正。通过实验验证了算法的有效性。

关键词： web日志数据预处理用户识别支持向量机数据挖掘

在线全文

学校读者我要写书评

暂无评论

从web日志中挖掘用户浏览偏爱路径

计算机学报 2003年第11期26卷 1518-1523页

作者：邢东山沈钧毅宋擒豹中国科学院计算技术研究所北京100080 西安交通大学软件研究所西安710049

eb日志中包含了大量的用户浏览信息 ,如何有效地从其中挖掘出用户浏览兴趣模式是一个重要的研究课题 .作者在分析目前用户浏览模式挖掘算法存在的问题的基础上 ,利用提出的支持偏爱度的概念 ,设计了网站访问矩阵 ,并基于这个矩阵提出... 详细信息

eb日志中包含了大量的用户浏览信息 ,如何有效地从其中挖掘出用户浏览兴趣模式是一个重要的研究课题 .作者在分析目前用户浏览模式挖掘算法存在的问题的基础上 ,利用提出的支持偏爱度的概念 ,设计了网站访问矩阵 ,并基于这个矩阵提出了用户浏览偏爱路径挖掘算法 :先利用web日志建立以引用网页URL为行、浏览网页URL为列、路径访问频度为元素值的网站访问矩阵 .该矩阵为稀疏矩阵 ,将该矩阵用三元组法来进行表示 .然后 ,通过对该矩阵进行支持偏爱度计算得到偏爱子路径 .最后进行合并生成浏览偏爱路径 .实验表明该算法能准确地反映用户浏览兴趣 ,而且系统可扩展性较好 .这可以应用于电子商务网站的站点优化和个性化服务等 .

关键词： Internet 拓扑结构 web日志数据挖掘网页浏览频度用户浏览偏爱路径电子商务

在线全文

学校读者我要写书评

暂无评论

基于用户兴趣的web日志挖掘算法

计算机集成制造系统 2009年第11期15卷 2209-2215页

作者：刘慧君朱庆生张程周明强重庆大学计算机学院重庆400044

为有效地从web日志中挖掘出用户访问模式,在分析用户访问行为的基础上,充分考虑用户在路径选择及在页面浏览中表现出的兴趣,提出了路径选择兴趣度以及页面浏览兴趣度的概念。设计了路径选择兴趣矩阵和页面浏览兴趣矩阵,并基于两个矩阵,... 详细信息

为有效地从web日志中挖掘出用户访问模式,在分析用户访问行为的基础上,充分考虑用户在路径选择及在页面浏览中表现出的兴趣,提出了路径选择兴趣度以及页面浏览兴趣度的概念。设计了路径选择兴趣矩阵和页面浏览兴趣矩阵,并基于两个矩阵,设计了浏览兴趣路径挖掘算法。该算法先通过对两个矩阵进行路径兴趣度计算得到所有的浏览兴趣子路径,然后进行子路径合并生成浏览兴趣路径。实验表明了该算法的有效性。

关键词： web日志浏览兴趣路径兴趣度挖掘算法电子商务

在线全文

学校读者我要写书评

暂无评论

基于web日志挖掘的网站结构优化方法

计算机工程 2003年第12期29卷 82-84页

作者：鲍钰黄国兴张召华东师范大学计算机科学系上海200062

通过对web日志信息的分析挖掘，以及辅助适量编程和两个算法：GTPFWLP(Get True Path From web Log Path )和CBP(Confirm Backtrack Point)，实现了回溯点和目标页的确定，并最终实现了网站物理结构的调整和再组织。

关键词： web日志 GTPFWLP CBP 支持度

在线全文

学校读者我要写书评

暂无评论

web日志挖掘中的会话识别方法

计算机工程与设计 2010年第5期31卷 936-938,964页

作者：周爱武程博李孙长夏松安徽大学计算机科学与技术学院安徽合肥230039

为更好地实现会话识别,从而为后续模式发现提供准确的挖掘数据,在分析现有常用的会话识别方法后,提出一种基于待挖掘站点首页的用户会话识别方法。该方法根据用户浏览站点的习惯,以站点首页作为用户新会话开始标识,并增强了用户会话的... 详细信息

为更好地实现会话识别,从而为后续模式发现提供准确的挖掘数据,在分析现有常用的会话识别方法后,提出一种基于待挖掘站点首页的用户会话识别方法。该方法根据用户浏览站点的习惯,以站点首页作为用户新会话开始标识,并增强了用户会话的定义。最后利用数据库编程实现该方法,将识别出的会话存储在数据库中,便于后续数据挖掘使用。实验结果表明,该方法能识别出更多的用户会话,且识别会话的准确率也更高。

关键词：数据预处理 web日志会话识别站点首页数据库

在线全文

学校读者我要写书评

暂无评论

web日志挖掘中3GWAP子网的获取研究

计算机工程与应用 2009年第18期45卷 132-134,197页

作者：鲍钰华东师范大学软件学院上海200062

随着3G时代的到来,手机上网已逐步普及,由于手机屏幕较小及上网带宽限制,需要为手机访问者提供只需保留原web站点主干分支的WAP子网。WWW上用户的访问路径信息会被记录在web服务器的日志记录中,分析这些日志并挖掘出用户的主要行为模式... 详细信息

随着3G时代的到来,手机上网已逐步普及,由于手机屏幕较小及上网带宽限制,需要为手机访问者提供只需保留原web站点主干分支的WAP子网。WWW上用户的访问路径信息会被记录在web服务器的日志记录中,分析这些日志并挖掘出用户的主要行为模式,可以提取出web网站被频繁访问的主干部分。首先将原始日志序列转化成用户访问路径会话集UVPSD,然后通过约束的加权网站结构图WWSSG,最终实现了此web站点的频繁主干子网的发现。在上海社区网上采用此算法提取出的3GWAP子网,实验数据表明,该子网覆盖了上海社区网的大部分热门栏目页面。

关键词： web日志用户访问路径会话集发现算法加权网站结构图生成算法 3G无线应用协议

在线全文

学校读者我要写书评

暂无评论

web日志文件的异常数据挖掘算法及其应用

计算机工程 2003年第17期29卷 195-196,F003页

作者：赵泽茂何坤金陈鹏景雪琴蒋霞东河海大学常州校区计算机及信息工程学院常州213022

从数量化角度给出了异常数据的一般性定义，以web服务器日志文件数据为依据，讨论了挖掘异常数据的方法和途径；给出了基于距离的单指标的离散统计法和综合统计法，并结合校园网作了实际的分析处理。结果表明，该方法是可行的。

关键词：异常数据数据挖掘 web日志上网行为模式