文档介绍：技术的智能化搜索引擎的研究与设计基于工学硕士学位论文硕士研究生:教师:学位级别学科、专业:所在单位:论文提交日期:论文答辩日期:学位授予单位:雷斌检测技术与自动化装置自动化学院年月月哈尔滨工程大学指导王景刚高级工程师工学硕士分类号:密级:编号::
瓻瓺.:::,篗,.●
珈作者鹱:捌作者┳:稀夼哈尔滨工程大学学位论文原创性声明学位论文授权使用声明年≥片尔滨工程大学。涉密学位论文待解密后适用本声明。暌以翴辏辉拢本论文不包含任何其他个人或集体已经公开发表的作品成果。对本文的研究做出重要贡献的个人和集体,均已在文中以明确方式标明。本人完全意识到本声明的法律结果由本人承担。本人完全了解学校保护知识产权的有关规定,即研究生在校工程大学有权保留并向国家有关部门或机构送交论文的复印件。学位论文研究课题再撰写的论文一律注明作者第一署名单位为哈本论文试谑谟柩缓蠹纯解密后晒豕こ檀笱徒挥泄夭棵沤斜4妗⒒惚嗟取、本人郑重声明:本论文的所有工作,是在导作者本人独立完成的。有关观点、方法、数据和文中指出,并与参考文献相对应。除文中已注明日期:攻读学位期间论文工作的知识产权属于哈尔滨工程大学。哈尔滨本人允许哈尔滨工程大学将论文的部分或全部内容编入有关数据库进行检索,可采用影印、缩印或扫描等复制手段保存和汇编本学位论文,可以公布论文的全部内容。同时本人保证毕业后结合口在授予学位个月后导师┳:日期:口
摘要接下来又对搜索引擎中的一个重要模块——主题网络爬虫模块进行分随着目焖俜⒄梗缧畔⒘垦杆僭黾樱嗣窃嚼丛叫枰Mü搜索引擎来获取有用信息。通用搜索引擎的由于范围太广,造成搜索结果的覆盖率、准确度太低,搜索的效率也就随之降低,这对于用户的体验是不友好的,在这种情况下对于特定领域内的智能化搜索引擎的需求就越来越明显。首先本文通过分析国内外搜索引擎的历史发展、分类特点,垂直搜索引擎的特点和发展,研究搜索引擎开发的技术要点,并重点介绍了开发析,,提出了将待爬行链表进行一分为二的策略,并通过实验证明,这样的改进提高了爬虫爬取最后对搜索引擎中的索引和检索模块进行设计分析,并且在索引构造方法中提出了一种关键词加摘要索引方法,通过实验证明了这种方法既能够减本文通过研究搜索引擎的技术和框架设计方案、对比其与特定领域主题搜索引擎的区别特点,开发设计了一套具有在特定领域内进行爬取、索引和检索功能的搜索引擎。工具包的技术和应用特点。随后通过对搜索引擎的框架和技术分析,设计了整个系统的流程图和设计方案,并分析各模块的功能特点。的准确率。小索引文件的大小,也能够提高检索结果的查准率,即提高了整个搜索引擎的效率。关键词:主题爬虫;搜索引擎;自动摘要哈尔滨丁程大学硕十学位论文
鷗,琣,哈尔滨笱妒е俾畚瑃琲琤瑃琾琣籹瑃瓸琯瑆甀,..,,.琣簍;;“●‘
目录搜索引擎的分类⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯第滤阉饕婀丶际酢网页信息抓取⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯索引文件的建立⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·索引文件格式⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·信息检索模型⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·.级P汀检索机制⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·第滦髀邸搜索引擎概述⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯搜索引擎发展⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯垂直搜索引擎的研究⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯本文主要工作⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.缰┲┲牍ぷ鞴獭网页信息与处理⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·简介⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯”.⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯”.谕臣频淖远R!.诶斫獾淖远R!.谛畔⒊槿〉淖远R!.诮峁沟淖远R!本章小结⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯第绿囟煊蛑悄芑阉饕娴纳杓啤需求分析⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·哈尔滨檀笱妒Ш温畚.
.低晨7⒒⑸杓啤自动文本摘要⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯”索引文件构造及扩展配置功能⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯”检索功能及界面设计与实现⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·系统总体设计⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·.芴迳杓啤系统工作原理⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.系统软件模块功能分析⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯·本章小结⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯第轮魈馔缗莱娴纳杓朴胧迪帧主题网络爬虫的设计分析⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯“主题网络爬虫的技术要点⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯