文档介绍：譬硕士研究生学位论文保密期限:年密级:学号:北京邮电大学硕十研究生学位论文
北京邮电大学硕士研究生学位论文
本人签名:§菌丛结日期:之:主:肿乙/仄爻,乙,气。垒ィ弧独创性虼葱滦声明关于论文使用授权的说明本人声明所呈交的论文是本人在导师指导下进行的研究工作及取得的研究成果。尽我所知,除了文中特别加以标注和致谢中所罗列的内容以外,论文中不包含其他人已经发表或撰写过的研究成果,也不包含为获得北京邮电大学或其他教育机构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明确的说明并表示了谢意。申请学位论文与资料若有不实之处,本人承担一切相关责任。学位论文作者完全了解北京邮电大学有关保留和使用学位论文的规定,即:研究生在校攻读学位期间论文工作的知识产权单位属北京邮电大学。学校有权保留并向国家有关部门或机构送交论文的复印件和磁盘,允许学位论文被查阅和借阅;学校可以公布学位论文的全部或部分内容,可以允许采用影印、缩印或其它复制手段保存、汇编学位论文。本学位论文不属于保密范围,适用本授权书。本人签名:北京邮电大学硕士研究生学位论文日期:导师签名:扩
基于主题信息服务的垂直搜索引擎的设计与实现摘要随着网络的普及,互联网应用正逐渐渗透到经济,社会,生活的各个领域,特别是搜索引擎技术的出现,促进了信息的整合。垂直搜索是针对某一个固定行业的专业搜索引擎,是搜索引擎的细分和延伸,是对网页库中的某类信息进行一次整合,即搜索领域的行业化分工。主题信息服务是指用户可以对一类信息的集合进行搜索。城市管理包括政治的、经济的、社会的和市政的管理,它贯穿于城市规划、指挥、建设、运行、安全监督和协调的全过程之中。将垂直搜索技术和主题信息服务应用到城市管理科学决策中,会有效提高效率和准确度。本文来源于和某研究中心的合作项目,主要完成了以下工作:分析了搜索引擎特别是垂直搜索引擎的发展现状,阐述了相关技术的优点和缺点,介绍了本系统的工作原理和工作流程;莩鞘泄理实际工作需求,改进了当前主题信息搜索的设计思想,并根据城市管理基本词典设计了一套主题词元数据标准,引入了主题词库和主题相关词库的概念;杓撇⑹迪至艘桓龌谕呈莺推诳畚氖据的全文搜索引擎系统,实现了词频统计,用户个性化搜索,网页去重,缓存机制等功能;攵猿鞘泄芾砉讨械暮A渴荩擞檬据挖掘的相关理论,设计了主题相关搜索算法,并将此算法应用到城市管理全文搜索引擎中,实现了面向主题的搜索服务。詈笸臣屏一段时期内系统应用的实际工作情况。城市管理全文搜索引擎已经在某研究中心投入使用,目前系统运行效果良好。关键词:主题信息服务垂直搜索城市管理决策个性化搜索主题相关搜索算法北京邮电大学硕士研究生学位论文
、~卜
;,琫瑂,’:,琣,北京邮电大学硕士研究生学位论文,,琫甐緀痵...·琲·,’,,,
北京邮电大学硕士研究生学位论文簍.;;
录目第一章绪论⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯搜索引擎简介⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯什么是搜索引擎⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯搜索引擎的发展趋势⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..垂直搜索引擎⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯垂直搜索引擎概念⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.垂直搜索引擎的现状和发展方向⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.面向主题的垂直搜索引擎⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..城市管理中的问题及垂直搜索的应用⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.本文的工作⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..第二章系统概要设计⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.系统结构⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.工作原理⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.ぷ髁鞒獭工作原理⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯...逑到峁埂网络爬虫设计⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..主题搜索设计⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..主题特征提取⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.主题信息搜集⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.数据处理流程⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.全文搜索框架⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..相关技术简介⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.相关技术优势⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..τ每蚣堋系统详细设计⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯系统选型⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯分词算法的选择⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯词频统计模块⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..文档去重模块⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..用户个性化模块⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯缓存机制⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯主题信息服务设计与实