文档介绍：万方数据
研究生签名:溉师签名:隧日期::兰坐甪易东南大学学位论文独创性声明东南大学学位论文使用授权声明研究生签名:本人声明所呈交的学位论文是我个人在导师指导下进行的研究工作及取得的研究成果。尽我所知,除了文中特别加以标注和致谢的地方外,论文中不包含的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均其他人已经发表或撰写过的研究成果,也不包含为获得东南大学或其它教育机构已在论文中作了明确的说明并表示了谢意。东南大学、中国科学技术信息研究所、国家图书馆有权保留本人所送交学位论文的复印件和电子文档,可以采用影印、缩印或其他复制手段保存论文。本人电子文档的内容和纸质论文的内容相一致。除在保密期内的保密论文外,允许论文被查阅和借阅,可以公布ǹ论文的全部或部分内容。论文的公布括刊登谌ǘ洗笱а芯可喊炖怼
万方数据
摘要互联网的快速发展和网络用户的急剧增加使得恐痉伤僭龀ぁH绾未雍A罩臼葜型诰虺鲇杏玫男畔⒉唤龀晌A说鼻笆萃诰虻娜鹊悖乙彩前谠诙数企业面前的难题。传统基于单一节点的诰蛳低车拇娲⒑图扑隳芰υ缂翰荒苡效处理规模庞大的罩臼荨R虼瞬捎梅植际酱娲⒑图扑阋丫晌5鼻癢日志挖掘发展的必然趋势。是当前使用较为广泛的分布式存储和计算框架。分布式计算框架的高可靠性、高扩展性、高容错性等优点使其成为当前海量数据处理的利器,在多个领域中得到了大规模应用。本论文运用分布式架构和罩就诰蚣际跏迪至艘桓鐾缬没т榔魇用行为分析系统。系统通过挖掘海量罩臼菅芯坑没т榔魇褂眯形#佣网站开发者提供支持,辅助其处理浏览器兼容问题。论文的主要工作和工作成果如下:迪窒低痴寮芄股杓啤B畚拇幽壳翱翁庋芯康南质滴侍獬龇ⅲ岷螲分布式架构和恢就诰蚣际酰凑誛日志数据挖掘的流程,设计了分布式数据存储、分布式数据分析和数据展示三大功能模块。迪諻日志数据的收集和预处理。罩臼菔窍低炒矸治龅氖菰础本文主要通过页面植入代码的技术实现罩臼莸氖占蓖瓿蒞日志的预处理,确保日志中记录的完整性。迪至瞬⑿斜喑棠P偷目7ⅰB畚母菔占侠碬日志数据的特点,编写了蚏瓜低衬芫劢沟矫刻跞罩炯锹贾袖榔餍畔⒉⑶沂侗鸪鲣榔类型。瓿闪薍植际狡教ǖ拇罱āT谂渲煤糜布腿砑肪车幕∩希畚完成了肪撑渲煤团渲梦募谋嗉晒Υ罱ㄆ鹆薍植际狡教ā瓿闪讼低承阅懿馐院图扑憬峁治鲇τ谩B畚牟馐韵低炒砻縈数据所用时间和集群加速两大性能指标,并且对系统测试得到的计算结果进行了分析应用,辅助网站开发者处理浏览器兼容问题。系统性能测试结果表明论文中搭建起分布式系统能够有效处理海量志数据,能够有效研究网络用户浏览器使用行为习惯。系统计算得到的结果具有较高的应用价值,能够为网站开发者处理浏览器兼容问题提供有力支持。关键词:分布式架构;;疪籛日志挖掘
万方数据
..东南大学硕士学位论文瑃,甌甌,.琀甀甌,産..瑃·猵瓵,,.,産..¨
万方数据
,,疪,.,
万方数据
目录第一章绪论⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯第二章技术框架及罩就诰蚶砺刍第三章网络用户浏览器使用行为分析系统需求分析⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.第四章网络用户浏览器使用行为分析系统的实现⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.摘要⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..研究背景及意义⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯研究现状⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯罩就诰蜓芯俊分布式系统研究⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯浏览器兼容性问题及其解决方案研究⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.主要研究内容⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯组织结构⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯技术架构理论基础⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯整体介绍⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯分布式文件系统⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯罩就诰颉璴罩就诰蚨ㄒ濉恐就诰蛄鞒獭罩就诰虻闹饕7椒ā璴存在问题分析⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..网络用户浏览器使用行为分析系统功能概述⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯数据存储模块的实现⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯.数据分析模块的实现⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯目录⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯东南大学硕士学位论文..⋯⋯⋯⋯⋯..⋯⋯⋯⋯⋯.⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯⋯..⋯⋯⋯⋯⋯..⋯⋯⋯⋯⋯..
万方数据
第五章网络用户浏览器使用行为分析