1 / 20
文档名称:

大数据架构规划.pptx

格式:pptx   大小:689KB   页数:20页
下载后只包含 1 个 PPTX 格式的文档,没有任何的图纸或源代码,查看文件列表

如果您已付费下载过本站文档,您可以点这里二次下载

分享

预览

大数据架构规划.pptx

上传人:小点 2019/1/8 文件大小:689 KB

下载得到文件列表

大数据架构规划.pptx

文档介绍

文档介绍:大数据应用架构和演进路线目录一、产品需求理解和整体规划二、演进路线三、开发及运营能力四、产品运行能力可视化能力视图分析数据查询引擎数据服务平台指标服务管理系统指标计算服务API服务开发与封装服务管理服务运维与监控可视化产品开发管理平台开发者前台可视化产品组装管理者后台控件、组件、产品管理公共中台服务生态运营管理PC产品门户可视化APPHbaseRKHiveSQLKylinSparkSQL路由管理数据模型开发指标服务开发与封装组件控件开发SOR层模型DPA层模型统一视图应用指标库会员流量销售服务物流金融财务……产品页面开发平台能力构建数据开发、可视化产品开发诸葛决策支持鹰眼……组件实例化页面组装权限管理组件开发控件开发指标管理服务指标库模型指标审核元数据管理平台整体应用架构图数据模型层数据封装平台元数据管理平台自助分析开发管理平台诸葛前端门户产品专区主页配置产品展示前端产品展示前端高速数据查询引擎社区交流指标管理服务开发者前台开发管理服务中台组件管理服务组件市场服务产品管理服务权限管理服务管理者后台运营后台系统分类标签管理指标服务浏览组件市场管理产品市场管理SparkSQLKylin监控分析权限管理分业务模型(轻度汇总)统一视图(高度汇总)应用指标库(DM层)明细数据表(SOR层)产品运行能力开发及运营能力数据服务能力公共服务数据封装服务开发管理指标服务浏览指标服务开发标准指标服务组合指标服务服务运维管理指标计算服务日志&监控指标库模型数据模型元数据定义指标审核监控分析用户分析社区管理服务测试验证指标管理指标服务管理组件管理产品组装产品管理监控分析组件、产品性能监控服务产品页面产品页面建设优先级数据模型层数据封装平台元数据管理平台自助分析开发管理平台诸葛前端门户产品专区主页配置产品展示前端产品展示前端高速数据查询引擎社区交流指标管理服务开发者前台开发管理服务中台组件管理服务组件市场服务产品管理服务权限管理服务管理者后台运营后台系统分类标签管理指标服务浏览组件市场管理产品市场管理SparkSQLKylin监控分析权限管理分业务模型(轻度汇总)统一视图(高度汇总)应用指标库(DM层)明细数据表(SOR层)低优先级高优先级公共服务数据封装服务开发管理指标服务浏览指标服务开发标准指标服务组合指标服务服务运维管理指标计算服务日志&监控指标库模型数据模型元数据定义指标审核监控分析用户分析社区管理服务测试验证指标管理指标服务管理组件管理产品组装产品管理监控分析组件、产品性能监控服务产品页面产品页面高优先级高优先级高优先级高优先级高优先级高优先级当前数据分析产品开发模式数据开发页面产品开发产品部署和发布缺点:数据开发缺少元数据平台支撑,指标的口径管理比较孤立不同数据分析产品定制数据指标,数据指标没有服务化,无法共享;导致数据在不同产品间的一致性差异页面展示没有组件化,页面模块无法重复利用产品优化通道没有建立,缺少持续改善和提升的输入意见优点开发模式比较简单,容易掌握小规模数据分析产品开发有优势标准数据服务的开发流程数据分析产品开发流程数据分析产品开发新生态汇总模型的建设构建统一业务视图构建标准指标库构建标准指标数据服务控件:数据表达的最小元素数据组件库:基于控件开发和封装页面组装:组件的数据实例化组装产品及发布标准数据服务发布引用标准数据服务非标数据服务后端管理与运营监控与数据采集用户交流反馈需求与数据分析产品优化与改进目录一、产品需求理解和整体规划二、数据服务能力三、开发及运营能力四、产品运行能力标准指标设计标准指标ID指标名称/业务口径描述分析维度组合1分析维度组合2分析维度组合n指标的技术口径A11指标的技术口径B数据仓库轻度汇总表数据明细表指标库高度聚合表指标ID标准指标服务指标名称业务口径分析维度组合指标计算参数技术口径输入输出数据描述/指标值列表指标计算服务一、按ID、分析维度读取元数据服务二、按指标参数组合查询SQL三、调用数据计算引擎标准指标定义系统及平台定位数据模型层:(持续建设中) 经过梳理和规整的数据表,数据描述实体和属性在元数据管理平台进行清晰而准确的管理;数据存储可以落在Hive、或者DBMS中数据封装平台:(系统新建) ,基于指标技术元数据封装为标准指标服务,并在此基础上定义组合指标服务 ,响应组件调用 ,指标计算服务 ,性能监控,日志管理等元数据管理平台:(功能扩充) ,如新增、删除、修改;指标库查询服务 ,指标库新增审核高速数据查询引擎:(系统新建) 对大量数据进行多维度聚合查询的技术组件,追求高性能、高并发量、高扩展性

最近更新

跨境电子商务服务供应链风险及优化分析 3页

超滤膜截留性能检测用基准物质研究与应用进展.. 3页

超低渗透油藏注CO 2开发方式优选及室内实验研.. 3页

谢一矿51采区保护层开采卸压规律数值模拟研究.. 3页

试论防水技术在房建施工中的应用 3页

试析WDMSDH技术在光纤通信传输中的应用 3页

论比较法学研究与“一带一路”国际法治 3页

认知无线网络中一种基于博弈的自适应功率控制.. 3页

计算机制图在石油勘探开发中的应用 3页

视同销售行为在煤炭企业的应用分析 3页

西南中江构造储层改造难点及对策 3页

表演动作猜成语素材 111页

苯乙烯-马来酸酐共聚物的合成研究进展 3页

芦苇和香蒲在人工湿地城市污泥处理系统中的应.. 3页

2025年度专业门卫安全服务合同 10页

2025年度三方云计算服务居间合作协议 9页

航空发动机中压涡轮短轴焊接技术 3页

膨胀机轴承损坏事故分析与对策 3页

胶带电气保护系统改造——拉绳开关保护改造 3页

职业学校创新创业教育实践中的问题与对策 3页

翻管工艺的研究 3页

网络虚拟化技术在云计算中的应用 3页

综采工作面过大落差断层技术经验谈 3页

统计工作参与医院管理决策的探讨 4页

经济全球化背景下职业价值观理论研究述评 3页

纸浆悬浮液管内流动的湍流模型分析 3页

红茶对海螺肉去腥和保鲜作用的研究 3页

精细化理念在机电工程管理中的应用分析 3页

类矩形盾构施工对地表及桩基影响三维分析 5页

简析大跨度、超重钢桁架高空推移施工技术 3页