加入收藏 | 设为首页 | 会员中心 | 我要投稿 核心网 (https://www.hxwgxz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

浅谈ODS与DW的区别-数据项目实战总结

发布时间:2021-01-11 06:03:20 所属栏目:大数据 来源:网络整理
导读:浅谈ODS与DW的区别-数据项目实战总结 ? ODS 全称operation data store 或者 operational data store,中文意思是操作型数据存储( 数据被操作产生的,例如电商交易数据 ( 客户买东西订单 )? 行业订单 工单数据(客户投诉数据) ),或者有的地方也叫运营数

?
数据仓库,是在数据库已经大量存在的情况下,为了进一步挖掘数据资源、为了决策需要而产生的,它并不是所谓的“大型数据库”。数据仓库的方案建设的目的,是为前端查询和分析作为基础,由于有较大的冗余,所以需要的存储也较大。为了更好地为前端应用服务,数据仓库往往有如下几点特点:
?
1.效率足够高。数据仓库的分析数据一般分为日、周、月、季、年等,可以看出,日为周期的数据要求的效率最高,要求24小时甚至12小时内,客户能看到昨天的数据分析。由于有的企业每日的数据量很大,设计不好的数据仓库经常会出问题,延迟1-3日才能给出数据,显然不行的。

2.数据质量。数据仓库所提供的各种信息,肯定要准确的数据,但由于数据仓库流程通常分为多个步骤,包括数据清洗,装载,查询,展现等等,复杂的架构会更多层次,那么由于数据源有脏数据或者代码不严谨,都可以导致数据失真,客户看到错误的信息就可能导致分析出错误的决策,造成损失,而不是效益。
?
3.扩展性。之所以有的大型数据仓库系统架构设计复杂,是因为考虑到了未来3-5年的扩展性,这样的话,未来不用太快花钱去重建数据仓库系统,就能很稳定运行。主要体现在数据建模的合理性,数据仓库方案中多出一些中间层,使海量数据流有足够的缓冲,不至于数据量大很多,就运行不起来了。
?
数据仓库和ods的区别 还有一点是 ods基本只做数据层面的基础分析,而数据仓库会有涉及到业务模型的 需要依靠数据挖掘,比如某省移动之前在经分系统做的4g潜在用户模型、快递员模型 等。通过数据挖掘技术和业务分析 从全省用户找出 特定的用户群 以便做精准和针对性的营销。

(编辑:核心网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读