码迷,mamicode.com
首页 >  
搜索关键字:ETL    ( 2204个结果
DW,DM,ODS的区别
数据仓库的重要应用是将不同来源的数据和异构数据通过ETL整合在一起,为决策分析提供支撑,若在同一个数据库中分不同用户,此意义不大;假设所有有用户都在一个数据库里,如果因为某个原因数据库重启,那么会影响所有的应用,这违背了SOA设计理念中低耦合的思路,当然建在不同的库也是不好的,比如我们要有下钻操.....
分类:其他好文   时间:2015-12-07 10:22:13    阅读次数:362
hive ETL之广告行业sql
--case2-- --==========click_log==========-- /* 11ad_1012014-05-0106:01:12.334+01 22ad_1022014-05-0107:28:12.342+01 33ad_1032014-05-0107:50:12.33+01 11ad_1042014-05-0109:27:12.33+01 22ad_1032014-05-0109:03:12.324+01 33ad_1022014-05-0219:10:12.343+01 11ad_10..
分类:数据库   时间:2015-11-27 20:07:29    阅读次数:281
hive ETL之订单物流系统sql
--case1-- --==========order_created==========-- /* 107030072674882014-05-0106:01:12.334+01 101010435050962014-05-0107:28:12.342+01 101030435097472014-05-0107:50:12.33+01 101030435015752014-05-0109:27:12.33+01 101040435140612014-05-0109:03:12.324+01 */ CREA..
分类:数据库   时间:2015-11-27 20:05:21    阅读次数:388
使用 Hive 作为 ETL 或 ELT 工具
用来处理数据的 ETL 和 ELT 工具的概述数据集成和数据管理技术已存在很长一段时间。提取、转换和加载(ETL)数据的工具已经改变了传统的数据库和数据仓库。现在,内存中转换 ETL 工具使得提取、加载、转换(ELT)和 ETL 变得更快。对于大数据来说,是否能够使用内置的 Hadoop 工具而不是...
分类:其他好文   时间:2015-11-27 17:36:23    阅读次数:194
ETL工具与脚本实现之间的对比
scripts, custom code and individual vs. team development doesn’t scaleAnd:?Lack of coding standards ?High cost of maintaining custom code over time...
分类:其他好文   时间:2015-11-27 12:39:28    阅读次数:141
SSIS简介
SSIS是Microsoft SQL Server Integration Services的简称,是生成高性能数据集成解决方案(包括数据仓库的提取、转换和加载 (ETL) 包)的平台。构成:Integration Services 包括用于生成和调试包的图形工具和向导;用于执行工作流函数(如 FT...
分类:其他好文   时间:2015-11-21 00:36:35    阅读次数:234
ETL
小弟初学ETL,给自己一个备忘录。 1.ETL启动路径中存在中文,则每次启动会提示以下信息。 Unexpected error reading repository definitions Error reading information from file: Invalid byte...
分类:其他好文   时间:2015-11-18 19:41:47    阅读次数:191
FrameWork逆向工程之MotioPI
在BI项目建设的过程中我们一般都是有备份的,而且这个是必须有的!特别是例如ETL Model,还有Data Model这一类的元数据,这些东西如果我们没有备份,而恰好的我们的开发模型又在某一天离我们而去,这个时候我们就捉急了,今天我们就说一下Framework的逆向工程,如何利用Cognos发布的数...
分类:其他好文   时间:2015-11-13 18:30:15    阅读次数:457
客户视角:Oracle ETL工具ODI
客户视角:Oracle ETL工具ODI 数据集成已成为企业在追求市场份额中的关键技术组件,与依靠手工编码的方式不同,越来越多的企业选择完整的数据集成解决方案来支持其IT战略,从大数据分析到云平台的集成。Dao Research最近进行的一项研究,比较全球领先的几个数据集成解决方案之间的差异,及这些...
分类:数据库   时间:2015-11-12 00:00:43    阅读次数:517
大数据架构之:Storm
Storm是一个免费开源、分布式、高容错的实时计算系统,Twitter开发贡献给社区的。Storm令持续不断的流计算变得容易,弥补了Hadoop批处理所不能满足的实时要求。 Storm经常用于在实时分析、在线机器学习、持续计算、分布式远程调用和ETL等领域。特点1、Storm这是一个分布式的、容错....
分类:其他好文   时间:2015-11-09 20:41:35    阅读次数:225
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!