博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
浅析Staging
阅读量:4347 次
发布时间:2019-06-07

本文共 396 字,大约阅读时间需要 1 分钟。

When should data be set to disk for safekeeping during the ETL?

简述ETL过程中哪个步骤应该出于安全的考虑将数据写到磁盘上?

答:

Staging的意思就是将数据写到磁盘上。出于安全及ETL能方便重新开始,在数据准备区(Staging Area)中的每个步骤中都应该将数据写到磁盘上,即生成文本文件或者将建立关系表保存数据,而不应该以数据不落地方式直接进行ETL

例如,在数据抽取阶段,我们需要连接到源系统,为了对源系统的影响尽量小,我们需要将抽取的数据保存成文本文件或者放入数据准备区的表中,这样,当ETL过程出现错误而失败时,我们就可以从这些文本文件开始ETL,而不需要再次影响源系统。

转载于:https://www.cnblogs.com/sanpoye/archive/2012/03/14/2659621.html

你可能感兴趣的文章
linux正则表达式
查看>>
Linux基础命令:read
查看>>
linux网络基础
查看>>
Linux命令之rsync
查看>>
linux:NFS网络文件共享服务
查看>>
linux:Inotify事件监控工具
查看>>
http协议原理
查看>>
NOSQL数据库
查看>>
NoSQL数据库之redis持久化存储(一)
查看>>
NOSQL数据库之redis持久化存储(二)
查看>>
python常见异常
查看>>
python基础
查看>>
python:列表和元组
查看>>
python:字符串
查看>>
python:集合
查看>>
python字符编码与转码
查看>>
python:文件操作
查看>>
python:字典
查看>>
python:函数
查看>>
python:模块
查看>>