런 캐싱으로 데이터 웨어하우스 비용 절감

아이디어는 '증분' 테이블 지원과 같이 엄격하게 제어되는 몇 가지 예외를 제외하고 동일한 입력(프로젝트 코드)이 주어졌을 때 최종 ELT 파이프라인을 가능한 한 재현할 수 있도록 하는 것입니다. Dataform 파이프라인의 코드에 대해 이런 식으로 추론할 수 있다는 것은 Dataform 프레임워크에 몇 가지 멋진 기능을 구축할 수 있는 기회를 제공합니다. 입력 데이터가 한 번의 실행과 다음 ...

eltpipelineetldataengineering