안녕하세요. 엔지엠소프트웨어입니다. 회사 업무에서는 주로 하나의 데이타베이스만 사용하고 있을겁니다. 하지만, 다양한 환경에서 자동화를 제공해야 하는 RPA 매크로 프로그램의 경우 ETL을 하기 위해서라도 이기종 데이타베이스가 모두 추가되어 있어야 합니다. 관계형 데이타베이스는 대부분 사용할 수 있지만, 메모리 디비나 시계열 디비는 사용할 수 없습니다. 추후에 추가할 수 있는지 검토를 해봐야 겠지만, 현재로써는 커스텀 액션을 만들어서 ETL을 처리해야 합니다.

ETL이란?

ETL은 추출(Extract), 변환(Transform), 로드(Load)를 나타내며 조직에서 여러 시스템의 데이터를 단일 데이터베이스, 데이터 저장소, 데이터 웨어하우스 또는 데이터 레이크에 결합하기 위해 일반적으로 허용되는 방법입니다. ETL을 사용하면 기존 데이터를 저장하거나 집계(현재 더 일반적인 방식)하여 분석하고 이를 비즈니스 결정에 활용할 수 있습니다.  

조직에서는 수십 년간 ETL을 사용해왔습니다. 하지만 새로운 것은 현재 데이터 소스와 대상 데이터베이스가 모두 클라우드로 전환되고 있다는 것입니다. 또한, 지금은 스트리밍 ETL 파이프라인도 등장하고 있습니다. 이 파이프라인은 일괄 파이프라인과 통합되었습니다. 즉, 연속적인 데이터 스트림을 실시간으로 처리하는 파이프라인과 집계 일괄 처리로 데이터를 처리하는 파이프라인이 통합된 것입니다. 일부 기업에서는 일괄 백필 또는 재처리 파이프라인이 혼합된 연속 스트리밍 프로세스를 실행합니다.

아래 유튜브 동영상은 오라클과 MSSQL을 OLEDB 프로바이더를 사용해서 연결하는 방법을 설명하고 있습니다.

이 글이 도움이 되셨다면~ 커피 한잔이라도 후원 부탁드립니다^^

개발자에게 후원하기

추천, 구독, 홍보 꼭~ 부탁드립니다.

여러분의 후원이 빠른 귀농을 가능하게 해줍니다~ 답답한 도시를 벗어나 귀농하고 싶은 개발자~

감사합니다~