Extract Nodes

Extract 단계는 파이프라인에서 데이터를 외부 소스로부터 수집하는 단계로, 전체 ETL 과정의 시작 지점에 해당한다.
즉, “어디에서 데이터를 가져오는가”를 정의하는 노드이다.

시스템에서는 다음과 같은 Extract 노드를 제공한다.

Data Retrieval (DB)

• SQL 기반 데이터 소스(예: RDBMS)로부터 데이터를 조회하는 노드
• 사전에 정의된 데이터베이스 연결을 기반으로 쿼리를 실행하여 데이터를 가져온다
• 사용자는 필요한 데이터를 조회하기 위해 직접 SQL 쿼리를 작성할 수 있다

Data Retrieval (HTTP)

• 외부 API를 통해 데이터를 수집하는 노드
• OAuth2 인증 방식을 사용하는 API와 연동할 수 있다

인증 및 연결 설정

• API 호출 시 인증이 필요한 경우, 사전에 [파이프라인 > 데이터 관리] 메뉴에서 Connection 인증 정보를 설정해야 한다
• 설정된 인증 정보는 파이프라인 내에서 재사용 가능하다