노새에서 스트리밍

Question

우리는 스트리밍 객체 [refer]을 통해 데이터 위브를 조작 할 수 있습니다. 두 개의 개별 파일을 스트리밍하고 파일에 내용을 병합해야하는 시나리오가 있습니다. 나는이 프로세서에 대한 의존성을 작성하고, 단일 스트리밍과 잘 작동되도록

Answer 1

스트리밍 앞으로 만 일반적으로 비동기 범위의 사용 방지하고 ... 가장 효율적인 방법이 일을 무엇입니까 입력. 유동 변수에 대한 다른 스트리밍 된 입력을 읽는 경우에도 변수를 함께 사용하는 것이 어려울 수 있습니다. 한 스트림을 페이로드로 읽으려고했는데 다른 변수를 흐름 변수로 읽은 다음 데이터 매브에서 작업을 해봤습니까? BTW, 레코드 (라인) 레벨 변환을 수행 할 예정입니까?

파일 1의 레코드는 몇 가지 공통 데이터로 파일 2의 레코드와 관련되어 있습니까? 아니면 동일한 메타 데이터 정의가있는 독립적 인 데이터 세트입니까?

둘 다 관련이 없다면 먼저 두 파일을 결합하여 (append = true 인 파일 아웃 바운드) 결합 된 파일을 스트리밍하고 변환 작업을 수행 할 수 있습니다.

따라서 변환에 따라 달라집니다.