2016-06-05 3 views
0

Google Cloud를 살펴보면 데이터 집중 응용 프로그램에 특히 유용합니다. 나는 Pub/Sub + Dataflow를 조사하고 있으며, 처리 논리가 변경된 경우 Pub/Sub를 통해 전송 된 이벤트를 재생하는 가장 좋은 방법을 찾아 내려고합니다.Google Pub/Sub로 이벤트 재생

내가 알 수있는 한, Pub/Sub 보존 기간은 상한선이 7 일 이며 가입 당입니다. 항목 자체는 데이터를 보유하지 않습니다. 내 마음 속에는 카프카 (Kafka)와 같이 로그 압축을 비활성화 할 수 있으므로 처음부터 데이터를 재생할 수 있습니다.

이제 Dataflow는 동일한 작업을 일괄 처리 및 스트리밍 모드로 실행할 수 있으므로 모든 이벤트를 Google Storage에 덤핑하고 거기에서 답장하여 원하는 동작을 시뮬레이트하는 것이 얼마나 효과적일까요?

다른 아이디어도 열려 있습니다. 당신이 클라우드 팝/하위 현재 리플레이를 지원하지 않습니다 말했듯이

답변

1

감사, 그래서 당신은 나중에 재생 어딘가에 이벤트를 저장해야하고 클라우드 스토리지는 그렇게 할 수있는 좋은 장소처럼 들린다.