스트림 프로세싱

·architecture
1. 배치 vs 스트림배치 프로세스는 언제 읽기 작업이 완료되었는지 알 수 있다.하지만 실제로는 많은 데이터는 시간이 지남에 따라 점진적으로 도착하기 때문에 무제한이다.일반적으로 스트림(stream)은 시간이 지남에 따라 점진적으로 제공되는 데이터를 의미이다. 2. 이벤트 스트림 전송배치 작업에서 또한 스트리밍과 유사한 형태로 작업할 수 있다.파일이나 DB 를 통해 생산자에서 파일이나 DB로 쓰기 작업을 하고, 소비자로서 주기적인 폴링을 통해 작업을 처리할 수 있다.낮은 지연의 요구 사항에서 주기적인 폴링 비용으로 인해 소비자에게 알림을 전달하는 방법이 소비자에게 전달하는 방법이 필요하다.이벤트는 JSON, text string, binary form 형태로 인코딩되고 저장된다. 3. 메시징 시스템일반적..
cooper25
'스트림 프로세싱' 태그의 글 목록