[Rust 공식문서 한국어 정리] ㊳. Rust 스트림(Streams) 가이드
[Rust 공식문서 한국어 정리] ㊳. Rust 스트림(Streams) 가이드
원문 제목: futures::stream::Stream — futures-rs docs
작성자: futures-rs Contributors
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
📌 1. 서론 — 이 문서가 다루는 내용
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
이 문서는 Rust의 비동기 스트림(Stream) 개념과 사용법을 설명합니다.
Future가 한 번의 비동기 값을 나타낸다면, Stream은 순차적으로 여러 비동기 값을 생성하는 시퀀스입니다.
futures-rs의 Stream 트레이트, tokio::sync::mpsc, 그리고 async 생태계에서의 스트림 처리 패턴을 다룹니다.
Iterator와의 유사성과 차이점, 스트림의 병렬 처리, 버퍼링, 그리고 에러 전파 전략을 중심으로 설명합니다.
비동기 데이터 파이프라인, 이벤트 소싱, 실시간 처리를 구현하려는 개발자에게 필수적인 개념입니다.
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
🔑 2. 핵심 개념 4가지
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
① Stream Trait: futures-rs에서 정의한 비동기 시퀀스 인터페이스로, poll_next 메서드를 가집니다.
② Iterator vs Stream: Iterator는 동기적이고 블로킹인 반면, Stream은 비동기적으로 다음 항목을 생성합니다.
③ StreamExt: map, filter, buffer_unordered 등의 유틸리티 메서드를 제공하는 확장 트레이트입니다.
④ Backpressure: 생산자와 소비자의 속도 차이를 조절하여 메모리 폭증을 방지하는 메커니즘입니다.
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
📖 3. 주요 내용 상세
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
Stream 트레이트는 Future와 마찬가지로 poll 기반으로 동작합니다.
trait Stream { type Item; fn poll_next(self: Pin<&mut Self>, cx: &mut Context _) -> Poll>; }
이는 Iterator::next의 비동기 버전으로 볼 수 있으며, 값이 준비될 때까지 비동기적으로 대기합니다.
StreamExt는 스트림을 조합하고 변환하는 다양한 어댑터를 제공합니다.
map, filter, take, skip, zip 등의 메서드는 Iterator의 대응 메서드와 유사하게 동작합니다.
buffer_unordered나 buffered는 동시에 여러 Future를 실행하여 스루풋을 높입니다.
스트림은 for await 문법(안정화 예정)이나 while let Some(item) = stream.next().await 형태로 소비합니다.
tokio::sync::mpsc는 멀티프로듀서 싱글컨슈머 채널로, 스트림과 유사하게 여러 값을 비동기적으로 전달합니다.
Receiver는 Stream을 구현하므로, StreamExt의 모든 메서드를 사용할 수 있습니다.
Backpressure 처리는 스트림 파이프라인의 안정성을 위해 중요합니다.
buffered나 throttle을 사용해 생산 속도를 제한하거나, 소비자가 처리 가능한 만큼만 요청하도록 합니다.
tokio::sync::mpsc::channel의 버퍼 크기를 적절히 설정하는 것도 backpressure 전략의 일부입니다.
커스텀 스트림을 구현할 때는 Stream 트레이트를 직접 구현하거나, async-stream 크레이트의 stream! 매크로를 사용합니다.
async-stream은 yield 문법으로 제너레이터 형태의 스트림을 쉽게 작성하게 해줍니다.
직접 구현할 경우 Pin과 Context를 올바르게 다루어야 하므로 더 복잡하지만, 성능과 제어력이 높습니다.
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
🛠 4. 실전 활용
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
데이터베이스 쿼리 결과나 네트워크 패킷을 Stream으로 변환하여 비동기 파이프라인에서 처리합니다.
StreamExt::buffer_unordered로 여러 HTTP 요청을 동시에 실행하고, 응답 순서를 유연하게 처리합니다.
WebSocket 메시지나 Kafka 레코드를 스트림으로 소비하며, 실시간 데이터 흐름을 관리합니다.
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
✅ 5. 정리
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
Stream은 Rust 비동기 생태계에서 연속적인 데이터 흐름을 표현하는 핵심 추상화입니다.
Iterator의 비동기적 확장으로 이해하면 쉽고, StreamExt로 강력한 파이프라인을 구성할 수 있습니다.
backpressure를 고려한 설계가 안정적인 시스템의 기반이 됩니다.
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
🔗 출처 링크
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
원문: https://docs.rs/futures/latest/futures/stream/trait.Stream.html
async-stream: https://docs.rs/async-stream/latest/async_stream/
#Rust #Stream #Async #Future #Backpressure #Tokio #번역

오뉴노노 님의 최근 댓글
ㅋㅋㅋㅋㅋ 2019 01.14 잘 읽었습니다 2018 12.30 포인트가 없어서 아직 시작을 못하고있는데요! 글은 잘 읽었습니다! 포인트 쌓고 도전할거에요 2018 12.30