본문 바로가기

Stream Processing

[Flink] Flink 정보 정리
Data/Data Engineering 2022. 2. 19. [Flink] Flink 정보 정리 본 포스팅은 패스트 캠퍼스의 "실시간 빅데이터 처리를 위한 Spark & Flink Online" 참고하여 제작했습니다! 전반적인 정의에 대해서만 정리하고 프로그래밍 관련은 강의를 보시는걸 추천드립니다! 기본 정보 오픈소스 스트림 프로세싱(Stream Processing) 프레임워크 분산처리 / 고성능 / 고가용성 배치 프로세싱 또한 지원 Spark 보다 빠른 속도 (오...?) Fault-tolerance - 시스템 장애시 장애 직적으로 돌아가서 다시 시작가능 Rescalability - 실행도중 리소스 추가 가능 Stream Processing Batch Processing과 다르게 비교적 가벼운 데이터(ex. 주식 거래소, 웹 서버, 센서 데이터, 비정상 거래 탐지...)를 처리하는데 사용함. 이외..

티스토리툴바