3시간 걸리던 Glue Job을 17분으로 단축한 경험을 통해 Spark의 Shuffle 메커니즘과 Spill 현상을 이해하고, 효과적인 성능 최적화 방안을 알아봅니다.

SQS의 Standard Queue와 FIFO Queue의 주요 특성, 차이점, 그리고 각각의 활용 사례를 상세히 알아봅니다. 시스템 설계 시 고려해야 할 중요한 특성들을 중심으로 설명합니다.