개요 최근 사내에서 엄청난 격변에 시기가 지속되고 있습니다. 인프라 개선부터 기술 스택, 보안, 추후 방향성에 대한 수많은 고민들이 눈앞에 다가오게 되었습니다. 그러던 중 사내 슬랙에서 AWS 컨퍼런스가 있다는 것을 알게 되었고, 현재 겪고 있는 문제에 대한 인사이트를 얻을 수 있을 것이라고 판단하였습니다. 그렇게, AWS Unicorn Day 2024에 방문하여 세션을 경험하며 어떤 인사이트를 얻었는지에 대해 이야기해볼까 합니다. AWS Unicorn Day 2024 AWS Unicorn Day 2024는 다른 넥슨의 NDC나 네이버의 DEVIEW와 달리 모든 세션을 시간마다 선택하는 것이 아니라, 한개의 Track에 있는 모든 세션을 계속 듣도록 구성되었습니다. 저는 여러 트랙 중에서 현재 가장 많..
Luft:10초만에 10억 데이터를 쿼리하는 데이터스토어 개발기 NAVER Engineering | 김효준 - Luft:10초만에 10억 데이터를 쿼리하는 데이터스토어 개발기 tv.naver.com Luft : 유저 행동 분석에 최적화된 실시간 OLAP 데이터스토어 Fast : 5~10s 내로 수억 이벤트를 스캔해 Query 제공 Real-Time : lambda Archtecture로 실시간 데이터 처리 High Availability : 데이터는 샤딩 되고 S3에 저장됨 Cloud Native : Cloud에 직접 연동되어 유연한 스케일링 및 확장 Luft 개발 배경 코호트 분석 기능을 도입해, 폭넓고 유용한 유저행동 분석 기능이 필요했음. 타겟 유저군은 자유자재로 설정될 수 있어야 함 설정하자마자 ..
Youtube : https://youtu.be/FUEZibcZEkg 서론 실전 프로젝트를 Stateful 하게 구현 해야한다는 생각을 마음속에 간직하고 있었습니다. 2,000ms 기준으로 사용자의 위치를 실시간으로 받아오면서 접속한 반경 이내에 있는 사용자에게 위치를 배포하는데, 이러한 행위를 매번 DB에 저장하고 반환받는 불필요한 행위를 할 이유가 없다고 생각하였습니다. 하지만 어떤 방식으로 Stateful 하게 구현해야 할지 알 수 없었고, 해당하는 기능을 구현한 프로젝트나 발표 자료를 찾아보았습니다. 그러던 도중 NDC2021에서 데브시스터즈의 서버 아키텍처 관련 발표가 있었습니다. 단순히 Stateful 에 대한 자료만 존재하는 것이 아닌 세부적인 로직과 구현하게 된 이유에 대해 들을 수 있었습..
