데이터 분석 엔지니어 (DW) (Data Analytics Engineer)

# 합류하게 될 팀에 대해 알려드려요
- Data Analytics Engineer(DW)는 토스 코어(Toss Core)의 Data Warehouse 팀에 소속돼요.
- 토스 앱의 다양한 제품에서 쏟아지는 로그와 원천 데이터를 입수하고, 믿고 쓸 수 있는 형태로 가공해 제공해요. 데이터가 제때, 빠짐없이, 맞는 값으로 들어오게 만드는 것이 저희 일의 출발점이에요.
- 팀의 목적은 토스의 모든 구성원이 데이터로 제품을 만들고 인사이트를 얻을 수 있는 환경을 제공하는 것이에요.
- 지금 팀은 "데이터를 사람이 잘 쓰는 것"에서 "AI도 잘 쓰는 것"으로 축을 넓히고 있어요. 표준 마트 위에 시멘틱 레이어와 온톨로지를 얹어, 사람이든 에이전트든 맥락을 이해하고 데이터를 꺼내 쓸 수 있는 환경을 만들고 있어요.

# 합류하면 함께 할 업무에요
- 저희 팀의 업무는 크게 다섯 갈래로 나눌 수 있어요. 다섯 가지를 모두 하시는 건 아니고, 강점과 관심에 따라 무게중심을 잡되 나머지도 자연스럽게 경험하게 돼요.
- 데이터 배치 입수 — 모든 데이터가 들어오는 관문
> - 실시간 입수를 제외한 앱·서버 로그부터 서비스 DB, 외부 파일까지 수십 종의 원천을 DW로 들여오는 입수 레이어를 설계하고 운영해요.
> - 원천이 늘어날 때마다 사람이 붙지 않도록, 입수 요청부터 적재·검증까지 이어지는 자동화 시스템을 직접 만들어요.
> - 스키마가 바뀌거나 데이터가 유실되는 상황을 감지하고, 원천을 만드는 팀과 구조 단계에서 함께 해결해요.
- 대규모 파이프라인 엔지니어링 — 빠르고, 잘 깨지지 않게
> - Hadoop 에코시스템을 포함한 Airflow, DBT 등 문제 해결을 위한 다양한 도구들을 발굴 및 활용해 위에서 전사 배치 파이프라인을 설계·개발·최적화해요.
> - 오래 걸리는 쿼리의 실행 계획을 뜯어보고 파티셔닝·셔플·리소스 설정을 바꿔 수행 시간을 큰 폭으로