데이터 엔지니어 (Platform) (Data Engineer)

합류하게 될 팀에 대해 알려드려요

• 토스뱅크의 Data Engineer(Platform)는 Data Division 내 Data Platform 팀에 속해 있어요.
• Data Platform 팀은 Hadoop(Infrastructure), Airflow(Workflow), Trino/Impala(Query Engine), BI/EDA 플랫폼(Superset·Tableau 등) 등 전사 핵심 데이터 플랫폼을 운영하며 데이터의 신뢰성과 확장성을 책임져요.
• 앞으로는 온프레미스 오픈소스 환경과 AWS·GCP 클라우드가 결합된 하이브리드형 데이터 플랫폼으로의 전환을 진행하고 있어요. 클라우드 네이티브 기술을 적극 도입해 플랫폼의 확장성과 유연성을 한 단계 높이는 여정을 함께할 분을 찾고 있어요.
• 분산 쿼리 엔진을 통해 대규모 데이터를 누구나 빠르고 안정적으로 조회할 수 있는 환경을 만들고, BI/EDA 플랫폼으로 데이터 기반의 의사결정을 지원해요.
• 단순 운영을 넘어, 플랫폼의 리소스를 최적화하고 엔지니어와 분석가의 개발자 경험을 개선하는 것이 팀의 주요 미션이에요.

합류하면 함께할 업무예요

• Hadoop 기반 대규모 데이터 인프라와 Kubernetes 환경의 Airflow 플랫폼을 설계하고 고도화하며, 전사 파이프라인의 안정성을 책임져요.
• 온프레미스와 클라우드(AWS·GCP)가 공존하는 하이브리드 데이터 플랫폼 아키텍처를 설계하고, EKS·GKE, S3·GCS, EMR·Dataproc·BigQuery 등 클라우드 서비스 기반으로 워크로드의 클라우드 전환을 주도해요.
• Trino, Impala, Spark SQL 등 분산 쿼리 엔진을 운영하며 성능 병목을 분석하고 튜닝하여 데이터 조회 환경을 개선해요.
• self-service BI