데이터 엔지니어(Analytics)
LTM
AI assistant
Job Description
주요 업무
- 고객 요구사항에 맞춰 Azure Databricks, Microsoft Fabric 및 관련 Azure 서비스를 활용한 데이터 및 분석 솔루션 설계·구현
- 기존 데이터 플랫폼을 진단하고, 유사 기술 경험을 바탕으로 마이그레이션 및 현대화 방안 수립
- SQL 및 데이터 처리 도구를 활용하여 데이터 파이프라인, ETL/ELT 프로세스 개발
- 기존 데이터 웨어하우스, 데이터 레이크, 분석 업무 환경을 Azure Databricks 또는 Microsoft Fabric으로 마이그레이션 지원
- 분석 플랫폼을 클라우드 서비스 및 온프레미스 시스템과 연동
- 비즈니스 담당자, IT팀과 긴밀히 협업하여 요구사항을 파악하고 적합한 솔루션 제공
- 구현 전 과정에서 기술 리딩을 진행하며 장애 트러블슈팅, 성능 최적화 수행
- 데이터 품질, 보안, 거버넌스, 확장성 관련 모범 사례 적용
- 솔루션 아키텍처, 구현 절차, 데이터 흐름 관련 기술 문서 작성 및 관리
- 프로젝트 요건에 맞춰 Azure Databricks, Microsoft Fabric 역량 학습 및 적용
필수 자격 요건
- Databricks, Snowflake, Amazon Redshift, Google BigQuery, Microsoft Fabric, Azure Synapse Analytics 등 주요 데이터·분석 플랫폼 중 최소 1개 이상에서 솔루션 설계 및 구현 실무 경험 보유
- SQL 활용 역량이 뛰어나고 데이터 모델링, 쿼리 성능 최적화 경험 보유
- 운영 환경(Production) 데이터 파이프라인 및 ETL/ELT 구축 경험
- 데이터 웨어하우스, 데이터 레이크 또는 레이크하우스(Lakehouse) 아키텍처에 대한 이해
- 여러 시스템의 데이터를 연동한 경험이 있고