• 커넥트웨이브 데이터플랫폼 개발팀에서 다양한 커머스 서비스의 데이터를 연결하고, 신뢰할 수 있는 데이터 기반을 함께 만들어 갈 동료를 찾습니다.
• 데이터 수집·처리부터 모델링, 품질 관리, 플랫폼 운영까지 데이터의 흐름 전반을 다루며, 분석과 서비스에 필요한 데이터를 안정적으로 제공하는 일을 함께합니다.
• Airflow, dbt, Spark, Kafka, Databricks, StarRocks 등 최신 데이터 스택을 실제로 운영하는 환경에서, 유능한 팀원들과 함께 대규모 커머스 데이터를 다루는 경험을 쌓을 수 있습니다.
• 단순히 파이프라인을 만드는데 그치지 않고, 데이터가 실제 업무에서 어떻게 활용되는지 고민하며 성능과 운영 효율을 개선하고 싶은 분을 기다립니다. 문제를 함께 정의하고, 해결 과정과 배움을 동료들과 나누는 분과 함께하고 싶습니다.

합류 시 함께 하게 될 업무에요

• 커머스 서비스의 DB, 이벤트 로그, 외부 데이터 등을 수집·통합하는 ETL/ELT 파이프라인을 개발하고 운영해요
• 배치 및 실시간 스트리밍 데이터 처리 흐름을 설계하고, 워크플로 스케줄링과 실패 복구를 자동화해요
• 데이터 플랫폼을 구축하고 운영해요 
• 데이터의 정합성·최신성·완전성을 검증하고, 모니터링과 알림을 통해 장애를 예방하고 대응해요
• 쿼리와 데이터 처리 작업의 성능을 개선하고, 저장·컴퓨팅 자원의 운영 비용을 최적화해요
• 개발자, 분석가, 현업 담당자와 협업하여 데이터 요구사항을 구체화하고, 메타데이터와 공통 지표의 관리 체계를 개선해요
  
• AX를 위한 데이터 기반을 구축하고, 데이터 거버넌스 체계를 운영해요

• 데이터 엔지니어링 또는 관련 실무 경력이 3년 이상이신 분
• SQL을 활용한 데이터 가공·검증에 능숙하고, 실행 계획을 이해하며 쿼리 성능을 개선할 수 있는 분
• Python 또는 Java/Scala 등으로 데이터 처리 프로그램을 개발하고 유지보수한 경험이 있는 분
• 데이터 수집·변환·적재 파이프라인을 직접 구축하고 운영한 경험이 있는 분
• 관계형 DB와 데이터 웨어하우스의 기본 구조를 이해하고, 활용 목적에 맞게 데이터 모델을 설계할 수 있는 분
• 작업 실패, 데이터 누락·중복 등 운영 문제의 원인을 분석하고 재처리·재발 방지 방안을 마련할 수 있는 분
• Git 기반 협업 경험이 있고, 기술적 판단과 데이터 정의를 문서화하며 유관 부서와 원활하게 소통할 수 있는 분

• Spark 등 분산 처리 환경에서 대용량 데이터를 처리하고 성능을 개선한 경험이 있는 분

• Kafka, CDC 등 실시간 스트리밍 데이터 수집·처리 파이프라인을 구축하거나 운영한 경험이 있는 분

• Airflow 등 워크플로 도구와 dbt 등 데이터 변환 도구를 활용한 경험이 있는 분

• Databricks, StarRocks 등 데이터 플랫폼 또는 데이터 레이크·레이크하우스 환경을 활용한 경험이 있는 분
• 클라우드 및 Kubernetes 환경에서 데이터 서비스를 운영하거나, CI/CD·GitOps를 적용한 경험이 있는 분
• 데이터 품질 검증, 메타데이터·리니지 관리, 접근 권한 등 데이터 거버넌스 체계를 개선한 경험이 있는 분
• 커머스의 상품·주문·고객·행동 데이터를 다루고, 분석가·서비스 개발자와 데이터 활용 과제를 해결한 경험이 있는 분