[CJ올리브영] Data Engineer
직군
Tech
경력사항
경력 5년 이상
고용형태
정규직
근무지
CJ올리브영대한민국 서울특별시 용산구 한강대로 372

직무소개

CJ올리브영의 온·오프라인 ​옴니채널 ​비즈니스에서 ​발생하는 방대한 ​데이터를 통합하고, 비즈니스 가치를 ​창출하는 ​데이터 플랫폼을 ​구축합니다.

단순한 데이터 통합을 ​넘어, Kafka ​기반 ​실시간 스트리밍과 ​대용량 ​배치 ​처리가 결합된 하이브리드 ​환경을 ​운영하며,

Apache Iceberg 중심의 ​레이크하우스(Lakehouse) ​아키텍처를 ​통해 데이터 거버넌스와 ​성능을 동시에 ​확보하는 ​역할을 수행합니다.


1. ​하이브리드 데이터 ​파이프라인 ​설계 및 고도화

Kafka ​및 CDC ​기술 기반의 저지연 실시간 스트리밍과 Spark 기반 대용량 배치 처리 시스템 설계/개발

Apache Airflow를 활용한 워크플로우 자동화 및 전략적 스케줄링 체계 확립

Apache Iceberg 기반 레이크하우스 구축을 통한 통합 저장 및 관리 체계 구현


2. 데이터 수집 체계 구축 및 텍소노미(Taxonomy) 표준화

대규모 고객 행동 로그 실시간 수집 및 효율적인 ETL/ELT 프로세스 설계

데이터 텍소노미 체계 수립 및 운영으로 전사 데이터의 일관성 및 거버넌스 강화


3. 데이터 품질 관리 및 성능 최적화

파이프라인 병목 구간 정의 및 컴퓨팅 리소스 최적화로 효율성 극대화

데이터 정합성 검증 루틴 구축을 통한 높은 데이터 신뢰도 유지


4. 데이터 모델링 및 분석 지원

분석 목적별 데이터 마트 설계 및 다차원 데이터 모델링 수행

비즈니스 핵심 지표(KPI) 정의 및 데이터 시각화 지원을 통한 인사이트 도출 가속화


요구경험 및 역량

  • 5년 이상의 데이터 엔지니어링 실무 경험을 보유하신 분
  • 클라우드 환경(AWS, GCP 등) 기반의 대규모 데이터 파이프라인 설계 및 ETL/ELT 구축·운영 역량을 갖추신 분
  • Kafka 생태계(Core, Connect, Streams)에 대한 깊은 이해와 대용량 클러스터 운영, 그리고 CDC(Debezium, OGG 등)를 활용한 이기종 시스템 간 실시간 데이터 동기화 경험이 있으신 분
  • Spark, Flink 등 분산 처리 프레임워크를 활용하여 대용량 로그 및 스트리밍 데이터 처리 파이프라인을 직접 구현할 수 있는 분
  • Apache Iceberg, Hudi, Delta Lake 등 최신 Table Format을 활용한 데이터 레이크하우스(Lakehouse) 아키텍처 구축 및 운영 경험이 있으신 분
  • Python, SQL, Airflow를 능숙하게 활용하여 데이터 워크플로우를 자동화하고 효율적인 데이터 마트를 설계할 수 있는 분
  • RestAPI 기반의 Bulk 데이터 수집 및 전송 시스템 개발 경험이 있으신 분
  • 복잡한 데이터 흐름과 아키텍처를 명확하게 시각화하고, 전사의 다양한 이해관계자들과 원활하게 협업할 수 있는 논리적인 커뮤니케이션 능력을 갖추신 분


우대사항

  • Spark, Flink 등 대용량/실시간 처리를 위한 분산/병렬 시스템 개발 경험 있으신분
  • 비즈니스 도메인 지식을 빠르게 이해하고, 데이터 기반 의사결정을 위한 데이터 엔지니어링 경험이 있으신분
  • 데이터 정합성보장 및 파이프라인 효율성을 높이기 위한 개선 경험이 있으신분
  • OGG/Debezium 등 CDC 툴을 활용해 이기종 시스템 간 실시간 동기화 문제를 해결해 본 분
  • 데이터 거버넌스 및 메타데이터 관리에 대한 이해도가 높으신 분
  • AWS, Google Clould 등 퍼블릭 클라우드 플랫폼 기반 데이터 인프라 구축 경험 있으신분


전형안내

서류전형 - 1차면접(Whiteboard Test/구술) - 온라인 인성검사 - 2차면접 - Reference Check - 처우전형/건강검진 - 합격


  • 직무 및 상황에 따라 면접 방식이나 전형 순서가 일부 변경될 수 있습니다.
  • 서류 전형 결과는 개별 안내드리며, 동일 기간 내 하나의 공고만 지원 가능합니다. (전형 종료 후 다른 공고 지원 가능 / 6개월 내 재지원은 권장하지 않습니다.)
  • CJAT는 CJ의 경영철학·인재상과의 부합 여부를 확인하는 온라인 인성검사입니다.


지원 및 유의사항

  • 채용에 합격하시는 경우 3개월의 수습기간을 적용합니다.
  • 지원서 내용이 사실과 다른 경우 불이익(채용 취소 등)이 있을 수 있습니다.
  • CJ계열사(자회사 포함)에 재직 중 경우, 본 채용에 지원이 제한됩니다.
  • 병역필 또는 면제로 해외여행에 결격사유가 없는 분에 한해 지원 가능합니다.
  • 국가보훈대상자 및 장애인은 관련 법령에 따라 우대합니다.
  • 전형 중 지원서를 삭제하시는 경우, 전형 포기로 간주됩니다.


올리브영 채용 블로그에서 더 많은 정보를 확인해 보세요!

👉채용블로그 바로가기https://career.oliveyoung.com

👉테크블로그 바로가기https://oliveyoung.tech

공유하기
[CJ올리브영] Data Engineer

직무소개

CJ올리브영의 온·오프라인 ​옴니채널 ​비즈니스에서 ​발생하는 방대한 ​데이터를 통합하고, 비즈니스 가치를 ​창출하는 ​데이터 플랫폼을 ​구축합니다.

단순한 데이터 통합을 ​넘어, Kafka ​기반 ​실시간 스트리밍과 ​대용량 ​배치 ​처리가 결합된 하이브리드 ​환경을 ​운영하며,

Apache Iceberg 중심의 ​레이크하우스(Lakehouse) ​아키텍처를 ​통해 데이터 거버넌스와 ​성능을 동시에 ​확보하는 ​역할을 수행합니다.


1. ​하이브리드 데이터 ​파이프라인 ​설계 및 고도화

Kafka ​및 CDC ​기술 기반의 저지연 실시간 스트리밍과 Spark 기반 대용량 배치 처리 시스템 설계/개발

Apache Airflow를 활용한 워크플로우 자동화 및 전략적 스케줄링 체계 확립

Apache Iceberg 기반 레이크하우스 구축을 통한 통합 저장 및 관리 체계 구현


2. 데이터 수집 체계 구축 및 텍소노미(Taxonomy) 표준화

대규모 고객 행동 로그 실시간 수집 및 효율적인 ETL/ELT 프로세스 설계

데이터 텍소노미 체계 수립 및 운영으로 전사 데이터의 일관성 및 거버넌스 강화


3. 데이터 품질 관리 및 성능 최적화

파이프라인 병목 구간 정의 및 컴퓨팅 리소스 최적화로 효율성 극대화

데이터 정합성 검증 루틴 구축을 통한 높은 데이터 신뢰도 유지


4. 데이터 모델링 및 분석 지원

분석 목적별 데이터 마트 설계 및 다차원 데이터 모델링 수행

비즈니스 핵심 지표(KPI) 정의 및 데이터 시각화 지원을 통한 인사이트 도출 가속화


요구경험 및 역량

  • 5년 이상의 데이터 엔지니어링 실무 경험을 보유하신 분
  • 클라우드 환경(AWS, GCP 등) 기반의 대규모 데이터 파이프라인 설계 및 ETL/ELT 구축·운영 역량을 갖추신 분
  • Kafka 생태계(Core, Connect, Streams)에 대한 깊은 이해와 대용량 클러스터 운영, 그리고 CDC(Debezium, OGG 등)를 활용한 이기종 시스템 간 실시간 데이터 동기화 경험이 있으신 분
  • Spark, Flink 등 분산 처리 프레임워크를 활용하여 대용량 로그 및 스트리밍 데이터 처리 파이프라인을 직접 구현할 수 있는 분
  • Apache Iceberg, Hudi, Delta Lake 등 최신 Table Format을 활용한 데이터 레이크하우스(Lakehouse) 아키텍처 구축 및 운영 경험이 있으신 분
  • Python, SQL, Airflow를 능숙하게 활용하여 데이터 워크플로우를 자동화하고 효율적인 데이터 마트를 설계할 수 있는 분
  • RestAPI 기반의 Bulk 데이터 수집 및 전송 시스템 개발 경험이 있으신 분
  • 복잡한 데이터 흐름과 아키텍처를 명확하게 시각화하고, 전사의 다양한 이해관계자들과 원활하게 협업할 수 있는 논리적인 커뮤니케이션 능력을 갖추신 분


우대사항

  • Spark, Flink 등 대용량/실시간 처리를 위한 분산/병렬 시스템 개발 경험 있으신분
  • 비즈니스 도메인 지식을 빠르게 이해하고, 데이터 기반 의사결정을 위한 데이터 엔지니어링 경험이 있으신분
  • 데이터 정합성보장 및 파이프라인 효율성을 높이기 위한 개선 경험이 있으신분
  • OGG/Debezium 등 CDC 툴을 활용해 이기종 시스템 간 실시간 동기화 문제를 해결해 본 분
  • 데이터 거버넌스 및 메타데이터 관리에 대한 이해도가 높으신 분
  • AWS, Google Clould 등 퍼블릭 클라우드 플랫폼 기반 데이터 인프라 구축 경험 있으신분


전형안내

서류전형 - 1차면접(Whiteboard Test/구술) - 온라인 인성검사 - 2차면접 - Reference Check - 처우전형/건강검진 - 합격


  • 직무 및 상황에 따라 면접 방식이나 전형 순서가 일부 변경될 수 있습니다.
  • 서류 전형 결과는 개별 안내드리며, 동일 기간 내 하나의 공고만 지원 가능합니다. (전형 종료 후 다른 공고 지원 가능 / 6개월 내 재지원은 권장하지 않습니다.)
  • CJAT는 CJ의 경영철학·인재상과의 부합 여부를 확인하는 온라인 인성검사입니다.


지원 및 유의사항

  • 채용에 합격하시는 경우 3개월의 수습기간을 적용합니다.
  • 지원서 내용이 사실과 다른 경우 불이익(채용 취소 등)이 있을 수 있습니다.
  • CJ계열사(자회사 포함)에 재직 중 경우, 본 채용에 지원이 제한됩니다.
  • 병역필 또는 면제로 해외여행에 결격사유가 없는 분에 한해 지원 가능합니다.
  • 국가보훈대상자 및 장애인은 관련 법령에 따라 우대합니다.
  • 전형 중 지원서를 삭제하시는 경우, 전형 포기로 간주됩니다.


올리브영 채용 블로그에서 더 많은 정보를 확인해 보세요!

👉채용블로그 바로가기https://career.oliveyoung.com

👉테크블로그 바로가기https://oliveyoung.tech