Data Engineer

✳️ 이런 업무를 담당합니다

• [데이터 파이프라인 및 시스템 설계 및 개발]

뤼이드에서는 데이터를 기반으로 한 의사결정, 비즈니스 인사이트 추출 및 머신러닝 모델의 효율적인 학습을 위해 고도화된 데이터 파이프라인과 시스템의 설계 및 개발을 진행합니다. Data Engineer로서 뤼이드의 다양한 서비스에서 필요로 하는 데이터를 신뢰성 있게 처리하고 서빙할 수 있도록 ETL 및 ELT 작업, 데이터 모델링, 데이터 웨어하우스 관리 등의 업무를 담당하게 됩니다.

• [데이터 분석 및 ML 모델 서빙을 위한 데이터 시스템 개발]

Data Engineer는 데이터 분석가 및 ML 엔지니어와 긴밀히 협력하여 분석 및 모델 학습에 필요한 데이터를 제공합니다. 이를 위해 실시간 데이터 처리 시스템과 배치 처리 시스템을 개발 및 최적화하며, 데이터 품질과 가용성을 보장합니다.

• [데이터 기반 의사결정 지원을 위한 인사이트 제공]

데이터 엔지니어링 팀은 회사 내 다양한 부서와 협력하여 데이터를 통한 인사이트 제공을 목표로 합니다. 이를 위해 데이터 모델링, 데이터 분석 툴 개발 및 유지보수 등을 담당하며, 데이터 기반의 의사결정 과정을 지원합니다.

✳️ 이런 분을 찾고 있어요

• - 컴퓨터 과학(자료구조, 알고리즘, 운영체제, 데이터베이스 등)에 대한 깊은 이해와 탄탄한 기본 지식을 보유하신 분.
• - SQL과 Python에 능숙하신 분.
• - 기존 레거시 데이터 시스템의 구조를 이해하고 문제를 정의하여 개선해보신 분.
• - 아래 경험 중 두 가지 이상 경험해 보신 분.
• - 실시간 데이터 처리를 위한 데이터 시스템(Kafka, Flink, Structured Streaming 등)을 경험하고 구조에 대해 잘 이해하고 계신 분.
• - Data Warehouse, Data Lakehouse와 Storage layer(Delta Lake, Iceberg, Hudi 등)등을 활용해 배치 또는 실시간 파이프라인을 최적화해 보신 분.
• - DBT를 활용한 데이터 품질 및 모델링 경험(Vault modeling, Star Schema 등)으로 성과를 보여주신 분.
• - Kubernetes 구조에 대해 잘 이해하고 데이터 시스템 설계 및 개발 경험이 있으신 분.
• - CI/CD 파이프라인 구축 및 관리 경험이 있으신 분.