데이터 플랫폼팀은 마이리얼트립에서 서비스 되는 모든 데이터를 개발 및 관리 하는 팀입니다.
마리트의 비지니스에서 필요로 하는 DB데이터, Log데이터, 외부수집데이터등을 통합/관리합니다.
이렇게 개발 수집된 데이터는 검색/추천, 다양한 의사결정, Planning, 회계/정산, 업무 자동화, A/B Test 등 다양한 곳에 사용됩니다.
이를 관리하기 위한 다양한 DW 운영 기술들을 경험해 볼 수 있으며, 다양한 소스를 통합관리하는 데이터 파이프라인, 대용량 데이터 처리를 위한 빅데이터 기술, 실시간 데이터 처리등의 기술을 습득할 수 있습니다.
주요업무
• 정보계 데이터 저장소 및 파이프라인 개발/운영
• 다양한 데이터의 Batch 및 streaming 처리
• DW/Mart 설계 및 개발
• 대용량 데이터 처리 아키텍쳐 개발 및 운영
• 대용량 데이터 분석 후 관련 서비스 개발/운영
• MLOps를 통한 성능 최적화 작업
자격 요건
• 클라우드 환경에서의 대규모 데이터 처리를 위한 데이터 파이프라인 설계 및 구현 경험
• 주도적인 BI/DW 구축 경험
• 탁월한 수준의 SQL
• Airflow, luigi 같은 ETL 도구의 경험
• Java or Python 등 하나의 언어를 자유롭게 다룰수 있는 분
• 실시간 Streaming 데이터 처리 경험
우대사항
• 분산 환경 대용량 데이터 처리 환경 구축 경험
• AI를 활용한 생산성 향상 경험
• 광고 데이터 파이프라인 구축 경험
• debezium(CDC) 개발 및 운영 경험