주요업무
A. 제품 조직 기술 지원 및 제품화
•데이터 수집/가공/거버넌스/마트 구성 프로세스를 중심으로 제품 전략과 기술 로드맵을 연결하고 PM·디자인·사업 조직과 개발 우선순위 공동 수립
•공통 API, 데이터 서비스, 검색, 인증·권한, 배포·모니터링 등 제품 개발 기반의 플랫폼화
•기획 단계부터 아키텍처, 성능, 보안, 비용 및 운영 요건을 검토하여 출시 리스크와 재작업 최소화
•제품별 SLA/SLO, 장애 대응, 기술부채 및 확장성 관리
•AI 기능이 제품에 안정적으로 적용되도록 제품 조직 – AI Tech Center – Data Tech Center 간 협업 구조와 책임 범위 정립
B. 미디어 데이터 크롤링·전처리·데이터마트 구축
•정적·동적 웹사이트, API, 지면 및 제휴 채널의 뉴스·미디어 데이터를 수집하는 크롤러·스크래퍼의 구조를 설계하고 핵심 이슈 해결에 직접 참여
•사이트 구조 변경, 차단, 누락과 중복에 대응할 수 있도록 분산 수집, 스케줄링, 재시도, Proxy, 변경 탐지 및 모니터링 체계 개선
•Connectivity/Gateway–Kafka·Queue–Workflow Gateway–Data Service로 이어지는 수집·전처리 파이프라인 개발 및 운영
•제목·본문·일시·기자 등 필수값 검증, 오류·이상치 탐지, 중복 제거, 메타데이터 생성, 카테고리 매핑과 이미지·표·영상 분리 처리
•정제된 데이터를 제품별 스키마에 맞춰 PostgreSQL·MSSQL, Redis, Elasticsearch 및 데이터마트에 안정적으로 적재·공급
•데이터 최신성, 완전성, 정확성, 처리 지연, 수집·파싱 실패율을 지표화하고 품질 이슈의 원인 분석과 재발 방지 수행
•데이터 원천, 처리 이력, 스키마, 품질 기준, 접근권한, 보존·파기와 활용 범위를 포함한 데이터 거버넌스 수립 및 운영
C. 백엔드·인프라·DBA 운영
•Java/Spring Boot 및 Python 기반 백엔드·데이터 서비스의 아키텍처를 리뷰하고 주요 개발·성능 개선에 참여
•PostgreSQL(SDB), SQL Server/MSSQL(GDB), MongoDB, Redis, Elasticsearch의 데이터 모델·쿼리·인덱스·용량과 운영 상태 점검
•스키마 변경, DB 접근권한, Always On·Log Shipping, 백업·복구와 데이터 이전 작업의 기준 수립 및 실행 관리
•온프레미스 IDC·사내 서버실·Naver Cloud·AWS 환경의 장애·성능·보안·비용 문제를 실무진과 함께 해결
•로그와 모니터링 데이터를 기반으로 장애를 분석하고 자동화·표준화를 통해 반복 장애와 수작업 축소
D. 기술·IT 운영 기준 수립
•제품 로드맵과 연결된 기술 방향, 아키텍처 원칙과 개발·운영 표준 수립 지원
•접근권한, 변경·배포, 보안, 자산, 백업과 기술 리스크에 대한 최소한의 강력한 통제 운영
•인프라·클라우드·라이선스 비용을 점검하고 투자 우선순위를 사업가치와 연결
•중대한 서비스·보안·데이터 위험 발생 시 원인 파악, 롤백·복구 및 후속 개선을 실무진과 함께 주도
E. 실무형 팀 리딩과 협업
•데이터 수집·플랫폼, 백엔드, 인프라, DBA 담당자와 함께 설계 리뷰, 코드·쿼리·운영 이슈 점검 및 문제 해결
•제품 출시, 사업가치, 안정성, 보안과 기술부채 사이의 우선순위를 명확하게 결정
•문서화, 운영 리뷰와 장애 회고를 통해 특정 개인에 의존하지 않는 실행체계 구축
•제품 조직과 긴밀히 협업해 데이터·API·검색·배포 환경을 지원하고, AI Tech Center에는 연구·실험의 제품화에 필요한 데이터와 인프라 제공