[2024 하반기 경력채용] Data Engineer 2024.09.09 ~ 2024.09.22 (23:59) 조직 소개 네이버웹툰은 지난 10여 년간 콘텐츠에 대한 열정과 글로벌에 대한 도전정신을 바탕으로 전 세계 8,600만 월간 사용자가 함께 즐기며, 만화뿐 아니라 소설, 영화, 방송, 애니메이션, 게임에 이르기까지 다양한 콘텐츠 영역을 아우르는 종합 디지털 콘텐츠 기업으로 성장하였습니다. 이러한 성장 속에서 글로벌 대용량 데이터의 안정적인 수집 영역은 매우 중요한 역할을 하고 있습니다. Batch 성 데이터뿐만 아니라 Realtime으로 사용자 데이터를 수집하며 이를 활용하기 위한 가장 기반이 되는 역할을 수행합니다. 대용량 데이터 수집 및 적재(스키마 적용) 기능을 플랫폼화하여 다양한 타입의 신규 데이터 적재를 저비용으로 확장할 수 있는 환경을 제공하여, 대량의 데이터를 손쉽게 적재하여 분석 및 서비스 개선 활용을 가능하게 하는 데 주요한 역할을 하고 있습니다. ML 데이터 활용을 위해 데이터 적재 및 가공에 대한 지연시간을 줄이기 위한 내부 개선을 진행합니다. 담당 업무 네이버웹툰 서비스의 글로벌 대용량 데이터 수집 및 적재 - 글로벌 및 국내 서비스의 스토리지 데이터를 저장합니다. - 사용자의 행동 로그를 수집합니다. - 수집된 데이터를 가명화하고 기 등록된 스키마로 가공하여 적재합니다. 이벤트 로그 정의서 관리 및 검증 시스템 운영 - 일관성과 신뢰성 있는 사용자 데이터 수급을 위한 시스템을 구축, 유지 보수합니다. - 데이터에 대한 명세에 대해 모니터링 및 퀄리티 확인 및 로그 전송자에게 피드백을 줄 수 있는 기능을 개발합니다. ML 지원을 위한 준 실시간 데이터 처리 강화 - ML에서 즉각적으로 사용할 수 있는 데이터 가공 및 시스템 간 안정성 높은 구조로 연동될 수 있는 시스템 구축 및 유지 보수합니다. 데이터 수집 플랫폼 구축 - 다양한 스토리지 데이터를 Hadoop 환경으로 수집하기 위한 플랫폼을 개발합니다. 필요 역량 - 유관 업무 경력 3년 이상이신 분 - 대용량 데이터 수집 및 적재 시스템 개발과 운영을 해보신 분 - Java / Python 개발 경험과 프로그래밍 기본 지식을 가지신 분 - Kubernetes 기반 개발 경험이 있으신 분 - Hadoop 관련 기본 지식을 갖추고 있으며, 분산 환경에서 대용량 데이터 처리 경험이 있으신 분 우대 사항 - Spring Framework 기반의 API 서버, 웹서버 개발과 유지 보수 경험이 있으신 분 - ML 지원을 위해 flink 사용 경험이 있으신 분 - kafka, spark, flink, fluentd, flume, elasticsearch 등 처리 경험이 있으신 분 - 대용량 로그 수집 경험이 있으신 분 - 글로벌 서비스 개발 경험이 있으신 분 - 동료와의 협업에 열린 마인드를 가지신 분 전형 절차 및 안내 사항 - 전형절차: 지원서 리뷰 ▶ 프리 인터뷰 ▶ 실무 인터뷰(*코딩테스트 포함) ▶ Culture-Fit 인터뷰(*기업문화 적합도 검사 포함) - 고용형태: 정규직 - 근무 장소: 정자동 그린팩토리 - 근무 형태: 월 평균 주 2회 이상 오피스 출근 or 주 5일 원격근무 * 전형 절차는 일정 및 상황에 따라 변경될 수 있습니다. * 지원서 내용 중 허위사실이 있는 경우에는 합격이 취소될 수 있습니다. * 국가유공자 및 장애인 등 취업보호대상자는 관계법령에 따라 우대합니다. * 문의사항은 "네이버웹툰 채용 홈페이지 > 1:1 문의"로 접수해주시기 바랍니다.