담당업무
- 데이터 기반 서비스를 안정적으로 운영하고, 데이터 기반 의사결정이 가능하도록 데이터 파이프라인을 설계하고 시스템을 개발합니다. - 정성적 인터뷰 및 정량적 유저 데이터 분석을 통해 유저가 겪고 있는 문제에 대한 정의 및 솔루션에 대한 가설이 설정되면 이를 바탕으로 유저의 핵심 니즈에 대한 해결책(mvp)을 마련합니다. - 데이터 엔지니어는 위 문제해결 과정에 적극적으로 참여하며, 데이터 기반 문제해결이 가능하도록 시스템을 설계하고 구현합니다. - 대용량의 데이터를 안정적으로 처리하고 분석할 수 있는 시스템을 설계하고 구현합니다. - 팀원들의 손쉬운 사내 데이터 활용을 위한 시스템을 설계하고 구현합니다. - ML 서비스가 안정적으로 서빙되기 위한 플로우를 운영합니다. - 데이터 기반 의사결정을 위한 A/B 테스트 등의 다양한 실험을 할 수 있는 환경을 설계하고 개발합니다.
자격요건
- 데이터 엔지니어링 3년 이상 혹은 그에 준하는 실력을 갖춘 분 - 서비스 요구사항을 바탕으로 데이터 파이프라인 설계 혹은 운영 경험이 있는 분 - Workflow 관리도구(Airflow)와 분산 시스템(Spark, Hive 등)에 대한 활용 경험이 있는 분 - AWS를 활용한 클라우드 환경에서의 개발과 배포 경험이 있는 분 - Git을 활용한 코드 관리에 익숙한 분 - 새로운 기술에 대한 관심이 높고 거부감이 없는 분
기술 스택 - Spring Boot (Kotlin) / Flask (Python) / FastAPI (Python) - Angular (TypeScript) - TypeScript / React.js / Next.js / Storybook / TailwindCSS 로 전환 진행 중 - MySQL(Aurora) / MongoDB / Redis / Neo4j - Elasticsearch, Kibana - AWS(ECS, EKS, Lambda 등), GCP - Airflow - EKS 기반의 Kubernetes, ArgoCD, Helm, Docker - Github / Jenkins
필요역량 - 팀 플레이어로서 동료들과 업무적인 도움을 주고 받는 데에 편안한 분 - 토론 과정에서 본인의 생각과 다른 의견이 제시되더라도 열린 마음으로 논의를 이어갈 수 있는 분 - 이미 알고 있는 문제의 정답을 맞추는 것보다 새로운 문제의 해답을 찾아가는 데에 열정을 가지고 계신 분 - 전문가로서의 성장에 대한 열정과 자신감을 가지고 계신 분 - 초기 스타트업의 속도감과 역동성을 즐길 수 있는 분 - 백엔드 개발에 대한 이해가 있는 분
우대사항
* 우대사항이자 팀에서 지향하고 있는 방향성이기도 합니다.
- Data warehouse(BigQuery, RedShift 등)를 구축해본 경험이 있거나 이슈 해결 경험이 있는 분
- 제품에 대한 이해를 바탕으로 프로덕트 팀과 다양한 실험을 진행했던 경험이 있는 분 - Airflow, Kubernetes 및 Docker 기반의 MLOps를 구축해본 경험이 있는 분 - Data Analyst, Machine Learning Engineer/Scientist와 협업해본 경험이 있는 분 - 데이터에 대한 간단한 통계적 분석 및 시각화 경험이 있는 분 - ML 학습을 위한 자연어 데이터 전처리 경험이 있는 분 - 대규모 트래픽 및 대용량 데이터 처리에 대한 경험이 있는 분 |