데이터 엔지니어

업무내용

  • Kafka, EMR(Elastic MapReduce), ES(ElasticSearch) 등으로 구성된 Data Pipeline 유지보수
  • Product/Business 분석에 필요한 데이터 수집/변환/적재 과정을 설계, 구현 및 운영
  • 요구사항 분석, 설계, 개발, 테스트, 배포 전 과정에 참여하여 데이터 수집 및 품질을 관리

지원자격(필수)

  • 2년 이상의 데이터 관련 시스템 개발 경험보유자
  • Django 기반 시스템 개발 경험보유자
  • SQL 을 활용한 데이터 추출, 분석 경험보유자

우대사항

  • AWS (Amazon Web Services), GCP (Google Cloud Platform), Git 활용 경험보유자
  • 하둡 기반 Data Pipeline 설계, 운영 경험보유자
  • Google/Firebase Analytics 에 대한 이해 및 운영 경험보유자

지원하기
전체 채용부문 보기


하이퍼커넥트에서 개발하기

어떤 일을 어떻게 하나요?

저희가 사용하고 있는 기술 스택은 다음과 같습니다.

  • 실시간 영상/음성 커뮤니케이션 기술
    최근 많은 관심을 얻고 있는 WebRTC를 모바일 환경에서 안정적이고 효율적으로 구현하기 위해 노력해 왔으며 그동안 얻은 성과를 Azar 서비스에 적용하고 있습니다.
  • 모바일 플랫폼
    현재 안드로이드 / iOS 버전이 출시되어 있습니다. 성능이 중요한 만큼 모두 네이티브 앱으로 작성되었으며 다양한 오픈소스 라이브러리(Android에서는 Roboguice, EventBus, okhttp, iOS에서는 Bolts, AFNetworking 등)를 사용 중입니다.
  • 서버 및 인프라
    EC2, ELB, S3, RDS, ElastiCache, Route53 등 다양한 AWS 서비스를 이용하고 있으며, 성능이 필요한 대고객 서버는 Java/Spring 을, 그렇지 않은 부분은 Python/Django 를 이용하여 개발합니다. 대고객 시스템의 DB 로는 MySQL을, 보조용 데이터 저장소로 Redis 와 Cassandra 를 사용합니다. Fabric 과 Salt 를 이용하여 서버를 관리하며, Jenkins 를 이용하여 CI 를 구현합니다.
  • 서버 – 클라이언트 기술
    Restful, JSON-RPC, STOMP 등의 기술을 필요에 따라 적재적소에 사용합니다.
  • 대용량 데이터 처리 및 분석 기술

    Kafka, Hive, Spark 기반하여 이벤트 데이터를 수집/처리/분석하고 있습니다. Workflow luigi 관리하고 있습니다.

그리고 다음과 같은 방식으로 일합니다.

  • Git을 사용하며 Gitflow에 기반하여 브랜칭/배포를 처리합니다.
  • 회사의 주된 커뮤니케이션은 Slack을 통해 이루어집니다.
  • 프로젝트 진행 단계에 따라 JIRA 를 사용하거나 Trello에 기반해서 kanban을 합니다.
  • 2주일에 한번 개발 멤버들이 모여 한일/할일, 혹은 그냥 잡담을 나누는 AWSUM(All-developer Weekly Stand Up Meeting) 시간을 가집니다.
  • 코드에 주인이 없다는 원칙(collective code ownership)을 가지고 있습니다.
  • 격식 없이 가볍게 코드 리뷰를 하며(lightweight code review)를 하며 필요한 경우 두 명이 같이 코드를 짜기도 합니다.

즐겁게 일할 수 있나요?

즐겁게 일하기 위해서 가장 중요한 조건 중 하나는 능력 있는 멤버에 대해 그에 맞는 보상을 제공하는 것이라고 생각합니다. 하이퍼커넥트는 다음과 같은 보상 시스템을 갖추고 있습니다.

  • 보수는 기본급 + 인센티브 로 구성됩니다.
  • 기본급으로 업계 최고 수준을 넘어 타 업종(대기업 / 외국계 / 금융권 등)에서 받으실 수 있는 이상을 제공합니다.
  • 인센티브는 연1회 직전 년도의 성과를 바탕으로 지급합니다.
  • 정규직 채용이 원칙이며 지원자의 필요에 의한 경우 다른 고용형태를 협의할 수 있습니다.

더 자세한 근무 환경 및 복리 후생은 홈페이지에서 확인할 수 있습니다.

S/W 엔지니어에게 특화된 내용을 별도로 말씀드리면

  • 15인치 맥북 및 고성능 모니터 등 최고 수준의 장비가 지급됩니다.
  • 직원분들의 허리건강을 위해 전동 책상을 사용하고 있습니다.
  • 개발도구 및 사무자동화 S/W등의 구매에 주저하지 않습니다. S/W 엔지니어의 삶을 좀 더 편하게 만드는 외부 유료 서비스의 도입에도 적극적입니다. (IntelliJ, New Relic 사용 중)
  • 회사에 구비하기 위한 업무 관련 도서의 구입은 무제한으로 회사가 비용을 부담합니다.