Вакансия в архиве
Компания больше не ищет сотрудника. Посмотрите похожие предложения
Uklon

Lead/Senior Big Data Engineer

@ Uklon

360,000 - 440,000 ₽/мес на руки

Remote
локация
полная удаленка.
уровень
Lead
сфера
Продуктовая компания
размер команды
6 - 10 человек

Uklon — ведущий украинский райдшеринг-сервис. Компания разрабатывает и поддерживает одну из крупнейших инфраструктур на рынке страны, обеспечивая взаимодействие драйверов и райдеров.

Продукты компании — это приложения и веб-сайты, через которые пользователи могут делать заказ автомобиля, а водители их получать. Компания создаёт собственную систему управления внутренними процессами (CRM), собственный картографический сервис и собственное решение, отвечающее за интеграцию с платежными провайдерами.

Команда Uklon использует новейшие технологические решения и методологии: продукт построен на базе микросервисной архитектуры с использованием облачных вычислений. Эксперты постоянно совершенствуют процесс разработки.

Сейчас Data Team ищет ​Lead / Senior Big Data Engineer.

Технологии/инструменты

Python, SQL, PostgreSQL, Kafka, Amazon S3, Amazon Redshift, Apache Parquet, Git, Data Lake, AWS.

Чем предстоит заниматься

  • Написание proof of concept.
  • Введение Big Data платформы в Cloud.
  • Оптимизация Big Data платформы и уменьшения затрат на Cloud.
  • Тесное взаимодействие с Solutions Architect и CTO по развитию Big Data платформы.
  • Разработка нового функционала.
  • Разработка плана профессионального развития коллег.

Цели на полгода

  • Вместе с Solutions Architect провести аудит существующего DWH.
  • Разработать архитектуру Big Data платформы в AWS и согласовать ее с Solutions Architect и VP of Engineering.
  • Разработать proof of concept Big Data платформы в AWS.
  • Оценить затраты на AWS под нагрузкой на платформу.
  • Мигрировать существующую платформу с on-premise к новой Big Data платформы.

Тебе будут нужны опыт и знания

  • 5+ лет опыта как Data Engineer.
  • 3+ года практического опыта работы с данными в AWS.
  • Знание принципов Data Lake и Distributed Data Mesh.
  • Отличное знание Python.
  • Отличное знание SQL (PostgreSQL).
  • Опыт работы с Kafka.
  • Опыт работы с Amazon S3, Amazon Redshift, Amazon Athena.
  • Знание формата Apache Parquet.
  • Знание Git и Gitflow Workflow.

Желателен опыт (научат, если не знаешь или не умеешь):

  • Знания Flask.
  • Опыт написания функций AWS Lambda.
  • Опыт работы с Amazon Glue (Crawler, Data Catalog).
  • Опыт работы с Apache Hive и Apache Presto.
  • Опыт в Machine Learning (классификация, регрессия).
  • Опыт работы с Kubeflow.
  • Опыт работы на проекте, где работа с данными велась в AWS.
  • Опыт лидерства в команде из нескольких Data инженеров.

Что предлагают

  • Гибкий график.
  • Возможность выбрать удобный формат сотрудничества (офис / удаленно / миксованный формат), поэтому ты можешь работать с любого уголка Украины и мира.
  • 10 рабочих дней оплачиваемых больничных в год.
  • 20 рабочих дней оплачиваемых отпусков.
  • Компенсация тестов на COVID-19.
  • Обмен знаниями среди команд (лекции, курсы, программа менторства).
  • Корпоративную библиотеку и подписку на Pluralsight.
  • Корпоративное обучение английскому языку различных уровней.
  • Возможность посещать оплачиваемые семинары, мастер-классы, тренинги и конференции; хакатон, форумы, team building sessions.
  • Различные социальные бонусы и компенсации (помощь к рождению ребенка, дополнительный отпуск в День Рождения и др.).
  • Корпоративный досуг, спортивные секции.
Дарья Кружилина IT Recruiter
Uklon

О компании Uklon

сфера
Продуктовая компания
размер
101 - 200

Uklon (>1 млн. заказов ежемесячно) — ведущий украинский райдшеринг-сервис. Компания разрабатывает и поддерживает одну из крупнейших инфраструктур на рынке страны, обеспечивая взаимодействие драйверов и райдеров.