Data engineer

Data engineer

Мы - команда дата-инженеров в отделе прикладной разработки платформы обработки данных. В наши рабочие обязанности в настоящее время входят разработка на Spark-SQL и Python, поддержка и доработка написанных на Java прикладных приложений, участие в разрешении инцидентов производства. Также мы принимаем участие в процессах приёмки ТЗ для нашего отдела, консультируем аналитиков платформы по особенностям технической реализации производственных компонент.

Наша команда постоянно участвует в организации митапов внутри компании, занимается обучением соседних команд; а внутри команды идёт активный обмен опытом и знаниями.

Мы ищем коллегу в команду на позицию Data -инженер.

Для нас важно, чтобы будущий коллега обладал:

• Опытом разработки на java, опытом с spring boot приложениями
• Имел базовые навыки обращения с консолью linux
• Уверенным базовым навыком работы с git
• Уверенным средним уровнем знания произвольного диалекта SQL
• Имел базовые представления о распределённых хранилищах (может прокомментировать CAP-концепцию), или есть желание "вкатиться" в эту тему
• И представление о системах управления производственными конвейерами (Apache Airflow, luiji).

Желательно:

• Знание языка Python на базовом уровне, готовность развиваться как Python-разработчику
• Опыт взаимодействия с hadoop-хранилищем/s3
• Опыт работы с Spark
• Опыт работы с Airflow
• Практический интерес к рабочим задачам, интересно разобраться, как работает тот или иной блок системы.
• Интересно быть инженером-"многостаночником".

Задачи, которые предстоит решать:

• Разработка и оптимизация прикладных компонент платформы (приложений, выполняющих преобразования данных, конвейеров последовательного исполнения этих приложений).
• Взаимодействие с системными аналитиками платформы - приёмка ТЗ на разработку компонент платформы, контроль за соблюдением архитектурных ограничений платформы, консультации по реализации компонент.
• Взаимодействие с командой эксплуатации платформы и дата-аналитиками платформы - разбор инцидентов производства, консультации по особенностям реализации прикладных компонент платформы.
• Консультация других команд сектора IT по особенностям реализации прикладных компонент платформы.

Мы предлагаем:

• Возможность работать удаленно и гибкий подход к рабочему графику при условии выполнения всех бизнес-задач с заданным результатом.
• При необходимости - современный и комфортный офис класса «А» в Москве в пешей доступности от м. Савеловская и м. Марьина Роща.
• Конкурентную заработную плату.
• Официальное оформление: все процессы согласно ТК.
• Хорошую страховку ДМС, включающую обслуживание в ведущих центрах Москвы (в случае работы из другого города – вопрос обсуждается).
• Дружелюбную корпоративную культуру, приятных и умных коллег.
• Корпоративные скидки у различных партнеров компании.

Работа в Mediascope – это

1. Сложные и нестандартные задачи. Погружайтесь в работу с данными в индустриях, где происходит все самое интересное: Медиа, Реклама, Web, Mobile.
2. Современные технологии и эффективные подходы к работе. Применяйте актуальные инструменты для успешной работы.
3. Непрерывное развитие. Получайте новые знания на профильных конференциях, обменивайтесь опытом с коллегами-экспертами и участвуйте в еженедельных образовательных митапах компании.
4. Профессиональные и открытые коллеги. Работайте в команде сильных специалистов, основа которой - открытость, человечность, доверие, экологичность общения.