Если Вы заинтересованы найти отличных специалистов, профессионалов своего дела для работы в Вашей компании разместите вакансию на нашем сайте.


  |    |    | 

Data Engineer вакансия 109235966



Вакансия: Data Engineerбилайн
Работодатель: билайн
Обновлено: 20.11.2024 17:00:35
Регион: Москва
Опыт работы: От 1 года до 3 лет
Оплата: ЗП не указана
Тип занятости: Полная занятость
Описание:

Сегодня билайн — компания изменений, чутко реагирующая на потребности рынка и людей. А ещё билайн — это команда, объединённая общими ценностями и общей целью — быть лидером телеком и digital рынков, предоставляя нашим клиентам новейшие продукты и услуги, а также сервис самого высокого уровня.

Сейчас у вас есть возможность присоединиться в качестве Инженера данных к команде развития платформы 1С.

Стек: Scala, Spark, Airflow, Python, Git, hdfs, bash, SQL.


Итак, вам предстоит:

  • Поддержка процессов репликации домена 1C retail на платформу DMP.
  • Развитие мониторинга и алертов процесса репликации.
  • Создание аналогичных процессов в новых доменах: разворачивание пространства gitlab, airflow, настройка spark загрузчика.
  • Разбор возникающих инцидентов и проблем на ежедневной основе.
  • Анализ логов spark-приложений, исправление ошибок, правки репозиториев и проектов, актуализация метаданных.
  • Поддержка функционала выгрузки из SQL Server -> Hive, проверка качества данных, проведение сверок, оперативное устранение ошибок для своевременной выгрузки.
  • Оптимизации запросов, приложений, рефакторинг кода с целью соблюдения стандартов.
  • Разработка сложных оптимальных SQL-запросов на высоконагруженных БД.
  • Развитие и доработка spark-загрузчика (SQL Server->Hive), настройка оптимальной конфигурации на spark для ускорения загрузки.

Мы будем рады рассмотреть вашу кандидатуру, если у вас есть:

  • Понимание принципов и технологий построения хранилищ данных. Опыт проектирования баз данных, разработки сложных и оптимальных SQL-запросов (SQL SERVER/Oracle/PostgreSQL/др.) в высоконагруженных системах от 3-х лет.
  • Разработка скриптов/систем по копированию больших объемов данных между базами.
  • Опыт программирования (ООП), разработки алгоритмов и структур данных. Разработка проектов (Java/C#/Scala/SQL).
  • Уверенное знание Linux, опыт разработки cmd- и bash-скриптов от 1-го года.
  • Наличие практического опыта работы с Hadoop (Hive, Spark, Airflow, HDFS, YARN, опционально Kafka), понимание парадигмы map-reduce и алгоритмов работы Spark. Разработка приложений на Spark от 1-го года.
  • Фундаментальные знания принципов построения распределенных систем хранения и обработки данных.
  • Понимание принципов проектирования многопоточных приложений, включая отказоустойчивость, безопасность и производительность.
  • Уметь сокращать трудозатраты на выполнение монотонных работ, автоматизация процессов в высоконагруженных системах. Стремление оптимизировать процессы.
  • Оперативное решение задач в сложных/аварийных ситуациях.

Что мы предлагаем:

  • Трудоустройство в аккредитованную ИТ-компанию;
  • Сплоченную команду профессионалов, в которой можно не только успешно реализовывать проекты, но и перенимать опыт и развиваться;
  • Удобные инструменты разработки — компания предоставит тебе необходимое ПО и мощный ноутбук;
  • Обучение, участие в интересных проектах и расширение профессиональной экспертизы;
  • Конструктивную и открытую рабочую атмосферу;
  • Полис добровольного медицинского страхования, обслуживаемый в лучших клиниках;
  • Корпоративные скидки на фитнес, обучение, путешествия и т.п.;
  • Служебную сотовую связь.

Контактная информация доступна авторизованным пользователям






Вакансия:Э'лайт сервис
Работодатель:
Регион: Москва
Оплата:ЗП не указана
Вакансия:Мастер ногтевого сервисаАриАнна
Работодатель:АриАнна
Регион:Москва
Оплата:От 160000 RUR
Вакансия:Менеджер по внутренним коммуникациям и HR брендуefin
Работодатель:efin
Регион:Москва
Оплата:ЗП не указана
Вакансия:ПостпечатникЭлектро Принт
Работодатель:Электро Принт
Регион:Москва
Оплата:От 100000 До 120000 RUR
Вакансия:Помощник мастера по сборке стеллажейСеверные Сети
Работодатель:Северные Сети
Регион:Москва
Оплата:От 245000 До 318000 RUR
Вакансия:Территориальный менеджер (Северо-Восток Москвы и МО)Ace Target
Работодатель:Ace Target
Регион:Москва
Оплата:От 172000 RUR
Вакансия:Ассистент Продюсера Event~Travel~ShowViValena Party
Работодатель:ViValena Party
Регион:Москва
Оплата:От 50000 До 100000 RUR
Вакансия:Комплектовщик на склад в Москву
Работодатель:Готовые Решения
Регион:Москва
Оплата:От 117000 До 175500 RUR
Вакансия:Территориальный менеджер (Юго-Запад Москвы и Московской области)Ace Target
Работодатель:Ace Target
Регион:Москва
Оплата:От 172000 RUR
Вакансия:Менеджер по закупкам
Работодатель:НПО ГРАНЬ
Регион:Москва
Оплата:До 110000 RUR
Вакансия:Ассистент руководителя со знанием китайского языка
Работодатель:Ку Сюан
Регион:Москва
Оплата:От 80000 До 140000 RUR
Вакансия:Менеджер клиентского отдела (СДЭК)СДЭК (ИП Зыза Максим Германович)
Работодатель:СДЭК (ИП Зыза Максим Германович)
Регион:Москва
Оплата:От 60000 RUR
Вакансия:Продавец-кассир м.ДинамоБристоль, сеть магазинов
Работодатель:Бристоль, сеть магазинов
Регион:Москва
Оплата:До 83600 RUR
Вакансия:Контент продюсерРоссийский Тендерный Союз
Работодатель:Российский Тендерный Союз
Регион:Москва
Оплата:От 120000 До 180000 RUR
Вакансия:Су-шефГК Культура Гостеприимства
Работодатель:ГК Культура Гостеприимства
Регион:Москва
Оплата:От 110000 RUR
Вакансия:Сборщик заказов в пятерочкуX5 Digital
Работодатель:X5 Digital
Регион:Москва
Оплата:До 174000 RUR
Вакансия:Сборщик заказов в пятерочкуX5 Digital
Работодатель:X5 Digital
Регион:Москва
Оплата:До 174000 RUR
Вакансия:Сборщик заказов в пятерочкуX5 Digital
Работодатель:X5 Digital
Регион:Москва
Оплата:До 174000 RUR
Вакансия:Сборщик заказов в пятерочкуX5 Digital
Работодатель:X5 Digital
Регион:Москва
Оплата:До 174000 RUR
Вакансия:Сборщик заказов в пятерочкуX5 Digital
Работодатель:X5 Digital
Регион:Москва
Оплата:До 174000 RUR
Вакансия:Сборщик заказов в пятерочкуX5 Digital
Работодатель:X5 Digital
Регион:Москва
Оплата:До 174000 RUR




Комментарии(0)

Отзывы и оценки (0)

Ваша оценка:





Убедительно обращаем Ваше внимание на то, что вся информация, размещенная на данном интернет-сайте, носит сугубо информационный характер и не являются публичной офертой, определяемой положениями Статьи 437 (2) ГК РФ. Для получения точной информации о стоимости товаров, пожалуйста, обращайтесь в ближайший офис продаж.



© Разработка и дизайн "Мастер Сервис"

QR_Altasib
Разработано в АЛЬФА Системс