Data Engineer (Big Data), Москва

Задачи:

  • создание новых аналитических продуктов на стеке Hadoop + Teradata/Greenplum;
  • автоматизация разработки, CI/CD;
  • построение высокопроизводительных ETL-процессов;
  • разработка процессов расчета и витрин данных;
  • применение машинного обучения впрогнозировании и оптимизации бизнес-процессов;

Необходимые знания и навыки:

  • алгоритмы обработки больших данных (Hadoop, MapReduce);
  • SQL, оптимизация запросов в MPP Databases;
  • разработка ETL на одном из инструментов (Airflow, Informatica, SAS DI, SSIS, Talend, Pentaho);
  • Python, алгоритмы и методы машинного обучения в Python;

Будет плюсом:

  • знание BI-инструментов: Tableau, Power BI.