left-topright-bottom
E-commerce & Retail
Создан

Data Engineer Middle 🆔 BD-8211

Middle
Ставка

2600 RUB в час

Кол-во специалистов

1

График работы

Удалённая работа

Требуемая локация

Россия

Гражданство

Россия

Отрасль

E-commerce & Retail

Заказчик

RedLab

Обязательные требования

языки программирования, фрэймворки, системы управления базами данных, и т.д.
Опыт в годах: 3 +
- Общее представление о стеке технологий BigData. 
- Понимать различия работы между BigData и с данными обычного размера.
- Знание SQL (индексы, функции, умение писать не сложные запросы). 
- Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.).
- Умение работать с Git (знание команд git pull/commit/push). 
- Опыт работы с любым графическим ETL инструментом (Apache Nifi, Airflow, Talend, Informatica, SAS и т.п.). 
- Представление о работе с Hadoop. 
- Понимание устройства HDFS, форматов данных. 
- Понимание работы с Hive или любого другого хранилища на основе Hadoop. 
- Опыт использования системами ведения проектов и документации. 
- Знания основ программирования (Java, Groovy, Python).

Задачи на проекте

- Разработка, реализация и поддержка типовых интеграционных решений, на стеке технологий, принятых в команде. (Java, Groovy, Apache Nifi, Airflow).
- Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение типовых задач в установленный срок. 
- Поддержание в актуальном состоянии документации типовых интеграционных решений платформы больших данных. 
- Предоставление отчетности о своей деятельности начальнику отдела/ руководителю в порядке, установленном руководством.

Описание проекта и команды

азработка интеграционных потоков и перенос потоков данных из ТОРГ CAR. Разработка, реализация и поддержка типовых решений, на стеке технологий, принятых в команде.

Header Logo