Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.

SPBDev

сегодня

data engineer

ниже рынка на 32,7%

вакансия 200 000 ₽

в среднем 297 358 ₽

Добавь резюме в профиле, чтобы видеть % мэтча с вакансией

генерация резюме

Добавьте резюме в профиль, чтобы сгенерировать временное CV под эту вакансию

сопроводительное письмо

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

описание

Описания нет

задачи

Разрабатывать низкоуровневую архитектуру систем больших данных на основе информации от аналитиков и архитекторов;
Разрабатывать документ, описывающий низкоуровневую архитектуру разрабатываемых систем больших данных;
Разрабатывать программный код систем больших данных;
Подготавливать документацию, описывающую алгоритмы разработанных систем больших данных;
Разрабатывать unit-тесты для программного кода систем больших данных;
Подготавливать и собирать установочные пакеты для установки разработанных решений на промышленную среду;
Проводить плановые работы по оптимизации программного кода разработанных систем больших данных;
Исправлять дефекты в разработанных приложениях;
Подготавливать и выпускать пакеты обновлений, включающих исправление дефектов и оптимизацию программного кода систем больших данных.

требования

От 3 лет коммерческой разработки;
От 2 лет разработки систем, которые вышли в промышленную эксплуатацию;
От 2 лет работы с BigData;
Глубокие теоретические знания стека технологий и практический опыт, умение давать и принимать обратную связь;
Опыт работы с бизнес-требованиями (сбор, формирование требований, анализ), опыт работы в условиях постоянно меняющихся требований;
Опыт написания программ распределенных вычислений (Spark) и ETL-процессов;
Опыт проведения code review;
Опыт/понимание разработки и проектирования архитектуры баз данных, создание и манипуляции с базами данных;
Опыт оптимизации запросов;
Понимание процессов CI/CD;
Опыт написания unit-тестов;
Python 3.5+;
Spark 2.2+;
Hadoop;
Hive;
Airflow;
Kubernetes (K8S);
SQLAlchemy;
PostgreSQL;
Greenplum;
PyTest / Unittest;
Flake8 / PyLint;
Black;
Docker;
Git, GitLab, CI/CD, разрешение конфликтов;
Shell, Linux.

условия

Полная занятость.

навыки

bigdata spark hadoop hive airflow kubernetes sqlalchemy postgresql greenplum pytest unittest docker git cicd shell linux

Добавить в отклики

Telegram В отклики