Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
data engineer
генерация резюме
сопроводительное письмо
описание
Trust Wallet — ведущий некстодиальный кошелёк для криптовалют, которому доверяют более 200 миллионов человек по всему миру для безопасного управления и роста их цифровых активов. Поддерживает более 10 миллионов активов на 100+ блокчейнах, предлагает бесшовный мультичейн-опыт на основе передовых технологий само-хранения, активного сообщества и растущей экосистемы партнёров.
задачи
- Проектировать и поддерживать надёжную масштабируемую защищённую инфраструктуру данных на AWS с использованием Databricks;
- Разрабатывать и поддерживать конвейеры данных с помощью Airbyte и кастомных сервисов на Go для автоматизации загрузки и ETL-процессов;
- Управлять созданием и поддержкой озера данных, обеспечивая эффективное хранение, высокое качество данных, партиционирование, организацию, производительность, мониторинг и оповещения;
- Интегрировать инструменты вроде Airbyte с источниками данных и настраивать потоки под нужды бизнеса, строить кастомные коннекторы на Go;
- Оптимизировать конвейеры данных и хранение озера для производительности и масштабируемости с низкой задержкой и высокой доступностью;
- Внедрять практики управления данными, безопасности и комплаенса в AWS и Databricks, включая контроль доступа, шифрование и мониторинг;
- Сотрудничать с инженерами платформы, аналитиками данных и стейкхолдерами, понимать требования к данным и документировать инфраструктуру, процессы и практики.
требования
- 3+ Года опыта дата-инженера с фокусом на архитектуру озера данных и разработку ETL-конвейеров;
- Сильный опыт с Databricks и сервисами AWS: S3, Glue, Lambda, Redshift, IAM;
- Практика с Airbyte или похожими ETL-инструментами для загрузки и трансформации данных;
- Опыт написания сервисов и коннекторов на Python/Go для автоматизации конвейеров данных;
- Понимание моделирования данных, SQL и концепций баз данных;
- Опыт внедрения практик безопасности и управления данными в облаке;
- Будет плюсом опыт в других областях дата-инженерии.
условия
- Полная удалёнка с гибким графиком;
- Конкурентная зарплата и бонусы;
- Работа в глобальной организации с плоской структурой и международными командами;
- Отличные возможности обучения и карьерного роста;
- Работа с разнообразными экспертами мирового уровня над быстрыми вызовами.
навыки