Аналитик данных в ML-модерации

Привет! Это команда Обработки данных в отделе ML-модерации. Мы ищем начинающего специалиста, которому интересно работать на стыке ML и данных. Команда состоит из опытных и весёлых аналитиков данных, которые всегда готовы прийти на помощь в трудную минуту! ML-модерация наполнена различными процессам обработки и проверки пользовательских данных, поэтому в нашу команду могут прилетать абсолютно разные задачи связанные с анализом данных и моделей, исследованиями новых подходов к оценке качества существующих решений, разработку новых продуктовых решений и многое другое.

• Тестировать новые алгоритмы обработки и исследования данных, а также выстраивать автоматизированые процессы, для упрощения жизни.
• Организовывать и планировать хранение больших данных.
• Писать sql–запросы в различные БД.
• Обрабатывать данные с помощью spark.
• Использовать различные ML-модели для автоматической проверки данных.
• Строить и изучать зависимости с помощью инструментов python.

• Знание основных библиотек Python (в том числе регулярные выражения).
• Знание теории вероятностей и математической статистики.
• Понимание устройства DWH системы.
• Умение работать с hdfs и pyspark.
• Знание SQL (диалекты clickhouse, vertica), умение оптимизировать запросы.
• Понимание и использование ML-алгоритмов для анализа данных желательно.
• Будет плюсом: Grafana; Superset; AirFlow; опыт работы с запросами http/grpc, в том числе через swagger; опыт работы с CI/CD пайплайнами в gitlab; опыт работы c NVIDIA Triton Inference Server и docker

• Условий в вакансии нет