Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории
data engineer
сопроводительное письмо
описание
Legal AI платформа строится для рынков UAE и MENA как единый источник законодательства, судебной практики и комплаенса с AI-ассистентом. Вам нужно будет разрабатывать сервис сбора данных из веба, PDF и документов, поддерживать краулеры и парсеры через Playwright, извлекать текст и таблицы из PDF с приведением к структуре, использовать LLM для извлечения сущностей, классификации и нормализации данных, строить асинхронные data-пайплайны через брокеры сообщений, реализовывать версионирование, дедупликацию и контроль изменений данных, разрабатывать бэкенд и API на Python.
требования
- Уверенный Python для бэкенда и понимание асинхронности.
- Опыт с FastAPI или Litestar.
- Практика web scraping и Playwright.
- Опыт парсинга PDF.
- Хорошее владение SQL и PostgreSQL или аналогами.
- Понимание очередей и event-driven архитектуры.
- Будет плюсом Kafka, RabbitMQ, NATS, LLM, RAG, embeddings (OpenAI, HuggingFace, локальные модели), Airflow, Prefect, Celery, RQ, Docker, CI/CD, Kubernetes, Elasticsearch, Qdrant, опыт data quality и контроля актуальности данных.
условия
- Полная удалёнка.