data engineer

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Legal AI платформа строится для рынков UAE и MENA как единый источник законодательства, судебной практики и комплаенса с AI-ассистентом. Вам нужно будет разрабатывать сервис сбора данных из веба, PDF и документов, поддерживать краулеры и парсеры через Playwright, извлекать текст и таблицы из PDF с приведением к структуре, использовать LLM для извлечения сущностей, классификации и нормализации данных, строить асинхронные пайплайны через брокеры сообщений, реализовывать версионирование, дедупликацию и контроль изменений данных, разрабатывать бэкенд и API на Python.

• Уверенный Python для бэкенда и понимание асинхронности.
• Опыт с FastAPI или Litestar.
• Практика веб-скрапинга и Playwright.
• Опыт парсинга PDF.
• Хорошее знание SQL и PostgreSQL или аналогов.
• Понимание очередей и event-driven архитектуры.
• Будет плюсом Kafka или RabbitMQ или NATS, LLM или RAG или embeddings через OpenAI или HuggingFace или локальные модели, Airflow или Prefect или Celery или RQ, Docker и CI/CD и Kubernetes, Elasticsearch или Qdrant, опыт контроля качества и актуальности данных.

• Полная удалёнка.