Data Engineer (k/m/x) – Python / Rust / Qdrant

Warszawa
Kontrakt B2B90-95 złnetto / godz.
Oferta wygasa za:90 dni
Tryb pracyZdalna
Rodzaj umowyKontrakt B2B
Tryb rekrutacjiRekrutacja stacjonarna
Wymiar etatuPełny etat

O projekcie

Projekt związany z budową i rozwojem rozwiązań przetwarzających dane nieustrukturyzowane na potrzeby systemów sztucznej inteligencji

Tworzenie pipeline'ów danych obsługujących dokumenty, obrazy i nagrania audio, rozwój procesów ETL, OCR, transkrypcji oraz ekstrakcji informacji

Przetwarzane dane będą wykorzystywane do generowania embeddingów, indeksowania i wyszukiwania semantycznego oraz zasilania repozytoriów danych i systemów AI

Twój zakres obowiązków

  • Projektowanie, budowa i rozwój pipeline'ów do przetwarzania danych nieustrukturyzowanych
  • Tworzenie procesów ETL obsługujących dokumenty, obrazy i nagrania audio
  • Implementacja mechanizmów OCR, transkrypcji audio i ekstrakcji informacji
  • Generowanie i przetwarzanie embeddingów na potrzeby rozwiązań AI
  • Praca z wektorowymi bazami danych, w szczególności Qdrant
  • Projektowanie mechanizmów indeksowania i wyszukiwania semantycznego
  • Tworzenie i integracja REST API
  • Integracja procesów przetwarzania danych z systemami zewnętrznymi i architekturą zdarzeniową

Nasze wymagania

  • Dobra znajomość Pythona i/lub Rust (wystarczy jeden z tych języków)
  • Praktyczne doświadczenie w projektowaniu i budowaniu pipeline'ów danych oraz procesów ETL
  • Doświadczenie w pracy z wektorowymi bazami danych, w szczególności Qdrant lub podobnymi rozwiązaniami
  • Znajomość embeddingów, wyszukiwania semantycznego, indeksowania i filtrowania po metadanych
  • Doświadczenie w tworzeniu i integracji REST API
  • Znajomość architektury zdarzeniowej, np. Apache Kafka lub Google Pub/Sub
  • Dobra znajomość systemu Linux
  • Doświadczenie z relacyjnymi bazami danych, np. PostgreSQL
  • Znajomość FastAPI
  • Doświadczenie z Docker, Kubernetes i CI/CD
  • Znajomość GCP, BigQuery, Dataflow i Dataproc
  • Doświadczenie z Apache Airflow, Apache Spark lub Apache Beam
  • Znajomość technologii OCR, transkrypcji audio i konwersji dokumentów
  • Doświadczenie z Neo4j, Knowledge Graph, RAG lub GraphRAG

To oferujemy

  • Kontrakt B2B
  • Stawka 95 PLN netto/h + VAT
  • Preferowany start: ASAP
  • Możliwość pracy nad rozwiązaniami wykorzystującymi sztuczną inteligencję i nowoczesne technologie przetwarzania danych
  • Wsparcie formalne od dokumentów po onboarding

Benefity

Możliwość pracy zdalnej
Karta sportowa
Prywatna opieka medyczna
Zainteresowała Cię ta oferta?Aplikuj na to stanowisko!
Klauzula informacyjna
Kontrakt B2B90-95 złnetto / godz.

Oferty wybrane dla Ciebie

Oferty wybrane dla Ciebie