Platform Engineer z AI/LLM

Summary

Build and maintain a central AI platform runtime for 150+ dev teams, including LLM Gateway, model serving, vector storage, and Kubernetes-based infrastructure.

  • umowa B2B

  • kontrakt na 12 miesięcy

  • praca zdalna

  • start ASAP

  • obowiązkowy stand-up o 8:00

  • praca z terenu Uni Europejskiej

Dołącz do projektu budowy centralnej platformy AI, która będzie wykorzystywana przez ponad 150 zespołów developerskich. Celem jest zapewnienie wspólnej warstwy AI Infrastructure oraz Security & Governance dla produktów rozwijanych w organizacji. Projekt znajduje się na etapie greenfield, jednak część komponentów jest już zbudowana w środowiskach Azure i AWS. Obecnie brak warstwy self-hosted oraz pełnej telemetrii. Dostępne są już bazy danych oraz interfejs użytkownika. Brak dyżurów on-call i odpowiedzialności za incident management.

Główne Odpowiedzialności

  • Projektowanie, rozwój i utrzymanie runtime'u dla platformy AI.

  • Budowa i utrzymanie komponentów platformowych, takich jak:

    • warstwa LLM Gateway oraz model routing,

    • infrastruktura model serving i inference,

    • warstwa API oraz abstrakcje usług,

    • systemy vector storage i retrieval,

    • warstw cache oraz optymalizacja wydajności.

  • Projektowanie jednolitego interfejsu dostępu do usług AI.

  • Budowa i utrzymanie środowisk opartych na Docker i Kubernetes.

  • Wdrażanie Infrastructure as Code oraz praktyk GitOps.

  • Implementacja monitoringu i telemetrii platformy.

  • Zapewnienie bezpieczeństwa, w tym zarządzania dostępem i ochrony danych.

  • Optymalizacja wydajności i kosztów środowisk AI.

  • Współpraca z zespołami platformowymi oraz deweloperami.

  • Odpowiedzialność za projekt architektury oraz implementację.

Wymagania Kluczowe:

  • Doświadczenie w Platform Engineeringu.

  • Bardzo dobra znajomość Kubernetes i Docker.

  • Doświadczenie z CI/CD.

  • Doświadczenie z Terraform oraz Infrastructure as Code.

  • Znajomość architektury platformowej oraz umiejętność projektowania rozwiązań.

  • Doświadczenie doradcze i architektoniczne.

  • Znajomość ekosystemów AI/LLM, w szczególności:

    • model serving,

    • inference,

    • routing modeli,

    • LLM Gateway.

  • Doświadczenie z rozwiązaniami bezpieczeństwa dla AI, np. LLM Guard.

  • Znajomość zagadnień związanych z obserwowalnością, monitoringiem i bezpieczeństwem platform.

  • Doświadczenie w środowiskach hybrydowych i multi-cloud.

  • Wykształcenie wyższe (Bachelor lub Master) w obszarze Computer Science, Engineering lub pokrewnym.

See also

AI Engineering jobs by country — openings, pay and top skills →

Tailor your CV for this role?

We couldn't check your fit for this role — add a CV to your profile to see it next time.

A new version of freehire is available