Sovereign AI Plattform Engineer (m/w/d/x)
Deutsche Telekom AG –
Bonn
Gehalt: Von 58.500,00 € bis 152.900,00 €
Gehalt: Von 58.500,00 € bis 152.900,00 €
Über T-Systems International GmbHBei T-Systems bieten wir unseren Geschäftskunden die richtigen Systemlösungen für ihr digitales Business. Mit unserem Portfolio stellen wir sicher, dass digitale Transformation Komplexität reduziert, Kosten einspart und die alltägliche Arbeit erleichtert. Unsere Schwerpunkte sind Konnektivität, Digital, Cloud & Infrastruktur sowie Sicherheit – Let's power higher performance!Über die PositionAls Platform Engineer mit Schwerpunkt Sovereign AI entwickeln, implementieren und betreiben Sie eine sichere und leistungsfähige KI-Toolchain für den Einsatz in isolierten oder besonders geschützten IT-Umgebungen.Sie gestalten Kubernetes-basierte Plattformen für KI-Inferenz, Retrieval, Experimente und agentenbasierte Anwendungen. Dabei integrieren und betreiben Sie Open-Source- und Open-Weight-Modelle, Model-Serving-Lösungen, Model Gateways, Vektordatenbanken sowie interne Benutzeroberflächen und Schnittstellen.Mit Infrastructure as Code, GitOps und automatisierten Deployment-Prozessen schaffen Sie stabile, reproduzierbare und auditierbare Plattformumgebungen. Sie verwalten private Registries, lokale Paket- und Modell-Repositories, Secrets, Zugriffsrechte, Storage, Netzwerkkomponenten und Observability-Lösungen in Umgebungen mit eingeschränkter oder vollständig unterbundener Anbindung an öffentliche Cloud-Dienste.Darüber hinaus optimieren Sie GPU-, CPU-, Storage- und Netzwerkressourcen für zuverlässige KI-Workloads und stellen sicher, dass Sicherheits-, Audit- und Datensouveränitätsanforderungen eingehalten werden.Must-have-Kenntnisse
- Mindestens fünf Jahre Erfahrung im Platform Engineering, DevOps, Site Reliability Engineering oder MLOps
- Sehr gute Kenntnisse in Kubernetes und Linux
- Erfahrung mit KI-Infrastrukturen, Model Serving und LLM-basierten Anwendungen
- Erfahrung mit privaten, On-Premises- oder isolierten Deployment-Umgebungen
- Gute Kenntnisse in Python, Terraform, Ansible, Helm und GitOps
- Fundierte Kenntnisse in den Bereichen Netzwerk, Storage, Zugriffskontrolle und Monitoring
- Erfahrung mit GPU-gestützten Plattformen und der Optimierung von KI-Workloads
- Sehr gutes Verständnis von IT-Sicherheit, Datensouveränität und auditierbaren Betriebsmodellen
- Sehr gute Deutschkenntnisse in Wort und Schrift auf C1-Niveau
- Erfahrung mit vLLM, Ollama, llama.cpp oder vergleichbaren Model-Serving-Lösungen
- Kenntnisse im Umgang mit Open-Source- oder Open-Weight-Modellen
- Erfahrung mit Vektordatenbanken wie Qdrant und Retrieval-Augmented Generation
- Kenntnisse in Argo CD, privaten Registries und lokalen Paket- oder Modell-Repositories
- Erfahrung mit Open WebUI oder vergleichbaren internen KI-Oberflächen
- Kenntnisse in GPU-Scheduling, LLMOps, Observability und Air-Gap-Umgebungen
- Erfahrung mit VS-Code-kompatiblen Integrationen und internen KI-Schnittstellen