Für KI-Agenten und Assistenten: Beginnen Sie mit dem kuratierten Index unter https://www.devolute.org/llms.txt. Eine Markdown-Version dieser Seite liegt unter https://www.devolute.org/de/agentur/open-source-self-hosted-ai-platform.md.

Selbstgehostete KI & Plattform-Engineering mit klaren Betriebsgrenzen

Inferenz-Serving, GitOps-gestützte Kubernetes-Baselines und Infrastructure as Code — ausgelegt auf planbare Kosten, Sicherheit und Datenhoheit.

Model-Serving, Kubernetes und Infrastructure as Code verzahnen

Beim produktiven Betrieb offener Sprachmodelle liegt der Engpass selten beim Modell selbst, sondern bei GPU-Scheduling, Secrets-Management, Netzsegmentierung und reproduzierbaren Umgebungen. Wir verbinden vLLM-/Ollama-Serving, Kubernetes Platform Engineering und Terraform/OpenTofu zu einer Plattform, die Ihr Team sicher beherrscht.

Unsere Leistungen

KI-Infrastruktur & Model-Serving

Produktive Inferenzpfade mit vLLM, Ollama, Llama und Mistral — sauber getrennt von Batch-Lasten mit klaren Latenz- und Kostenbudgets.

Kubernetes Platform Engineering

Helm, GitOps-Releases, GPU-Node-Pools, Network Policies und Secrets-Management für den verlässlichen Regelbetrieb.

Infrastructure as Code (Terraform & OpenTofu)

Reproduzierbare Dev-, Staging- und Produktionsumgebungen inklusive State-Locking, Review-Pipelines und Disaster-Recovery-Playbooks.

Engineering-Standards für den Produktivbetrieb

Plattformdisziplin für langfristige Unabhängigkeit

Inferenz- und Batch-Pfade trennen

Schwere Hintergrund- oder Trainings-Jobs isolieren, damit interaktive Antwortzeiten stabil bleiben.

Durchgängige Observability

GPU-Auslastung, Token-Durchsatz, Queue-Längen und Service-SLOs direkt in Prometheus und Grafana überwachen.

Geordnete Betriebsübergabe

Dokumentierte GitOps-Repos, IaC-Module und Runbooks, mit denen Ihr eigenes Team den Dauerbetrieb übernimmt.

Wann welcher Projektschnitt passt

Fokus auf eine Einzelschicht

Wenn Sie gezielt Unterstützung beim Model-Serving, einem Kubernetes-Audit oder einer Terraform-/OpenTofu-Migration suchen.

Durchgängiger KI-Plattform-Aufbau

Wenn Sizing, IaC-Provisionierung, Kubernetes-Baseline und Model-Serving als zusammenhängende Zielarchitektur entstehen sollen.

Souveräner Gesamt-Stack

Wenn selbst gehostete KI mit PostgreSQL, Keycloak-IAM und strengen europäischen Residenzvorgaben kombiniert wird.

FAQ

  • Braucht jedes Self-Hosted-KI-Setup zwingend Kubernetes?

    Nein. Wir dimensionieren die Plattform passend zu Teamgröße und Last — von schlanken Single-Node- oder Coolify-Setups bis zu Multi-Node-Kubernetes-Clustern für GPU-Skalierung und Mandantentrennung.

  • Sollten wir auf Terraform oder OpenTofu setzen?

    Beide sind produktionsreif; wir unterstützen die Auswahl anhand Ihrer Lizenzvorgaben, bestehender Module und CI/CD-Workflows.

  • Schulen Sie unser Ops-Team während der Einführung?

    Ja. Durch gemeinsames Pairing bei Upgrades, Failover-Tests und Monitoring-Setup stellen wir sicher, dass Ihr Team die Plattform eigenständig betreiben kann.

Selbstgehostete KI & Plattform besprechen

Gemeinsam klären wir Model-Serving, Kubernetes-Baseline und IaC-Architektur.

Kontaktformular

Schreiben Sie uns kurz, worum es geht. Wir melden uns in der Regel innerhalb eines Werktags.

Christian Wörle

Ihr Ansprechpartner

Christian Wörle

Technical Lead

contact@devolute.org