Zum Hauptinhalt springen
Custom AI Development · On-Premises KI

KI, die auf Ihren eigenen Servern läuft.

On-Premises bedeutet, dass die Anwendung in Ihrem Haus verarbeitet wird. Die Daten verlassen das Unternehmen nicht. Wir klären das Betriebsmodell, beraten zur passenden Hardware und richten den Betrieb ein, auf Wunsch bis zum Betrieb ganz ohne Netzverbindung.

Einordnung

On-Premises beschreibt den Ort der Verarbeitung.

On-Premises KI bedeutet, dass die Modelle auf Ihrer eigenen Hardware laufen, in Ihrem Rechenzentrum oder in einer abgesicherten Umgebung, die Sie kontrollieren. Es gibt keine externe Schnittstelle, an die Daten gesendet werden. Das ist der Kern des Unterschieds zu einem Betrieb über eine Cloud-Schnittstelle.

Diese Seite beschäftigt sich mit der Frage, wo die Anwendung läuft. Welche Modelle darin arbeiten, beschreibt die Seite zu Private LLM. Die rechtliche Bewertung des Einsatzes behandelt die Seite zu DSGVO-konformer KI.

AspektBetrieb über Cloud-SchnittstelleOn-Premises
Ort der DatenAuf Servern des AnbietersAuf Ihrer eigenen Hardware
AbhängigkeitVom Anbieter und dessen SchnittstelleVon der eigenen Infrastruktur
Betrieb ohne NetzNicht möglichMöglich
AuslastungNutzungsabhängig abgerechnetFeste, planbare Ressourcen
Wann sinnvoll

On-Premises ist nicht immer die richtige Wahl.

Ob On-Premises passt, hängt vom Anwendungsfall ab. Die folgende Gegenüberstellung zeigt, wann der Betrieb im Haus sinnvoll ist und wann ein anderer Weg genügt.

On-Premises passt, wenn

  • mit sensiblen Daten gearbeitet wird, etwa Verträgen, Personaldaten oder Gesundheitsdaten
  • regulatorische Vorgaben eine Verarbeitung im Haus verlangen
  • keine Abhängigkeit von externen Anbietern gewünscht ist
  • ein Betrieb ohne Netzverbindung erforderlich ist

Ein anderer Weg genügt, wenn

  • keine eigene Hardware betrieben werden soll
  • schnelle Skalierung wichtiger ist als der Ort der Verarbeitung
  • die verarbeiteten Daten nicht besonders schützenswert sind
  • zunächst nur ein erster Anwendungsfall getestet werden soll
Die Ausstattung

Der Hardware-Bedarf richtet sich nach Modell und Nutzung.

Entscheidend ist, wie groß das eingesetzte Modell ist und wie viele Anfragen parallel bearbeitet werden. Die folgende Einordnung gibt eine grobe Orientierung. Die konkrete Ausstattung stimmen wir im Erstgespräch ab.

KlasseGeeignet fürTypische Ausstattung
EinstiegErste Anwendungsfälle, kleine Teams, PrototypenEine leistungsfähige GPU
ProduktivbetriebRegelmäßige Nutzung durch mehrere PersonenMehrere GPUs oder eine größere Rechenzentrums-GPU
Höhere AuslastungViele Nutzer, große Modelle, eigenes Anpassen der ModelleMehrere Rechenzentrums-GPUs

Ein Start ist auch ohne eigene Hardware möglich, etwa in einer abgesicherten Umgebung ohne Zugriff durch Dritte. Eine spätere Verlagerung auf eigene Server ist vorgesehen, wenn dies gewünscht ist.

Der Ablauf

So richten wir den Betrieb im Haus ein.

01

Anforderungen und Sicherheitsstufe

Wir klären, welche Daten verarbeitet werden, welche Anforderungen an den Datenschutz bestehen und ob ein Betrieb ohne Netzverbindung erforderlich ist.

02

Hardware und Betriebsmodell

Wir beraten zur passenden Ausstattung und legen fest, ob der Betrieb auf eigenen Servern, im eigenen Rechenzentrum oder in einer abgesicherten Umgebung stattfindet.

03

Installation und Absicherung

Wir installieren die Anwendung, richten Zugriffskontrolle und Protokollierung ein und binden sie an Ihre bestehenden Systeme an.

04

Betrieb und Übergabe

Wir übernehmen auf Wunsch Betrieb und Wartung oder übergeben an Ihr Team, mit Dokumentation und Schulung. Die Prüfung auf Konformität beschreibt Säule 3.

Häufige Fragen

Fragen zu On-Premises KI.

Was bedeutet On-Premises KI?

Die KI-Anwendung läuft auf Ihren eigenen Servern, in Ihrem Rechenzentrum oder in einer abgesicherten Umgebung, die Sie kontrollieren. Die Daten verlassen das Unternehmen nicht.

Wann ist On-Premises sinnvoll?

Wenn mit sensiblen Daten gearbeitet wird, wenn regulatorische Vorgaben eine Verarbeitung im Haus verlangen oder wenn keine Abhängigkeit von externen Anbietern gewünscht ist. Auch ein Betrieb ganz ohne Netzverbindung ist möglich.

Welche Hardware wird benötigt?

Der Bedarf richtet sich nach Modellgröße und Nutzung. Für kleinere Anwendungen genügt eine einzelne leistungsfähige GPU, für den Produktivbetrieb werden mehrere oder größere GPUs eingesetzt. Wir beraten zur passenden Ausstattung.

Kann man auch ohne eigene Hardware starten?

Ja. Ein Start ist auch in einer abgesicherten Umgebung ohne Zugriff durch Dritte möglich. Eine spätere Verlagerung auf eigene Server ist vorgesehen, wenn dies gewünscht ist.

Wir prüfen, ob On-Premises für Ihren Anwendungsfall passt.

Im Erstgespräch klären wir Sicherheitsstufe, Hardware und Betriebsmodell. Die erste Einschätzung ist kostenlos.

Erstgespräch vereinbaren →