Micha, Pexon Consulting | 10 Min. Lesezeit | 22.07.2026
TL;DR
Eine private Claude Desktop Alternative läuft komplett im eigenen Netz: self-hosted Hermes-Modelle, Guardrails, PII-Redaction vor jedem LLM-Call, persistentes Memory und private Websuche über Firecrawl. Kein Datensatz verlässt das Firmennetz. Pexon baut diese souveräne Alternative passgenau für regulierte Unternehmen, als 6-Wochen-Pilot.
Das Problem: Der Desktop-Assistent sieht alles
Claude Desktop und agentische Arbeitsumgebungen wie Cowork sind mächtig, weil sie Zugriff bekommen: auf Dateien, auf Kontext, auf das, woran der Nutzer gerade arbeitet. Genau das macht sie für regulierte Unternehmen zum Problem. Ein Assistent, der Mandantenakten, Kreditunterlagen oder Patientendaten sieht und dabei an eine US-Cloud spricht, ist in vielen Branchen schlicht nicht erlaubt.
Die übliche Antwort ist Verzicht: kein KI-Assistent für die sensiblen Bereiche. Das ist teuer, weil genau dort die Produktivitätsgewinne liegen. Die bessere Antwort ist eine private Alternative, die dieselbe Arbeit leistet, aber das Firmennetz nie verlässt. Technisch ist das 2026 machbar, und es besteht aus vier Bausteinen.
Baustein 1: Self-hosted Modell statt Cloud
Das Herz ist ein Open-Weight-Modell auf eigener Hardware, etwa Hermes 4 über vLLM. Kein Anthropic, kein OpenAI, keine externe API. Der Assistent denkt lokal. Das kostet etwas Modell-Qualität gegenüber Claude Opus, gibt dafür aber vollständige Datenhoheit. Für regulierte Umgebungen ist dieser Tausch fast immer richtig, wie wir im Detail bei der self-hosted Claude-Alternative mit dem Hermes-Agent beschreiben.
Baustein 2: Guardrails und PII-Redaction vor jedem Call
Der entscheidende Sicherheitsbaustein sitzt vor dem Modell. Bevor ein Prompt das Modell erreicht, laufen zwei Schichten: Guardrails gegen manipulierte Eingaben und eine PII-Redaction, die personenbezogene Daten ersetzt. Selbst wenn ein Teil der Verarbeitung doch einmal extern liefe, wären die sensiblen Felder bereits neutralisiert.
# PII-Redaction vor dem LLM-Call: Namen, Mails, IBANs maskieren
import re
def redact_pii(text: str) -> str:
text = re.sub(r"[A-Za-z0-9._%+-]+@[A-Za-z0-9.-]+", "[EMAIL]", text)
text = re.sub(r"bDEd{20}b", "[IBAN]", text) # deutsche IBAN
text = re.sub(r"bd{2}[./]d{2}[./]d{2,4}b", "[DATUM]", text)
return text
# im Netz bleibt der Klartext, das Modell sieht nur die maskierte Variante
sicherer_prompt = redact_pii(roher_prompt)
Das Beispiel ist bewusst simpel. In der Praxis kommt eine NER-basierte Erkennung dazu, die auch Namen und Adressen ohne festes Muster findet. Der Punkt bleibt: Redaction ist kein optionaler Feinschliff, sondern die Bedingung dafür, dass ein Assistent überhaupt an sensible Daten darf. Die Guardrail-Seite gegen aktive Angriffe vertiefen wir separat (siehe Verwandte Themen).
Baustein 3: Persistentes Memory im eigenen Netz
Ein nützlicher Assistent vergisst nicht nach jeder Sitzung. Er merkt sich Kontext, Präferenzen und frühere Entscheidungen. In der Cloud-Variante liegt genau dieses Gedächtnis beim Anbieter, und das ist bei sensiblen Daten das größte Leck. Eine private Alternative hält das Memory in einer Datenbank im eigenen Netz, verschlüsselt und unter eigener Kontrolle. Das Langzeitwissen des Assistenten wird so zum Firmen-Asset statt zum Anbieter-Asset, dieselbe Logik, die auch hinter self-hosted Agenten steht (siehe Verwandte Themen).
Baustein 4: Private Websuche ohne Datenabfluss
Assistenten brauchen aktuelle Informationen, und dafür Websuche. Der naive Weg schickt die Suchanfrage an eine externe API und verrät damit, wonach das Unternehmen gerade sucht. Das kann selbst ein Datenleck sein. Die private Variante kapselt die Suche: Ein Dienst wie Firecrawl oder eine kontrollierte Such-API läuft als Proxy, der nur die nötige Anfrage nach außen gibt, das Ergebnis säubert und an den Agenten zurückreicht. Der Agent selbst spricht nie direkt mit dem offenen Netz. So bekommt der Assistent frische Fakten, ohne dass interne Absichten nach außen sickern.
Für wen sich das lohnt, und für wen nicht
Unsere klare Empfehlung: Eine private Claude Desktop Alternative lohnt sich, wenn Regulatorik oder Datenklasse eine Cloud ausschließen, also bei Berufsgeheimnisträgern nach §203 StGB, in KRITIS-Umgebungen oder unter BaFin-Aufsicht. Dann ist der Mehraufwand gegenüber einem Cloud-Assistenten gut investiert.
Für ein Marketing-Team ohne sensible Daten ist er dagegen Overkill. Dort ist der Cloud-Assistent schneller und günstiger, und die Datenhoheit kein K.-o.-Kriterium. Die ehrliche Antwort hängt also nicht an der Technik, sondern an Ihrer Datenklasse. Den rechtlichen Rahmen dazu behandeln wir in der Übersicht zur Datensouveränität bei KI-Plattformen.
Häufig gestellte Fragen
Was ist eine private Claude Desktop Alternative?
Ein KI-Assistent mit ähnlichem Funktionsumfang wie Claude Desktop, der aber komplett im eigenen Firmennetz läuft: self-hosted Modell, lokales Memory, Guardrails und private Suche. Kein Prompt und kein Dokument verlässt das Netz, was ihn für regulierte Umgebungen nutzbar macht.
Wie funktioniert PII-Redaction vor dem LLM-Call?
Eine vorgelagerte Schicht ersetzt personenbezogene Daten wie Namen, E-Mails oder IBANs durch Platzhalter, bevor der Text das Modell erreicht. In der Praxis kombiniert man feste Muster mit einer NER-Erkennung. So sieht das Modell nur die maskierte Variante, der Klartext bleibt im geschützten Bereich.
Kann ein privater Assistent im Web suchen, ohne Daten preiszugeben?
Ja, über einen gekapselten Such-Proxy wie Firecrawl oder eine kontrollierte Such-API. Der Agent spricht nicht direkt mit dem offenen Netz, sondern der Proxy gibt nur die nötige Anfrage nach außen und säubert das Ergebnis. So bleiben interne Suchabsichten im Haus.
Wie gut ist ein self-hosted Modell im Vergleich zu Claude?
Bei sehr komplexem Reasoning liegt Claude Opus vorn. Für den Großteil der Assistenz-Aufgaben, also Zusammenfassen, Suchen, Entwürfe, strukturierte Extraktion, reicht ein starkes Open-Weight-Modell wie Hermes 4. Der Tausch ist etwas Qualität gegen volle Datenhoheit.
Was kostet eine private KI-Assistenz-Lösung?
Der Aufbau umfasst Modell-Hosting, Guardrails, Memory und Such-Proxy und lässt sich als 6-Wochen-Pilot für einen abgegrenzten Anwendungsfall umsetzen. Die laufenden Kosten sind vor allem GPU und Betrieb, dafür fallen keine nutzungsbasierten Cloud-Kosten für sensible Anfragen an.
Nächster Schritt
Sie brauchen KI-Assistenz in einem Bereich, in dem die Cloud nicht erlaubt ist? Wir klären in einem kurzen Gespräch, welcher Anwendungsfall sich als private, souveräne Alternative lohnt und wie die Architektur bei Ihnen aussieht.
Verwandte Themen
→GenAI Security: Prompt Injection und Datenabfluss
→nanobot: Self-hosted AI-Agent zum Selbstbesitzen



