Stellen Sie sich vor: Sie haben es geschafft. Nach wochenlanger Arbeit haben Sie eine eigene, private KI-Plattform für Ihr Unternehmen auf Basis von LibreChat oder OpenWebUI ausgerollt. Die Kollegen sind begeistert von den neuen Möglichkeiten. Doch nach dem ersten Monat klopft die Finanzabteilung und der CEO an. Die Frage ist nicht einmal die Höhe der Rechnung, sondern viel grundlegender: „Was bringt uns die KI konkret?“ Plötzlich wird klar: Sie investieren in KI, aber können den ROI dieser Initiativen nicht klar beziffern. Ihre Plattform ist eine Blackbox, die es unmöglich macht, zu bewerten, welche KI-Anwendungen echten Geschäftswert liefern und wo Sie Ihre Investitionen verstärken sollten. Dieses Szenario ist der Albtraum jedes IT-Verantwortlichen und der Grund, warum viele ChatGPT für Unternehmen Projekte ins Stocken geraten. Ohne detaillierte Einblicke in die Nutzung ist eine Kostenkontrolle unmöglich und der Nachweis des ROI wird zum reinen Ratespiel.

Wir bei innFactory AI Consulting standen vor genau dieser Herausforderung. Deshalb haben wir, gemeinsam mit unserer Muttergesellschaft innFactory GmbH, eine Lösung entwickelt. Heute geben wir sie an die Community zurück: das LibreChat Admin Dashboard, unser neues Open-Source-Projekt, das auch Teil unseres KI-Stacks im Rahmen des CompanyGPT ist.

Das Problem: Fehlende Einblicke in LibreChat

LibreChat ist eine exzellente Grundlage für den Aufbau einer privaten KI-Infrastruktur. Es fehlt ihm jedoch von Haus aus ein entscheidendes Feature: eine Admin-Oberfläche zur Analyse der Nutzung. Wie viele Benutzer verwenden das private GPT? Welche KI-Agenten und MCP Tools werden verwendet? Wie viele Suchen und Dateianalysen werden durch das System erledigt?  Und die wichtigste Frage von allen: Welche Anfragen und Modelle treiben die Kosten für die Token Abrechnung in die Höhe?

Ohne diese GPT Analyse navigieren Unternehmen im Blindflug oder sehen nur eine sehr oberflächliche Analyse durch ihre Azure Abrechnung am Monatsende. Genau hier setzen wir mit unserem Admin Dashboard an und liefern die dringend benötigten Instrumente.

Volle Transparenz mit dem LibreChat Admin Dashboard

Unser Dashboard ist ein schlankes, aber mächtiges Analyse-Werkzeug, das direkt auf die Datenbank Ihrer LibreChat-Instanz zugreift. Unter der liberalen MIT-Lizenz auf GitHub veröffentlicht und sofort per Docker einsetzbar, liefert es Ihnen auf einen Blick alle entscheidenden Kennzahlen. Im Rahmen unseres CompanyGPT Stacks wird dieses Werkzeug ab sofort mitgeliefert, wenn sie dies wünschen.

Schauen wir uns an, welche Einblicke das Dashboard in der Praxis liefert:

Das LibreChat Admin Dashboard liefert alle wichtigen Metriken zur Nutzungsanalyse auf einen Blick.

Das Dashboard gibt Ihnen die Werkzeuge an die Hand, um die Nutzung Ihrer KI-Plattform zu verstehen:

• Nutzungs-KPIs auf einen Blick: Sie sehen sofort, dass in dem gewählten Zeitraum 6 der insgesamt 21 Nutzer aktiv waren und 185 Anfragen in 48 Konversationen gestellt haben. Besonders aufschlussreich ist der Vergleich zur Vorperiode: Die Nutzerzahlen sind zwar gesunken, die Anzahl der Konversationen und der verarbeiteten Dateien ist jedoch deutlich gestiegen (+17 bzw. +24). Das deutet darauf hin, dass die verbleibenden Nutzer die Plattform intensiver und für komplexere Aufgaben einsetzen.
• Detaillierte Token-Analyse: Das Dashboard schlüsselt die Token Metriken fein säuberlich auf. Im Beispiel wurden 1,01 Millionen Input-Token verbraucht, aber nur rund 105.000 Output-Token generiert. Dies ist ein starkes Indiz dafür, dass die Nutzer sehr lange Dokumente oder komplexe Anweisungen an die KI übergeben (hoher Input), aber prägnante, kurze Antworten erhalten (geringer Output) – ein typisches Muster für Analyse- und Recherche-Aufgaben.
• Einblicke in die Tool-Nutzung: Die Metriken „MCP Calls“ und „Web Searches“ sind entscheidend, um die Nutzung von angebundenen Werkzeugen (Tools der Agenten) zu verstehen. Ein starker Anstieg bei MCP-Aufrufen (+13) zeigt, dass Ihre Nutzer lernen, die wahren Stärken der KI auszuspielen: die Interaktion mit anderen Systemen.
• Die Wahrheit liegt in den Agenten: Die Tabelle „AI Agent Statistics“ ist das Herzstück der Analyse. Hier sehen Sie schwarz auf weiß, welche Agenten den größten Wert stiften. Im Beispiel dominieren die Agenten „Recherche“ und „CompanyGPT Doku“ mit 37 bzw. 35 Aufrufen. Andere, wie der „Meeting Protokolle Agent“, werden kaum genutzt. Das sind unbezahlbare Informationen! Sie können nun gezielt die populären Agenten bewerben, Schulungen für weniger genutzte Tools anbieten oder deren Funktionalität hinterfragen.

Ein Analyse-Tool, kein Abrechnungs-Tool

Ein wichtiger Hinweis: Das Dashboard dient der Analyse und dem Monitoring, nicht der finalen Token Abrechnung. Die exakten Kostendaten kommen weiterhin direkt von Ihrem Cloud-Anbieter (z.B. aus dem Azure Cost Management). Unser Tool greift auf die Transaktionsdaten in der LibreChat-Datenbank zurück. Es ist Ihr Frühwarnsystem, mit dem Sie Kostentreiber identifizieren und die Nutzung optimieren, lange bevor die Rechnung Sie überrascht.

Ein zentraler Baustein unserer CompanyGPT-Architektur

Für uns ist dieses Dashboard mehr als nur ein nützliches Werkzeug. Es ist ein fundamentaler Baustein unserer CompanyGPT KI-Architektur. Mit CompanyGPT bieten wir Unternehmen eine schlüsselfertige, DSGVO-konforme und sichere KI-Plattform, die in der kundeneigenen Cloud-Infrastruktur betrieben wird. Transparenz und Kontrolle sind dabei keine optionalen Add-ons, sondern Kern unseres Versprechens. Das Dashboard ist der logische nächste Schritt, um dieses Versprechen zu untermauern.

Ein Blick in die Praxis: Unsere eigenen KI Nutzungsdaten bei innFactory

Doch genug der Theorie. Um zu zeigen, dass dies mehr ist als nur ein weiteres Tool, leben wir diese Transparenz bei innFactory selbst. Die Frage, ob neue KI-Werkzeuge wie unser CompanyGPT oder GitHub Copilot wirklich im Unternehmen ankommen, ist entscheidend für den Erfolg. Ein Blick auf die realen Nutzungsdaten unseres eigenen Teams im vierten Quartal 2025 liefert eine klare und beeindruckende Antwort:

Die Zahlen für unsere 30 aktiven Nutzer im Vergleich zum Vorquartal (Q3) sprechen für sich:

• Anfragen: +4.833 auf über 16.000
• Konversationen: +365 auf fast 1.900
• Verarbeitete Input-Token: +74,65 Millionen auf über 207 Millionen

Diese massive Steigerung, insbesondere bei den Input-Token, zeigt uns zwei Dinge: Erstens, die Mitarbeiter nutzen die KI-Tools nicht nur häufiger, sondern auch für immer komplexere Aufgaben. Zweitens, die Kombination aus der Bereitstellung der Werkzeuge und gezielten Schulungen führt zu einer nachhaltigen und tiefen Verankerung im Arbeitsalltag. Intern wird die Nutzung unseres CompanyGPT wohl nur noch von GitHub Copilot in der Softwareentwicklung übertroffen. Diese datengestützte Erkenntnis erlaubt es uns, den Erfolg messbar zu machen und zukünftige Investitionen in KI-Kompetenzen gezielt zu steuern.

Holen Sie sich die Kontrolle über Ihre KI-Plattform zurück!

Wir haben das LibreChat Admin Dashboard ab sofort fest in unseren CompanyGPT-Stack integriert.

Für unsere bestehenden CompanyGPT-Kunden: Melden Sie sich bei uns! Sie können ab sofort von diesem neuen Analyse-Werkzeug profitieren und erhalten damit eine nie dagewesene Transparenz über die Nutzung und die Kosten Ihrer KI-Plattform. Im Rahmen der monatlichen Wartung entstehen für Sie darüber hinaus auch keine zusätzlichen Kosten für die Aktivierung.

Sie suchen nach einer sicheren, transparenten und leistungsstarken KI-Lösung für Ihr Unternehmen? Dann ist jetzt der richtige Zeitpunkt für ein Gespräch. Besuchen Sie company-gpt.com, um mehr über unseren Ansatz zu erfahren und wie wir Sie auf dem Weg zu einer datengesteuerten KI-Strategie begleiten können.

Und für alle Entwickler und Tüftler: Besuchen Sie unser Projekt auf GitHub. Wir freuen uns über Ihr Feedback, Ihre Ideen und Ihre Contributions.