Zum Inhalt springen
Kostenlos · Keine Anmeldung · Anonym

Wie gut ist Ihr Chatbot wirklich?

Speed, Antwort-Qualität, DSGVO, UI: eine Note von 0 bis 10 mit Side-by-Side-Vergleich zu bis zu drei weiteren Websites. Plus konkrete Verbesserungshinweise. Automatisierte Momentaufnahme, ohne Gewähr.

4-Layer Score
15 Chatbot-Tools erkannt
Wettbewerber Vergleich

Was prüft der Chatbot-Quality-Check?

4 Dimensionen mit festen Gewichten (Speed 30 %, Antwort-Qualität 40 %, DSGVO 15 %, Bedienbarkeit 15 %).

Speed (30 %)

P50-Latenz der ersten Antwort über 8 Test-Fragen. Lange Antwortzeiten können die Nutzung beeinträchtigen (unsere Einschätzung, kein Studienbeleg).

Antwort-Qualität (40 %)

5 universelle + 3 branchen-spezifische Fragen. Ein KI-gestützter Evaluator bewertet Relevanz, Faktentreue und Halluzinationsfreiheit (automatische Einschätzung).

DSGVO (15 %)

5 DOM-Checks: Cookie-Banner, Privacy-Link, AVV-Hinweis, EU-Hosting, Hinweis nach Art. 50 Abs. 1 KI-Verordnung (seit 2. August 2026 anwendbar).

Bedienbarkeit (15 %)

Mobile-Responsive, ARIA-Labels, Close-Button, Conversation-History, nicht-aufdringliches Branding. DOM + Mobile-Viewport-Simulation.

4 Dimensionen und 8 Test-Fragen ergeben einen Score von 0 bis 10

Viele Chatbot-Vergleiche konzentrieren sich auf die Anbieter oder den Funktionsumfang. Beides ist nützlich, zeigt aber nicht, was Kunden tatsächlich erleben.

Was Kunden erleben: Wie schnell antwortet der Bot? Versteht er meine Frage? Halluziniert er? Ist er DSGVO-orientiert? Diese vier Dimensionen prüfen wir bei jedem Scan, auf Ihrer Site und auf den angegebenen Wettbewerber-Sites side-by-side.

Der Score ist eine Note, kein Audit. Eine 4/10 heißt nicht "Verstoß gegen DSGVO", sondern "im DSGVO-Block haben Sie die Hälfte der Best-Practices noch offen". Ein 8.5/10 heißt nicht "perfekt", sondern "die geprüften technischen Indikatoren sind überwiegend erfüllt".

Warum 4 Layer? Weil Speed allein nichts wert ist, wenn die Antwort falsch ist. Und Accuracy nichts wert ist, wenn der Bot nach 8 Sekunden antwortet. Und beides wenig hilft, wenn Datenschutzanforderungen offen bleiben. Layer-Gewichtung: Speed 30 % · Accuracy 40 % · DSGVO 15 % · UI 15 %.

Drei Gründe, warum Chatbot-Qualität 2026 relevanter wird

1. EU AI Act: Hinweispflicht nach Art. 50 Abs. 1 seit 2. August 2026

Ein Chatbot, der mit Menschen in der EU interagiert, muss grundsätzlich als KI erkennbar sein, sofern das nicht offensichtlich ist (Art. 50 Abs. 1 KI-Verordnung). Die Kennzeichnung KI-erzeugter Inhalte nach Art. 50 Abs. 2 gilt für bereits vorher angebotene Systeme ab 2. Dezember 2026 (Stand: Oktober 2026). Der gesetzliche Höchstrahmen für Bußgelder reicht bis 15 Mio. € oder 3 Prozent des weltweiten Jahresumsatzes (Art. 99 Abs. 4). Der Score prüft den Hinweis als Indikator.

2. Erwartungen der Kunden verändern sich

Nutzer sind an schnelle, sprachlich gute Antworten von KI-Assistenten gewöhnt. Chatbots mit festen Skripten oder rein generischem Wissen können dabei zurückfallen. Wie viele Standard-Anfragen sich automatisieren lassen, hängt stark von Branche und Wissensbasis ab. Belastbare Zahlen nennen wir dazu nicht.

3. Custom-LLM-Lösungen werden für KMU erreichbarer

Nach unserer Einschätzung sind Custom-LLM-Lösungen für kleinere Unternehmen technisch und preislich zugänglicher geworden. Ein RAG-Setup (Bot kennt Ihre FAQs, Produkte und AGB) kann Nutzen bringen. KI-Chatbot von Bot-Agent: vorläufig 79 €/Monat, Setup 399 € (Verkauf noch nicht geöffnet).

Wettbewerber-Vergleich: Sehen, wo Sie stehen

Sie können bis zu drei Vergleichs-URLs angeben. Wir scannen jede identisch zu Ihrer Site: gleiche 8 Fragen (5 universal + 3 aus Ihrer Branche), gleiche Scoring-Formel. Prüfen Sie fremde Seiten nur, wenn Sie dazu berechtigt sind. Seiten, die automatisierte Anfragen sperren, prüfen wir nicht.

Das Ergebnis ist eine Side-by-Side-Tabelle mit den Werten je Ebene und dem erkannten Chatbot-System (nur als Tatsache, ohne Note für den Anbieter).

Nutzen: Sie sehen nicht nur, wo Sie stehen, sondern auch, wie andere Websites die vier Ebenen umsetzen. Die Werte sind Momentaufnahmen technischer Indikatoren und ohne Gewähr; sie sind keine Bewertung des Widget-Anbieters, der Qualität oder der Rechtskonformität.

Hinweis: Wir scannen sequenziell, nicht parallel, um Rate-Limits der Fremd-Widgets nicht zu verletzen. Mit drei Wettbewerbern dauert ein Scan ca. 90 Sekunden.

KI-Chatbot, vorläufig ab 79 €/Monat

Custom-LLM mit Ihrem FAQ-Wissen. mit KI-Kennzeichnung nach Art. 50 EU AI Act. Verkauf noch nicht geöffnet, alle Preise vorläufig.

Setup
399 €
einmalig
Subscription
79 €
pro Monat
Unverbindlich vormerken →

Häufige Fragen (FAQ)

Was ist ein guter Chatbot-Score?
Der Score ist eine Orientierung zwischen 0 und 10 auf Basis technischer Indikatoren, keine Note für Ihr Geschäft. Als grobe Einordnung: ab 7 sind die geprüften Punkte überwiegend erfüllt, ab 8 ist der Chatbot deutlich differenziert. Einen Branchendurchschnitt weisen wir nicht aus, weil wir keine repräsentative Datenbasis haben. Ergebnisse sind Momentaufnahmen und ohne Gewähr.
Welche Branchen-Fragen testet der Check?
Fünf Branchen, drei Fragen je Branche: E-Commerce, Hotel, Steuerberater, Handwerk, Coach. Plus 5 universelle Fragen, die immer laufen (Öffnungszeiten, Kontakt, Preis, Datenschutz, Stärken).
Ist es zulässig, Test-Fragen an ein fremdes Chat-Widget zu senden?
Wir senden höchstens 8 Testfragen pro geprüfter Seite und kennzeichnen alle Anfragen, auch den Abruf der Seite selbst, im User-Agent als Bot-Agent-ChatbotCheck/1.0. Seiten, die automatisierte Anfragen blockieren, prüfen wir nicht; eine Sperre umgehen wir nicht. Prüfen Sie fremde Seiten nur, wenn Sie dazu berechtigt sind, und beachten Sie die Nutzungsbedingungen des Widget-Anbieters.
Wie funktioniert die Speed-Messung?
Wir senden den HTTP-POST an den erkannten Chatbot-API-Endpoint und messen die Zeit bis zur ersten Antwort. Bei Widgets ohne öffentliche API fällt der Speed-Layer auf "manual-test-required" zurück und wird im Composite-Score nicht gewichtet.
Was macht einen Chatbot DSGVO-orientiert?
Kurzversion: Cookie-Banner vor dem ersten Chat-Open, AVV mit dem Anbieter, EU-Server (oder Angemessenheitsbeschluss), Datenschutz-Hinweis im Widget und seit 2. August 2026 der Hinweis bei KI-Interaktion nach Art. 50 Abs. 1 KI-Verordnung ("Sie sprechen mit KI"). Der Check prüft alle 5 Punkte als Indikator, das ist keine Rechtsberatung.
Welche Chatbot-Tools werden erkannt?
15 gängige Widget-Signaturen aus den Bereichen Live-Chat, Kundenservice und Bot-Plattformen, plus eine Heuristik für individuelle Bots (z. B. eigene Wrapper um KI-Modelle). Die Erkennung ist rein technisch und stellt keine Bewertung von Anbietern dar; im Ergebnis wird das erkannte Widget als Fundstelle genannt.
Wettbewerber-Vergleich: Wie genau ist der?
Wir scannen jede von Ihnen angegebene Vergleichs-URL identisch zu Ihrer. Gleiche 8 Fragen (5 universal plus 3 aus Ihrer Branche), gleiche Scoring-Formel. Die Side-by-Side-Tabelle zeigt absolute Werte als Momentaufnahme technischer Indikatoren, keine Bewertung des Widget-Anbieters, der Qualität oder der Rechtskonformität. Wichtig: Wir scannen nur öffentlich erreichbare Chatbots. Login-Bereiche, kostenpflichtige Premium-Funktionen und Seiten, die automatisierte Anfragen sperren, werden nicht getestet.
Was, wenn meine Site keinen Chatbot hat?
Dann zeigt das Tool: "Kein Chatbot gefunden" (eine Momentaufnahme; nachgeladene Widgets werden nicht immer erfasst) plus Link zum KI-Chatbot von Bot-Agent (Verkauf noch nicht geöffnet).
Wie kann ich meinen Score verbessern?
Drei Hebel sind oft entscheidend: (1) Antwortzeit unter 2 s. (2) Branchen-Wissen in der Wissensbasis (Ihre FAQs, AGB, Produkte, per RAG). (3) DSGVO- und KI-Hinweise im Widget-Setup. Der KI-Chatbot von Bot-Agent ist darauf ausgelegt, alle drei Punkte zu adressieren.
Was kostet ein professioneller Chatbot?
Einfache Standard-Chatbots sind meist günstiger, arbeiten aber oft mit generischem Wissen. KI-Chatbot von Bot-Agent: vorläufig 79 €/Monat + 399 € Setup (Verkauf noch nicht geöffnet). Custom-LLM mit RAG auf Ihre Inhalte, mit KI-Kennzeichnung nach Art. 50 EU AI Act.
Ist Bot-Agent BAFA-förderfähig?
Nein. Setup und Abo von Bot-Agent sind nicht BAFA-förderfähig. Die BAFA fördert Beratungen zur Unternehmensführung durch beim BAFA gelistete Berater.
Was ist der Unterschied zu den Analyse-Funktionen der Chatbot-Plattformen?
Die meisten Chatbot-Plattformen bringen eigene Analyse-Dashboards mit. Sie zeigen Metriken für den eigenen Chatbot auf dieser Plattform. Preise und Funktionen unterscheiden sich je nach Anbieter und ändern sich kurzfristig; maßgeblich sind die Angaben der jeweiligen Anbieter.

Der Chatbot-Check ist plattform-unabhängig:
  • Erkennt 15 Widget-Signaturen automatisch (plus Heuristik für individuelle Bots)
  • Bewertet in 4 Layern: Speed (P50-Latenz), Accuracy (KI-gestützter Evaluator), DSGVO, UI. Nur messbare technische Indikatoren
  • Optionaler Wettbewerber-Vergleich mit bis zu 3 weiteren URLs side-by-side
  • DSGVO- und EU-AI-Act-Art.-50-Indikatoren (illustrative Hinweise, keine rechtliche Bewertung)
  • Kostenlos, ohne Account, mit Begrenzung der Test-Anfragen (max. 8 Fragen pro Scan)
Wenn Sie Ihren Chatbot betreiben und seine Performance kennen wollen, sind die plattform-internen Tools dafür gemacht. Wenn Sie Ihren Chatbot mit anderen Widgets vergleichen wollen, funktioniert dieser Scan mit jedem Widget. Hinweis: Die Bewertung zu Art. 50 EU AI Act ist illustrativ und ersetzt keine Rechtsberatung (§ 2 RDG).

Glossar: Chatbot-Begriffe verstehen

Chatbot
Software-Agent, der mit Nutzern per Text (oder Sprache) interagiert. Reicht von Skript-basiert (Decision-Tree) bis Custom-LLM mit RAG.
AI-Assistant
Synonym zu "Chatbot" mit Fokus auf ein LLM-Backend (GPT, Claude, Gemini).
RAG (Retrieval-Augmented Generation)
Technik, bei der ein LLM Antworten aus Ihrer eigenen Wissensbasis (FAQs, Produkte, AGB) zieht, statt nur generisches Internet-Wissen zu nutzen. Kann die Antwortqualität deutlich verbessern.
Intent Recognition
Fähigkeit des Bots, die Absicht hinter einer Frage zu erkennen ("Storno" vs "Rückgabe" vs "Reklamation"). Bessere Intent Recognition führt in der Regel zu besseren Antworten.
Speed-to-Reply (P50)
Median-Latenz der ersten Antwort. Wir nutzen P50, nicht P95, weil Ausreißer (Server-Hiccups) den Nutzer-Eindruck weniger prägen als der typische Fall.
DSGVO-Cookie-Banner
Banner, das vor dem automatischen Öffnen des Chats eine Einwilligung einholt, sofern der Chat Cookies oder ähnliche Techniken setzt (§ 25 TDDDG, früher TTDSG). Im Score: 25 Punkte im DSGVO-Layer.
EU AI Act Art. 50
Transparenzpflichten für bestimmte KI-Systeme (EU-KI-Verordnung). Die Hinweispflicht bei KI-Interaktion nach Art. 50 Abs. 1 ist seit 2. August 2026 anwendbar, zum Beispiel für Chatbots. Die Kennzeichnung KI-erzeugter Inhalte nach Art. 50 Abs. 2 gilt für bereits vorher angebotene Systeme ab 2. Dezember 2026 (Stand: Oktober 2026). Gesetzlicher Höchstrahmen für Bußgelder: bis 15 Mio. € oder 3 Prozent des weltweiten Jahresumsatzes.
Widget-Library
SDK des Anbieters, das das Chat-Symbol einbindet und die Nutzer-Interaktion handhabt. Die Erkennung läuft über Signaturen dieser Libraries.
Conversation-Flow
Skript oder LLM-Logik, die den Bot von Frage zu Frage führt. Gut gestaltete Flows haben klare Eskalationspfade ("Mensch übernimmt").
Mobile-Responsive Widget
Widget skaliert auf Smartphone-Viewports (bis 768 px) ohne Überlappung, mit lesbarer Schrift und fingerfreundlichen Buttons. Wird im UI-Layer geprüft.
Multi-Channel Chatbot
Ein Bot, der Web, WhatsApp, Telegram und E-Mail gleichzeitig bedient. Der Bot-Agent-Chatbot läuft aktuell als Website-Widget, weitere Kanäle sind in Vorbereitung.
KI-Chatbot (Bot-Agent)
Chatbot von Bot-Agent für KMU. Custom-LLM mit RAG auf Ihre Inhalte. Im Einsatz auf den eigenen Websites. Vorläufig 79 €/Monat + 399 € Setup, Verkauf noch nicht geöffnet.
Art. 50 Abs. 1 KI-Verordnung: Hinweispflicht seit 2. August 2026
Chatbots müssen grundsätzlich als KI erkennbar sein. Gesetzlicher Höchstrahmen: bis 15 Mio. € oder 3 % des weltweiten Jahresumsatzes.
HinweisChatbot-Quality-Scores sind illustrative Bewertungen basierend auf öffentlich messbaren Signalen (Momentaufnahme, ohne Gewähr). Sie ersetzen kein professionelles technisches Audit und keine Rechtsberatung. Die Vertragsgrundlage für kostenpflichtige Leistungen regeln die AGB. Transparenz gemäß Art. 50 EU AI Act.