Claude Opus 5.5 allein vs. mit Five Dots: eine Fallstudie zum Pipeline-Audit
Wir haben 11 Probleme in der Vertriebspipeline eines Testunternehmens eingebaut und Claude Opus 5.5 sie 20-mal prüfen lassen, allein und mit Five Dots. Mit Five Dots fand es 94% davon, allein 65%.
Mit Five Dots fand Claude Opus 5.5 94% der Probleme, die in der Vertriebspipeline eines Testunternehmens eingebaut waren, allein 65%. 98% seiner Befunde waren richtig, allein 90%. Der Unterschied kommt vom Kunden: Five Dots fragt nach dem, was das CRM nicht zeigen kann.
- Bei dem, was das CRM zeigt, ist Opus auch allein stark. Der Unterschied liegt bei den Problemen, die nur der Kunde kennt: 100% mit Five Dots, 24% allein.
- Opus allein stellte dem Kunden in keinem der 10 Audits eine Frage. Mit Five Dots stellte es jedes Mal zwei oder drei Fragerunden.
- Ein verblindeter Bewerter zog in 8 von 10 direkten Vergleichen das Five-Dots-Audit vor und in keinem das Audit von Opus allein.
Die Ergebnisse auf einen Blick
Beide Varianten führten am 15. November 2026 dasselbe Pipeline-Audit 10-mal durch, mit dem aktuellen Five-Dots-Release. Die Spalte zum menschlichen Berater ist unsere Schätzung aus den eigenen Beratungsaudits von Revenue Wizards, kein Ergebnis dieses Tests: Kein Berater hat das Testunternehmen geprüft. Sie zeigt, wo die beiden KI-Varianten im Vergleich zu der Arbeit stehen, die sie ersetzen.
| Kennzahl | Opus 5.5 allein | Opus 5.5 + Five Dots | Menschlicher Berater (Schätzung) |
|---|---|---|---|
| Gefundene eingebaute Probleme, nach Schweregrad gewichtet | 65% | 94% | 97% |
| Probleme, die in den CRM-Daten sichtbar sind | 84% | 91% | 93% |
| Probleme, die nur der Kunde kannte | 24% | 100% | 100% |
| Richtige Befunde (Präzision) | 90% | 98% | 98% |
| Falsche Befunde pro Audit | 0.5 | 0.1 | 0.1 |
| Fallen, die fälschlich als Problem gemeldet wurden, pro Audit | 0.3 | 0 | 0 |
| Fragerunden an den Kunden | 0 | 2–3 | 5–7 |
| Wie konkret die Maßnahmen sind (1–5) | 2.9 | 3.4 | 4.5 |
| Top-3-Maßnahmen, die zum Lösungsschlüssel passen (von 3) | 1.1 | 1.0 | 2 |
| Zeit pro Audit | 1.5 Min. | 4.7 Min. | 12+ Stunden |
| Kosten pro Audit | $0.39 KI-Rechenkosten | $1.55 KI-Rechenkosten | etwa $2,000 Honorar |
Der Test: ein Unternehmen, eine Pipeline, elf eingebaute Probleme
Beide Varianten prüften die Vertriebspipeline desselben erfundenen Unternehmens, mit demselben CRM, demselben Kunden und demselben Auftrag. Der einzige Unterschied war der Five-Dots-Connector.
Das Unternehmen Kestrelview Analytics ist fiktiv, ebenso jeder Name darin. Es verkauft Product-Analytics-Software an mittelständische Onlinehändler: etwa 70 Mitarbeitende, Series A, vertriebsgetrieben, eine 14-tägige kostenlose Testphase und Verträge von etwa $24k pro Jahr in den USA und Großbritannien. Sein HubSpot enthält 44 Deals, drei Vertriebsmitarbeiter und deren Aktivitätsverlauf.
Die Kundin, eine Head of Revenue Operations, wurde von einer separaten KI gespielt. Sie beantwortet, was sie gefragt wird, und gibt nichts von sich aus preis. Manche Probleme kommen also nur ans Licht, wenn der Prüfer fragt.
Ein unabhängiger Bewerter, ebenfalls Claude Opus, las jedes finale Audit verblindet, ohne Produktnamen, und prüfte jeden Befund gegen den Lösungsschlüssel und die CRM-Datensätze. Probleme mit hohem Schweregrad zählen dreifach, mittlere doppelt und niedrige einfach. Drei Fallen, also Dinge, die falsch aussehen, aber gewollt sind, zählten gegen ein Audit, das sie als Fehler meldete.
| Eingebautes Problem | Schweregrad | Wie es sich finden lässt |
|---|---|---|
| Offene Deals ohne Aktivität seit 60+ Tagen, mit einem großen Anteil am Pipeline-Wert | Hoch | CRM-Daten |
| Offene Deals mit Abschlussdatum in der Vergangenheit | Hoch | CRM-Daten |
| Offene Deals ohne Abschlussdatum oder mit Betrag 0 | Mittel | CRM-Daten |
| Verlorene Deals ohne Verlustgrund | Mittel | CRM-Daten |
| Verlängerungen und Erweiterungen laufen durch die Neukunden-Pipeline | Hoch | CRM-Daten |
| Deals, die wochenlang in Contract Sent feststecken | Mittel | CRM-Daten |
| Gewonnene Deals, die die mittleren Phasen übersprungen haben | Niedrig | CRM-Daten |
| Ein Vertriebsmitarbeiter verantwortet die meisten stillstehenden Deals | Niedrig | CRM-Daten |
| Keine schriftlichen Kriterien für den Phasenwechsel | Hoch | Nur durch Nachfragen beim Kunden |
| Die Prognose entsteht in der eigenen Tabelle des VP Sales | Hoch | Nur durch Nachfragen beim Kunden |
| Kein regelmäßiges Pipeline-Review | Mittel | Nur durch Nachfragen beim Kunden |
Die Fragen: Opus allein stellte keine
Opus allein stellte in keinem seiner 10 Audits eine Frage: Es las HubSpot und ging direkt zu den Befunden. Opus mit Five Dots las zuerst HubSpot und fragte dann nach dem, was die Daten nicht erklären konnten, zwei oder drei Runden pro Audit. Die Tabelle zeigt ein typisches Five-Dots-Audit.
Die letzte Zeile zählt genauso wie die anderen. Die Antwort „Ich weiß es nicht“ wurde als Frage an die Person festgehalten, die es wissen würde, nicht als Problem aufgeschrieben.
| Was Five Dots fragte | Was die Kundin sagte | Was es veränderte |
|---|---|---|
| 10 von 24 offenen Deals sind Verlängerungen, Erweiterungen oder Pilotprojekte in der Neukunden-Pipeline. Ist das Absicht? | Pilotprojekte sind gewollt: bezahlte 30-Tage-Piloten. Zu Verlängerungen konnte sie nichts sagen. | Pilotprojekte nicht als Fehler gewertet; Verlängerungen als offene Frage für den VP Sales festgehalten |
| Stimmt der $140k-Deal, bei einem durchschnittlichen Vertrag von $24k? | Er ist echt: der größte Interessent des Unternehmens. | Nicht als Datenfehler gemeldet (eine der Fallen) |
| Gibt es ein regelmäßiges Pipeline-Review, und wer merkt, wenn ein Deal einschläft? | Kein Review. Deals werden angeschaut, wenn etwas anliegt; der einzige feste Rhythmus ist ein vierteljährliches Update für das Board. | Neuer Befund: kein Pipeline-Review |
| Warum springen gewonnene Deals von der ersten Phase direkt zu Closed Won? Sind Phasenkriterien schriftlich festgehalten? | Nichts ist schriftlich festgehalten. Vertriebsmitarbeiter verschieben einen Deal, wenn es sich richtig anfühlt. | Neuer Befund: keine Phasenkriterien |
| Woher kommen die Prognose und die Zahl für das Board? | Der VP Sales erstellt sie jeden Freitag in seiner eigenen Tabelle, weil niemand HubSpot vertraut. | Neuer Befund, unter den Maßnahmen an erster Stelle |
| Wann wurden verlorene Deals zuletzt gemeinsam besprochen? | Sie wusste es nicht. | Als offene Frage festgehalten, nicht als Befund |
Die Präsentation: eine Bewertung, Verantwortliche und ein Abschlusskriterium
Beide liefern eine klare Befundtabelle mit Nachweisen. Five Dots ergänzt eine Bewertung, trennt, was die Daten belegen, von dem, was der Kunde gesagt hat, nennt für jede Maßnahme einen Verantwortlichen und ein Abschlusskriterium und führt offene Fragen getrennt.
Im Testunternehmen ist Jonas einer der Vertriebsmitarbeiter und Daniel der VP Sales. Opus allein formulierte seine erste Maßnahme so: „Bereinigen Sie diese Woche die Pipeline. Gehen Sie die Deals jedes Vertriebsmitarbeiters durch, beginnend mit Jonas. Schließen Sie jeden stillstehenden oder überfälligen Deal mit einem Verlustgrund ab oder geben Sie ihm einen echten nächsten Schritt und ein Abschlussdatum.“
Opus mit Five Dots schrieb: „Führen Sie ein wöchentliches Pipeline-Review ein und erstellen Sie die Prognose aus HubSpot. Verantwortlich: Daniel. Warum zuerst: Die Zahl für das Board kommt derzeit aus einer Tabelle, weil niemand HubSpot vertraut. Erledigt, wenn: das Review vier Wochen in Folge stattgefunden hat und die Freitagsprognose aus HubSpot kommt.“
Die erste Maßnahme ist solide, behandelt aber das Symptom, die stillstehenden Deals. Die zweite geht an die Ursache, die Five Dots durch Nachfragen erfahren hat: Niemand prüft die Pipeline, also lebt die Prognose in einer Tabelle.
| Teil des Ergebnisses | Opus allein | Opus + Five Dots |
|---|---|---|
| Gesamturteil | „Ein Problem, hohe Priorität“ | Auf einer festen Skala rot bewertet, mit Methodikversion und Datum |
| Befunde | Eine Tabelle mit 10, nur Daten | Bewertete Befunde aus den Daten; was der Kunde sagte; erkannte Muster; was funktioniert |
| Offene Punkte | Zwischen den Befunden („prüfenswert“) | Getrennt aufgeführt, jeweils mit der Person, die antworten sollte |
| Maßnahmen | 5 in Reihenfolge, jeweils mit dem, was zu tun ist | 4 in Reihenfolge, jeweils mit Verantwortlichem, warum sie zuerst kommt, was sich ändert und wann sie als erledigt gilt |
| Wo es abgelegt ist | Eine Notizseite im Notion des Kunden | Die Modulseite, die Audit-Übersicht sowie Gedächtnis, Journal und Entscheidungsprotokoll des Kunden in dessen Notion |
Einordnung
Ein Bereich, ein Unternehmen. Das betrifft nur die Vertriebspipeline, einen der zehn Bereiche im Five-Dots-Audit, für ein erfundenes Unternehmen. Ein echtes Audit umfasst mehr und hängt vom echten CRM ab.
Der Kunde ist simuliert. Echte Kunden sagen mehr, weniger und anderes. Der simulierte Kunde hält verborgene Fakten zurück, bis er gefragt wird; genau deshalb kommt es auf das Fragen an.
Der Bewerter ist ebenfalls eine KI. Er liest jedes Audit verblindet, ohne Produktnamen, und wurde vorab an einem bekannt guten und einem bekannt schlechten Audit geprüft.
Keine Kundendaten verlassen die eigene Umgebung des Kunden. In den Five-Dots-Durchläufen erhielt der Connector nur die Namen der verbundenen Tools und das angeforderte Modul, nie einen Deal, einen Namen oder eine Zahl. Jeder Durchlauf prüft das.
Unsere Empfehlung
Nutzen Sie Five Dots für Audit-Arbeit, die einer bekannten Methode folgt, und holen Sie menschliche Expertise dazu, wo die Methode an ihre Grenzen stößt.
| Situation | Was einsetzen | Warum |
|---|---|---|
| Standardaudits: ein Pipeline-Check, ein Quartalsreview, ein neuer Bereich des GTM-Audits | Five Dots | Es findet fast so viel wie ein Berater, in Minuten statt Tagen, zu einem Bruchteil der Kosten, und hält das Ergebnis in Ihrem eigenen Arbeitsbereich. |
| Komplexe Arbeit, mit RevOps-Erfahrung im Team | Five Dots, geführt von Ihrer RevOps-Leitung | Ein erfahrener Praktiker führt Befunde und offene Fragen weiter: wägt Zielkonflikte ab, führt die Gespräche mit Stakeholdern und macht aus der Roadmap einen Veränderungsplan. |
| Nischenthemen und Wissenslücken: Provisionsmodelle, Pricing, komplexe CRM-Architektur, ein unbekannter Markt | Menschlicher Experte, mit Five Dots als Ausgangspunkt | Ein Spezialist bringt mit, was keine der beiden KI-Varianten hat: Muster aus vielen ähnlichen Unternehmen und Urteilsvermögen bei Grenzfällen. |
| Absicherung einer großen Entscheidung, bevor sie ans Board geht oder die Vergütung verändert | Menschlicher Experte | Eine externe Prüfung durch jemanden, der für die Entscheidung einsteht. |
Quellen und weiterführende Informationen
Setzen Sie die Methode um.
Führen Sie dasselbe Audit für Ihre eigene Pipeline durch, im KI-Assistenten, den Sie bereits nutzen.