Claude Opus 5.5 alleen vs met Five Dots: een casestudy over een pipeline-audit
We verstopten 11 problemen in de salespipeline van een fictief bedrijf en lieten Claude Opus 5.5 die 20 keer auditen, alleen en met Five Dots. Met Five Dots vond het 94% ervan, tegenover 65%.
Met Five Dots vond Claude Opus 5.5 94% van de problemen die in de salespipeline van een fictief bedrijf waren verstopt, tegenover 65% zonder, en 98% van zijn bevindingen klopte, tegenover 90%. Het verschil komt van de klant: Five Dots vraagt naar wat het CRM niet laat zien.
- Bij wat het CRM laat zien, is Opus op zichzelf al sterk. Het verschil zit in de problemen die alleen de klant kent: 100% met Five Dots, 24% zonder.
- Opus alleen stelde de klant in alle 10 audits geen enkele vraag. Met Five Dots stelde het elke keer twee of drie vraagrondes.
- Een blinde beoordelaar gaf in 8 van de 10 rechtstreekse vergelijkingen de voorkeur aan de audit met Five Dots, en in geen enkele aan de audit van Opus alleen.
De resultaten in één oogopslag
Beide opstellingen voerden op 15 november 2026 10 keer dezelfde pipeline-audit uit, op de huidige release van Five Dots. De kolom menselijke consultant is onze schatting op basis van de eigen consultancy-audits van Revenue Wizards, geen resultaat van deze test: geen consultant heeft het testbedrijf geaudit. De kolom laat zien waar de twee AI-opstellingen staan ten opzichte van het werk waarvoor ze in de plaats komen.
| Maatstaf | Opus 5.5 alleen | Opus 5.5 + Five Dots | Menselijke consultant (schatting) |
|---|---|---|---|
| Gevonden verstopte problemen, gewogen naar ernst | 65% | 94% | 97% |
| Problemen zichtbaar in de CRM-data | 84% | 91% | 93% |
| Problemen die alleen de klant kende | 24% | 100% | 100% |
| Juiste bevindingen (precisie) | 90% | 98% | 98% |
| Onjuiste bevindingen per audit | 0.5 | 0.1 | 0.1 |
| Valkuilen ten onrechte als probleem aangemerkt, per audit | 0.3 | 0 | 0 |
| Vraagrondes aan de klant | 0 | 2–3 | 5–7 |
| Hoe concreet de oplossingen zijn (1–5) | 2.9 | 3.4 | 4.5 |
| Top-3-oplossingen die overeenkomen met de antwoordsleutel (van 3) | 1.1 | 1.0 | 2 |
| Tijd per audit | 1.5 min | 4.7 min | 12+ uur |
| Kosten per audit | $0.39 aan AI-rekenkracht | $1.55 aan AI-rekenkracht | ongeveer $2,000 aan honorarium |
De test: één bedrijf, één pipeline, elf verstopte problemen
Beide opstellingen auditten de salespipeline van hetzelfde verzonnen bedrijf, met hetzelfde CRM, dezelfde klant en hetzelfde verzoek. Het enige verschil was de Five Dots-connector.
Het bedrijf, Kestrelview Analytics, is fictief, net als elke naam erin. Het verkoopt productanalysesoftware aan middelgrote onlineretailers: ongeveer 70 mensen, Series A, salesgedreven, een gratis proefperiode van 14 dagen en contracten van ongeveer $24k per jaar in de VS en het VK. De HubSpot-omgeving bevat 44 deals, drie verkopers en hun activiteitenhistorie.
De klant, een Head of Revenue Operations, werd gespeeld door een aparte AI. Ze beantwoordt wat haar gevraagd wordt en vertelt niets uit zichzelf, dus sommige problemen komen alleen boven als de auditor ernaar vraagt.
Een onafhankelijke beoordelaar, ook Claude Opus, las elke eindaudit blind, zonder productnamen, en toetste elke bevinding aan de antwoordsleutel en de CRM-records. Problemen met hoge ernst tellen drie keer, gemiddelde twee keer en lage één keer. Drie valkuilen, dingen die fout lijken maar bewust zo zijn, telden tegen een audit die ze als fout aanmerkte.
| Verstopt probleem | Ernst | Hoe het te vinden is |
|---|---|---|
| Open deals zonder activiteit in 60+ dagen, met een groot deel van de pipelinewaarde | Hoog | CRM-data |
| Open deals met een sluitingsdatum in het verleden | Hoog | CRM-data |
| Open deals zonder sluitingsdatum of met een bedrag van 0 | Gemiddeld | CRM-data |
| Verloren deals zonder verliesreden | Gemiddeld | CRM-data |
| Verlengingen en uitbreidingen lopen via de pipeline voor nieuwe klanten | Hoog | CRM-data |
| Deals die wekenlang in Contract Sent blijven hangen | Gemiddeld | CRM-data |
| Gewonnen deals die de tussenliggende fasen oversloegen | Laag | CRM-data |
| Eén verkoper heeft de meeste stilstaande deals | Laag | CRM-data |
| Geen vastgelegde exitcriteria per fase | Hoog | Alleen door het de klant te vragen |
| De prognose wordt gemaakt in de eigen spreadsheet van de VP Sales | Hoog | Alleen door het de klant te vragen |
| Geen vaste pipelinebespreking | Gemiddeld | Alleen door het de klant te vragen |
De vragen: Opus alleen stelde er geen
Opus alleen stelde in geen van zijn 10 audits een vraag: het las HubSpot en ging direct naar bevindingen. Opus met Five Dots las eerst HubSpot en vroeg daarna naar wat de data niet kon verklaren, twee of drie rondes per audit. De tabel volgt één typische Five Dots-audit.
De laatste rij is net zo belangrijk als de andere. Een antwoord als “Ik weet het niet” werd bewaard als vraag voor degene die het wel zou weten, niet opgeschreven als probleem.
| Wat Five Dots vroeg | Wat de klant zei | Wat het veranderde |
|---|---|---|
| 10 van de 24 open deals zijn verlengingen, uitbreidingen of pilots in de pipeline voor nieuwe klanten. Is dat zo bedoeld? | Pilots zijn bewust: betaalde pilots van 30 dagen. Over verlengingen kon ze niets zeggen. | Pilots niet als fout behandeld; verlengingen vastgelegd als open vraag voor de VP Sales |
| Klopt de deal van $140k, tegenover een gemiddeld contract van $24k? | Die is echt: de grootste prospect van het bedrijf. | Niet als datafout aangemerkt (een van de valkuilen) |
| Is er een vaste pipelinebespreking, en wie merkt het op als een deal stil wordt? | Geen bespreking. Deals worden bekeken als er iets speelt; het enige vaste ritme is een kwartaalupdate voor het bestuur. | Nieuwe bevinding: geen pipelinebespreking |
| Waarom springen gewonnen deals van de eerste fase naar Closed Won? Zijn de fasecriteria vastgelegd? | Er is niets vastgelegd. Verkopers verplaatsen een deal als het goed voelt. | Nieuwe bevinding: geen fasecriteria |
| Waar komen de prognose en het cijfer voor het bestuur vandaan? | De VP Sales maakt die elke vrijdag in zijn eigen spreadsheet, omdat niemand HubSpot vertrouwt. | Nieuwe bevinding, bovenaan de lijst met oplossingen |
| Wanneer zijn verloren deals voor het laatst samen doorgenomen? | Dat wist ze niet. | Vastgelegd als open vraag, niet als bevinding |
De presentatie: een score, eigenaren en een afrondingscriterium
Beide leveren een duidelijke tabel met bevindingen en bewijs op. Five Dots voegt een score toe, scheidt wat de data bewijst van wat de klant zei, benoemt per oplossing een eigenaar en een afrondingscriterium, en houdt open vragen apart.
In het testbedrijf is Jonas een van de verkopers en Daniel de VP Sales. Opus alleen schreef als eerste oplossing: “Schoon deze week de pipeline op. Loop de deals van elke verkoper door, te beginnen bij Jonas. Sluit elke stilstaande of verlopen deal af met een verliesreden, of geef hem een echte volgende stap en sluitingsdatum.”
Opus met Five Dots schreef: “Start een wekelijkse pipelinebespreking en baseer de prognose op HubSpot. Eigenaar: Daniel. Waarom eerst: het cijfer voor het bestuur komt nu uit een spreadsheet, omdat HubSpot niet wordt vertrouwd. Klaar als: de bespreking vier weken achter elkaar heeft plaatsgevonden en de vrijdagprognose uit HubSpot komt.”
De eerste oplossing is degelijk, maar bestrijdt het symptoom: de stilstaande deals. De tweede pakt de oorzaak aan, die Five Dots door te vragen ontdekte: niemand bespreekt de pipeline, dus de prognose staat in een spreadsheet.
| Onderdeel van het resultaat | Opus alleen | Opus + Five Dots |
|---|---|---|
| Algemeen oordeel | “Een probleem, hoge prioriteit” | Rood gescoord op een vaste schaal, met de versie van de methodologie en de datum |
| Bevindingen | Eén tabel met 10, alleen data | Gescoorde bevindingen uit de data; wat de klant zei; opvallende patronen; wat goed werkt |
| Onbekende punten | Vermengd met de bevindingen (“het controleren waard”) | Apart vermeld, elk met wie het moet beantwoorden |
| Oplossingen | 5 op volgorde, met wat er moet gebeuren | 4 op volgorde, elk met eigenaar, waarom die eerst komt, wat er verandert en wanneer die als klaar geldt |
| Waar het staat | Een notitiepagina in de Notion van de klant | De modulepagina, het auditoverzicht, en het geheugen, logboek en beslissingslogboek van de klant, in hun eigen Notion |
Hoe je dit leest
Eén onderdeel, één bedrijf. Dit gaat alleen over de salespipeline, een van de tien onderdelen van de Five Dots-audit, voor één verzonnen bedrijf. Een echte audit omvat meer en hangt af van het echte CRM.
De klant is gesimuleerd. Echte klanten zeggen meer, minder en anders. De gesimuleerde klant houdt verborgen feiten achter tot ernaar gevraagd wordt, en daardoor doet vragen ertoe.
De beoordelaar is ook een AI. Die leest elke audit blind, zonder productnamen, en werd eerst getoetst op een bekend goede en een bekend slechte audit.
Er gaat geen klantdata buiten de eigen omgeving van de klant. In de Five Dots-runs ontving de connector alleen de namen van de gekoppelde tools en de gevraagde module, nooit een deal, naam of getal. Elke run controleert dit.
Ons advies
Gebruik Five Dots voor auditwerk dat een bekende methode volgt, en haal menselijke expertise erbij waar de methode tekortschiet.
| Situatie | Gebruik | Waarom |
|---|---|---|
| Standaardaudits: een pipelinecheck, een kwartaalreview, een nieuw onderdeel van de GTM-audit | Five Dots | Het vindt bijna wat een consultant zou vinden, in minuten in plaats van dagen, voor een fractie van de kosten, en bewaart het resultaat in je eigen workspace. |
| Complex werk, met RevOps-ervaring in het team | Five Dots, onder leiding van je RevOps-lead | Een ervaren operator werkt de bevindingen en open vragen verder uit: weegt de voor- en nadelen af, voert de gesprekken met stakeholders en maakt van de roadmap een veranderplan. |
| Nichethema’s en kennislacunes: provisiestructuur, prijsstelling, complexe CRM-architectuur, een onbekende markt | Menselijke expert, met Five Dots als vertrekpunt | Een specialist brengt wat geen van beide AI-opstellingen heeft: patronen uit veel vergelijkbare bedrijven en oordeelsvermogen bij de randgevallen. |
| Validatie van een grote beslissing voordat die naar het bestuur gaat of verandert hoe mensen betaald worden | Menselijke expert | Een externe toets door iemand die verantwoordelijk is voor de beslissing. |
Bronnen en verder lezen
Breng de methode in de praktijk.
Voer dezelfde audit uit op je eigen pipeline, in de AI-assistent die je al gebruikt.