AI-search testen en optimaliseren: prompt testing en iteratie

Wat is prompt testing?

Prompt testing is het systematisch testen van hoe AI-tools reageren op vragen die relevant zijn voor je merk. Door dezelfde prompts regelmatig te testen, meet je vooruitgang en identificeer je optimalisatiekansen.

Een testset opbouwen

Categorieën van prompts

1. Brand queries

• "Wat doet [jouw bedrijf]?"
• "Is [jouw bedrijf] betrouwbaar?"
• "Reviews over [jouw bedrijf]"

2. Service/product queries

• "Beste [jouw dienst] bureau in België"
• "Wie biedt [jouw dienst] aan?"
• "Wat kost [jouw dienst]?"

3. Vergelijkingen

• "[Jouw bedrijf] vs [concurrent]"
• "Alternatieven voor [concurrent]"
• "Top 10 [jouw categorie] bureaus"

4. Definitie/educatie

• "Wat is [kernbegrip uit jouw industrie]?"
• "Hoe werkt [relevant proces]?"
• "Wat zijn de voordelen van [jouw aanpak]?"

5. Problem/solution

• "Hoe los ik [probleem] op?"
• "Hulp bij [uitdaging]"
• "[Symptoom] oplossen"

Optimale testset grootte

• Minimum: 20 prompts
• Optimaal: 30-50 prompts
• Enterprise: 100+ prompts

Testing protocol

Per test sessie:

1. Gebruik dezelfde prompts Consistentie is cruciaal voor vergelijkbaarheid.

2. Test in meerdere tools

   • ChatGPT 4o (met web search)
   • Perplexity
   • Gemini
   • Claude

3. Documenteer systematisch Per prompt noteer je:

   • AI-tool gebruikt
   • Datum
   • Werd je merk genoemd? (ja/nee)
   • Was de informatie correct? (ja/deels/nee)
   • Welke bronnen werden geciteerd?
   • Volledige antwoord (voor analyse)

4. Screenshot bewijs Bewaar screenshots voor latere vergelijking.

Analyse framework

Mention rate

Percentage van prompts waar je merk wordt genoemd.

Formule: (Aantal mentions / Totaal prompts) × 100

Benchmark:

• 0-10%: Laag, urgente actie nodig
• 10-30%: Gemiddeld, verbetering mogelijk
• 30-50%: Goed, optimalisatie finetunen
• 50%+: Excellent, positie behouden

Citation rate

Percentage waar je website als bron wordt geciteerd.

Correctness score

Percentage correct weergegeven informatie.

Sentiment

Positief, neutraal of negatief over je merk.

Iteratief optimaliseren

Na elke test ronde:

1. Identificeer gaps Welke prompts leveren geen mention op?

2. Analyseer waarom

• Is de content aanwezig maar niet geciteerd?
• Ontbreekt de content volledig?
• Is de content niet goed gestructureerd?

3. Prioriteer fixes Focus op high-impact prompts eerst.

4. Implementeer verbeteringen

• Nieuwe content creëren
• Bestaande content herstructureren
• Structured data toevoegen
• Entity consistency verbeteren

5. Hertest Na implementatie, test dezelfde prompts opnieuw.

Common findings en fixes

Testing tools en templates

Documentatie spreadsheet

Kolommen:

• Prompt ID
• Prompt tekst
• Tool
• Datum
• Mention (J/N)
• Citation (J/N)
• Correctheid (1-5)
• Notities
• Screenshot link

Frequentie

• Minimum: Maandelijks
• Optimaal: 2-wekelijks
• Na grote changes: Direct hertesten

Wat kan MatthCon voor jou doen?

MatthCon zet complete prompt testing programma's op voor jouw merk. We bouwen testsets, voeren systematische tests uit en leveren actionable insights. Start met een audit of lees meer over impact meten.