Promptic: LLM-apps evalueren en prompts optimaliseren

Test en verbeter LLM-prompts en AI-agents met je eigen voorbeelden

promptic.eu
Promptic screenshot

Promptic helpt ontwikkelteams LLM-prompts en AI-agents te beoordelen met eigen voorbeelden. Testsets, OpenTelemetry-traces en optimalisatie komen samen, zodat een wijziging kan worden afgewogen op kwaliteit, kosten en responstijd.

Wat doet Promptic in gewone taal?

Zie het als een herbruikbaar proefwerk voor je AI-functie. Je voert realistische vragen en waar mogelijk verwachte antwoorden in. Verschillende prompts, modellen of agentopzetten behandelen dezelfde gevallen. Promptic vergelijkt de uitkomst met jouw criteria en toont bij welke stap het misgaat. Het is bedoeld voor zakelijke en beroepsmatige gebruikers. De voorwaarden sluiten particulier gebruik uit, ook binnen Free.

Een eerste evaluatie uitvoeren

Maak een organisatie, AI Application en component aan. Voeg representatieve invoer en verwachte uitvoer toe, stel passende beoordelaars in en start een experiment. Bekijk afzonderlijke fouten voordat je op de totaalscore vertrouwt. Vergelijk kandidaten met dezelfde dataset op kwaliteit, kosten en latentie. De dashboard-snelstart en handleiding voor promptoptimalisatie beschrijven de stappen. Een onvolledige testset kan fouten in productie niet uitsluiten.

Traces en agentvarianten

De traces leggen modelaanroepen, toolaanroepen, tokens, kosten en duur per stap vast. Bij een agent kun je volledige varianten op dezelfde gevallen testen, falende uitvoeringen lezen en na een aanpassing opnieuw meten. De agentoptimalisatiegids geeft meer uitleg. De cijfers in een demonstratie op de website zijn voorbeelden, geen garantie voor jouw toepassing.

Gratis plan, abonnementen en modelkosten

Op 27 september 2026 vermeldt de officiële prijspagina Free voor €0: één gebruiker, één AI Application, 200.000 Promptic Credits per maand en 14 dagen tracebewaring. Team staat op €149 per maand en Business op €599 per maand. Je kunt eigen modelsleutels meenemen; beheerd modelgebruik kan apart worden gefactureerd. Bereken ook extra apps en Credits voordat je kiest.

Gegevens en voorwaarden

Testgevallen en traces kunnen prompts, modelinvoer en -uitvoer en toolargumenten bevatten. Volgens de voorwaarden blijft de klant eigenaar van deze inhoud en wordt die zonder afzonderlijke schriftelijke afspraak niet gebruikt om basismodellen te trainen. Voor zeer gevoelige gegevens is een schriftelijke afspraak vereist. De EU-dataregio van het platform zegt niet automatisch waar elke gekozen modelroute verwerkt of bewaard wordt. Begin met opgeschoonde gegevens.

Veelgestelde vragen

Kan ik een hele agent testen?

Ja. Promptic vergelijkt agentvarianten met dezelfde voorbeelden en maakt problematische stappen zichtbaar in traces.

Is Free geschikt voor privéonderzoek?

Nee. Ook Free is volgens de voorwaarden uitsluitend voor zakelijke of beroepsmatige klanten.

Zijn modelaanroepen inbegrepen?

Niet altijd. Eigen sleutels zijn mogelijk; beheerde modellen kunnen afzonderlijk kosten.

Officiële bronnen