Test AI-modellen zelf op fictie en bouw dan met de winnaar
Last checked against the product November 10, 2026
Een ranglijst vertelt je welk model gemiddeld het best scoorde. Ze zegt niet welk model jij het prettigst leest. Met een bake-off ontdek je dat. Kies twee tot vijf modellen, van Novelmint zelf, uit de bredere OpenRouter-lijst of van je eigen API-sleutel, en elk model schrijft dezelfde scènes uit onze openbare fictiebenchmark. Een panel van beoordelaars scoort elke passage blind en jij leest ze naast elkaar, desgewenst met verborgen namen. Springt er één uit, dan maakt één klik het tot het model waarmee je serie bouwt.
Key takeaways
- Een bake-off draait de fictiebenchmark van Novelmint op twee tot vijf modellen naar keuze: die van Novelmint, een uit de OpenRouter-lijst of modellen op je eigen API-sleutel.
- Elk model krijgt voor elke scène dezelfde opdracht, uit de standaardscènes van de benchmark, dus de vergelijking is eerlijk.
- Het eigen beoordelaarspanel van de benchmark scoort elke passage blind en een beoordelaar scoort nooit een model van de eigen maker.
- Je leest de passages naast elkaar, kunt de modelnamen verbergen tot je kiest en kunt de hele run als bestand opslaan.
- Eén klik op "Gebruiken voor builds" maakt de winnaar het model voor die serie, of je Studio-standaard voor alle series.
What it does
Wat een bake-off je oplevert
Tot vijf modellen tegelijk
Combineer de gemeten modellen van Novelmint, modellen uit de lijst "Meer modellen" die nog geen score hebben, en basismodellen die je eigen sleutel kan bereiken.
Dezelfde scènes voor iedereen
In elke ronde schrijft elk model een paar van de standaardscènes uit de benchmark, steeds die met tot nu toe de minste scores. Kies hoeveel rondes je in één keer draait.
Blind beoordeeld
Hetzelfde panel van beoordelaars als bij de openbare benchmark beoordeelt elke passage zonder te weten welk model hem schreef, en nooit een passage van het model van de eigen maker. Een score loopt van 0 tot 100: hoe goed de scène doet wat ze test, plus hoe nauw ze de opdracht volgde.
Blind lezen, ook voor jou
Vink "Modelnamen verbergen tot ik kies" aan en de passages verschijnen als Model A, Model B enzovoort, zodat je eerst het schrijfwerk beoordeelt en pas daarna de reputatie.
Bewaar het bewijs
Sla een run op als bestand, met een sleutel die aangeeft welk model welk is. Je eerdere bake-offs blijven in de lijst op het tabblad staan.
Direct in je builds
Druk op "Gebruik voor Builds" bij de passage die je beviel. Vanuit een serie stelt dit het model van die serie in; vanuit je Studio stelt het de standaard voor elke serie in.
How to use it
Zo draai je er een
Open het tabblad Bake-off
Je vindt het op de pagina AI-modellen, zowel in je Studio als bij elke serie.
Kies twee tot vijf modellen
Zoek in de modellen van Novelmint, de bredere OpenRouter-lijst en de modellen van elke API-sleutel die je hebt opgeslagen onder Account, dan AI-sleutels.
Kies het aantal rondes en check de prijs
Het tabblad toont de prijs van de run voordat die begint, en hoeveel credits je hebt.
Draai en lees
Als de run klaar is, lees je de passages van elke scène naast elkaar, met woordaantallen en scores. Verberg de namen als je blind wilt lezen.
Gebruik de winnaar
Druk op "Gebruik voor Builds" bij degene die je wilt. Je volgende hoofdstukbuild gebruikt het.
Example
Hoe een resultaat eruitziet
You ask
Eén benchmarkscène: twee vervreemde zussen ontmoeten elkaar op de begrafenis van hun vader, en geen van beiden zegt wat ze kwam zeggen.
You get back
- Model A: 231 woorden, score 78. Laat de stilte de scène dragen en houdt zich strikt aan de opdracht.
- Model B: 214 woorden, score 71. Sterke dialoog, maar in de laatste zin spreekt een zus het onuitgesprokene hardop uit.
- Model C: 226 woorden, score 64. Beeldende setting, en de emotie wordt meer verteld dan getoond.
- Jij kiest Model A, de namen worden onthuld, en met "Gebruik voor Builds" wordt het het model van je serie.
Een illustratie met een verzonnen scène, verzonnen scores en blinde labels, om de vorm van een resultaat te tonen. Jouw run gebruikt de echte scènes van de benchmark en de echte scores van de beoordelaars.
Questions
Frequently asked
- Hoe kan ik AI-modellen vergelijken voor het schrijven van fictie?
- Open in Novelmint het tabblad Bake-off op de pagina AI-modellen en kies twee tot vijf modellen. Elk schrijft dezelfde standaardscènes uit de openbare fictiebenchmark, een panel van beoordelaars scoort elke passage blind, en jij leest ze naast elkaar.
- Gebruikt een bake-off mijn eigen boek?
- Nee. Elk model schrijft de standaardscènes van de benchmark, dus de resultaten zijn eerlijk vergelijkbaar en je manuscript maakt geen deel uit van de run. Wil je zien hoe een model met je eigen hoofdstukken omgaat, kies het dan voor een serie en bouw.Kies je AI-model
- Kan ik een model testen met mijn eigen API-sleutel?
- Ja. Elk basismodel dat je opgeslagen sleutel kan bereiken, kan meedoen aan een bake-off, en het schrijven loopt via jouw sleutel. Modellen die je zelf hebt gefinetuned, blijven buiten beschouwing, zodat de beoordelaars een model altijd zien zoals de maker het bouwde.Gebruik je eigen AI-sleutel
- Wie beoordeelt de passages?
- Hetzelfde panel van beoordelingsmodellen als bij de openbare benchmark van Novelmint. Ze scoren elke passage zonder te zien welk model hem schreef, en een beoordelaar scoort nooit een model van de eigen maker.
- Wat kost een bake-off?
- De beoordeling, en alle teksten van Novelmint-modellen, kosten credits tegen wat de AI Novelmint kost, zonder opslag. Schrijven met je eigen sleutel kost geen credits. Je ziet de prijs voordat je begint en wordt nooit meer in rekening gebracht.Prijzen
- Worden mijn resultaten openbaar?
- Je scores, nooit de passages, kunnen helpen modellen te rangschikken op de openbare benchmark. Je kunt dat uitzetten op het tabblad, en uitzetten trekt ook de scores van je eerdere runs in.
- Hoe gebruik ik het winnende model?
- Druk op "Gebruik voor Builds" bij de passage. Vanuit een serie bouwt die serie er voortaan mee. Vanuit je Studio wordt het de standaard voor elke serie zonder eigen modellen.
What this page does not claim
- Een bake-off draait op de standaardscènes van de benchmark, niet op je manuscript.
- Een paar scènes zijn een steekproef. Een model dat een korte run wint, past niet gegarandeerd bij elk hoofdstuk van je boek.
- Beoordelaars scoren vakmanschap en trouw aan de opdracht. Of jij de stem mooi vindt, blijft jouw keuze, en daarom lees je de passages zelf.
- De scènes, scores en labels in het voorbeeld op deze pagina zijn verzonnen. Het is geen uitvoer van een echte run.
Keep reading
De benchmark erachter
Een bake-off is de openbare fictiebenchmark, door jou gedraaid op de modellen waar jij om geeft. De scores van jouw runs kunnen helpen modellen voor iedereen te rangschikken, daarom wordt het beoordelen tegen kostprijs berekend.
Gerelateerd
Een boek plannen met Minty
Praat het verhaal door en zie het veranderen in hoofdstukken en scènes op je tijdlijn.
Hoofdstukopbouw
Zet de beats van een hoofdstuk om naar proza, geschreven vanuit jouw plan, jouw bijbel en jouw stem.
Gebruik je eigen AI-sleutel
Bouw hoofdstukken met je eigen Anthropic-, OpenAI-, Google-, xAI- of OpenRouter-sleutel, of met de AI die bij je credits hoort. Jouw keuze, per serie.
Kies je AI-model
Kies het AI-model dat je serie schrijft, vergeleken op gemeten schrijfkwaliteit en kosten, en pin een ander model vast aan elke afzonderlijke beat.
Lees het bewijs en kies dan je schrijver.
Geen creditcard. Je eerste hoofdstuk is gratis.