Testez vous-même les modèles d’IA en fiction, puis générez avec le gagnant
Last checked against the product November 10, 2026
Un classement dit quel modèle a obtenu la meilleure note moyenne. Il ne dit pas lequel vous aurez plaisir à lire. Le bake-off vous permet de le découvrir. Choisissez deux à cinq modèles, parmi ceux de Novelmint, la liste plus large d’OpenRouter ou votre propre clé API, et chacun écrit les mêmes scènes de notre benchmark de fiction public. Un jury note chaque passage à l’aveugle, et vous les lisez côte à côte, noms masqués si vous le souhaitez. Quand l’un se démarque, un seul clic en fait le modèle de génération de votre série.
Key takeaways
- Un bake-off lance le benchmark de fiction de Novelmint sur deux à cinq modèles de votre choix : ceux de Novelmint, ceux de la liste OpenRouter ou ceux de votre propre clé API.
- Chaque modèle reçoit la même consigne pour chaque scène, tirée des scènes standard du benchmark, pour une comparaison à armes égales.
- Le jury du benchmark note chaque passage à l’aveugle, et un juge ne note jamais un modèle de son propre éditeur.
- Vous lisez les passages côte à côte, pouvez masquer les noms des modèles jusqu’à votre choix, et enregistrer toute l’exécution dans un fichier.
- Un clic sur « Utiliser pour les générations » fait du gagnant le modèle de cette série, ou votre défaut du Studio pour toutes les séries.
What it does
Ce qu’un bake-off vous apporte
Jusqu’à cinq modèles à la fois
Mélangez les modèles évalués de Novelmint, ceux de la liste « Plus de modèles » qui n'ont pas encore de score, et les modèles de base accessibles avec votre propre clé.
Les mêmes scènes pour tous
À chaque tour, chaque modèle écrit quelques scènes standard du benchmark, celles qui ont le moins de scores jusqu'ici. Choisissez le nombre de tours à lancer d'un coup.
Notation à l'aveugle
Le même jury que le benchmark public note chaque passage sans savoir quel modèle l'a écrit, et jamais un passage issu de son propre éditeur. Un score va de 0 à 100 : à quel point la scène remplit ce qu'elle teste, plus sa fidélité au brief.
Lecture à l'aveugle, pour vous aussi
Cochez « Masquer les noms des modèles jusqu'à mon choix » et les passages apparaissent sous les noms Modèle A, Modèle B, etc. : vous jugez l'écriture avant la réputation.
Gardez les preuves
Enregistrez un run dans un fichier, avec la clé qui associe chaque modèle à son nom. Vos anciens bake-offs restent listés dans l'onglet.
Directement dans vos builds
Cliquez sur « Utiliser pour les builds » sur le passage qui vous a plu. Depuis une série, cela définit le modèle de cette série ; depuis votre Studio, cela définit le modèle par défaut de toutes les séries.
How to use it
Lancer un bake-off
Ouvrez l'onglet Bake-off
Il se trouve sur la page Modèles d'IA, dans votre Studio comme dans chaque série.
Choisissez de deux à cinq modèles
Cherchez parmi les modèles de Novelmint, la liste élargie d'OpenRouter et les modèles de toute clé d'API enregistrée sous Compte, puis Clés d'IA.
Choisissez le nombre de tours et vérifiez le prix
L'onglet affiche le prix du run avant son lancement, ainsi que votre solde de crédits.
Lancez et lisez
Une fois le run terminé, lisez côte à côte les passages de chaque scène, avec nombre de mots et scores. Masquez les noms si vous voulez lire à l'aveugle.
Adoptez le gagnant
Cliquez sur « Utiliser pour les builds » sur celui que vous voulez. Votre prochain build de chapitre l'utilisera.
Example
À quoi ressemble un résultat
You ask
Une scène du benchmark : deux sœurs brouillées se retrouvent à l'enterrement de leur père, et ni l'une ni l'autre ne dit ce qu'elle était venue dire.
You get back
- Modèle A : 231 mots, score 78. Laisse le silence porter la scène et respecte strictement le brief.
- Modèle B : 214 mots, score 71. Dialogues solides, mais une sœur dit à voix haute le non-dit dans la dernière réplique.
- Modèle C : 226 mots, score 64. Décor vivant, mais l'émotion est plus racontée que montrée.
- Vous choisissez le Modèle A, les noms sont révélés, et « Utiliser pour les builds » en fait le modèle de votre série.
Une illustration avec une scène, des scores et des étiquettes à l'aveugle inventés, pour montrer la forme d'un résultat. Votre run utilise les vraies scènes du benchmark et les vrais scores du jury.
Questions
Frequently asked
- Comment comparer des modèles d'IA pour écrire de la fiction ?
- Dans Novelmint, ouvrez l'onglet Bake-off de la page Modèles d'IA et choisissez de deux à cinq modèles. Chacun écrit les mêmes scènes standard du benchmark public de fiction, un jury note chaque passage à l'aveugle, et vous les lisez côte à côte.
- Un bake-off utilise-t-il mon propre livre ?
- Non. Chaque modèle écrit les scènes standard du benchmark : les résultats sont donc comparables et votre manuscrit ne fait pas partie du run. Pour voir comment un modèle traite vos propres chapitres, choisissez-le pour une série et lancez un build.Choisir votre modèle d'IA
- Puis-je tester un modèle avec ma propre clé d'API ?
- Oui. Tout modèle de base accessible avec votre clé enregistrée peut participer à un bake-off, et son écriture passe par votre clé. Les modèles que vous avez affinés vous-même sont exclus, afin que le jury voie toujours un modèle tel que son éditeur l'a conçu.Apportez votre propre clé d'IA
- Qui juge les passages ?
- Le même jury de modèles que le benchmark public de Novelmint. Il note chaque passage sans voir quel modèle l'a écrit, et un juge ne note jamais un modèle issu de son propre éditeur.
- Combien coûte un bake-off ?
- La notation, et l'écriture par les modèles de Novelmint, coûtent des crédits au prix que l'IA coûte à Novelmint, sans marge. L'écriture sur votre propre clé ne coûte aucun crédit. Vous voyez le prix avant de commencer et vous ne payez jamais plus.Tarifs
- Mes résultats deviennent-ils publics ?
- Vos scores, jamais les passages, peuvent aider à classer les modèles sur le benchmark public. Vous pouvez le désactiver dans l'onglet, ce qui retire aussi les scores de vos runs précédents.
- Comment utiliser le modèle gagnant ?
- Cliquez sur « Utiliser pour les builds » sur son passage. Depuis une série, cette série se construira désormais avec lui. Depuis votre Studio, il devient le modèle par défaut de toutes les séries qui n'ont pas de modèles propres.
What this page does not claim
- Un bake-off s'exécute sur les scènes standard du benchmark, pas sur votre manuscrit.
- Quelques scènes ne sont qu'un échantillon. Un modèle qui gagne un run court n'est pas garanti de convenir à tous les chapitres de votre livre.
- Les juges évaluent le métier et la fidélité au brief. Aimer la voix reste votre décision, c'est pourquoi vous lisez vous-même les passages.
- Les scènes, scores et étiquettes de l'exemple de cette page sont inventés. Ce n'est pas le résultat d'un vrai run.
Keep reading
Le benchmark qui le sous-tend
Un bake-off, c'est le benchmark public de fiction, lancé par vous sur les modèles qui vous intéressent. Les scores de vos runs peuvent aider à classer les modèles pour tout le monde, c'est pourquoi la notation est facturée à prix coûtant.
Associé
Planifier un livre avec Minty
Parlez de votre histoire et regardez-la prendre forme en chapitres et scènes sur votre Timeline.
Développement de chapitres
Transformez les séquences d'un chapitre en prose, écrite à partir de votre plan, de votre bible et de votre voix.
Apportez votre propre clé d'IA
Générez vos chapitres avec votre propre clé Anthropic, OpenAI, Google, xAI ou OpenRouter, ou avec l'IA incluse dans vos crédits. À vous de choisir, série par série.
Choisir votre modèle d'IA
Choisissez le modèle d'IA qui écrit votre série, comparé sur la qualité d'écriture mesurée et le coût, et attribuez-en un autre à n'importe quel beat.
Lisez les preuves, puis choisissez votre plume.
Sans carte. Votre premier chapitre est offert.