Teste KI-Modelle selbst an Fiction und baue dann mit dem Sieger
Last checked against the product November 10, 2026
Eine Rangliste verrät dir, welches Modell im Schnitt am besten abschnitt. Sie sagt dir nicht, welches du am liebsten liest. Ein Bake-off klärt das. Wähle zwei bis fünf Modelle, von Novelmint, aus der größeren OpenRouter-Liste oder von deinem eigenen API-Schlüssel, und jedes schreibt dieselben Szenen aus unserem öffentlichen Fiction-Benchmark. Eine Jury bewertet jeden Abschnitt blind, und du liest sie im Vergleich, auf Wunsch mit verborgenen Namen. Sticht eines hervor, macht ein Klick es zum Modell, mit dem deine Serie gebaut wird.
Key takeaways
- Ein Bake-off lässt den Fiction-Benchmark von Novelmint auf zwei bis fünf Modellen laufen, die du wählst: von Novelmint, aus der OpenRouter-Liste oder von deinem eigenen API-Schlüssel.
- Jedes Modell erhält für jede Szene dieselbe Vorgabe aus den Standardszenen des Benchmarks, sodass der Vergleich fair ist.
- Die Jury des Benchmarks bewertet jeden Abschnitt blind, und ein Juror bewertet nie ein Modell seines eigenen Herstellers.
- Du liest die Abschnitte im Vergleich, kannst die Modellnamen bis zu deiner Wahl verbergen und den gesamten Durchlauf als Datei speichern.
- Ein Klick auf „Für Builds verwenden“ macht den Sieger zum Modell dieser Serie oder zu deinem Studio-Standard für alle Serien.
What it does
Was ein Bake-off dir bringt
Bis zu fünf Modelle gleichzeitig
Kombiniere die gemessenen Modelle von Novelmint, Modelle aus der Liste „Weitere Modelle“, für die es noch keine Bewertung gibt, und Basismodelle, die dein eigener Schlüssel erreichen kann.
Für alle dieselben Szenen
In jeder Runde schreibt jedes Modell einige der Standardszenen des Benchmarks, und zwar die mit den bisher wenigsten Bewertungen. Du legst fest, wie viele Runden auf einmal laufen.
Blinde Bewertung
Dasselbe Richtergremium wie beim öffentlichen Benchmark bewertet jeden Text, ohne zu wissen, welches Modell ihn geschrieben hat, und nie einen Text aus dem Haus des eigenen Herstellers. Eine Bewertung reicht von 0 bis 100: wie gut die Szene leistet, was sie testen soll, plus wie genau sie dem Briefing gefolgt ist.
Blind lesen, auch für dich
Aktiviere „Modellnamen ausblenden, bis ich wähle“, und die Texte erscheinen als Modell A, Modell B usw. So beurteilst du das Schreiben, bevor der Ruf mitspielt.
Belege aufbewahren
Speichere einen Durchlauf als Datei, mit einer Zuordnung, welches Modell welches ist. Deine früheren Bake-offs bleiben im Tab aufgelistet.
Direkt in deine Builds
Klicke beim Text, der dir gefallen hat, auf „Für Builds verwenden“. In einer Serie legt das das Modell dieser Serie fest; in deinem Studio setzt es den Standard für alle Serien.
How to use it
So läuft ein Bake-off
Öffne den Tab „Bake-off“
Du findest ihn auf der Seite „KI-Modelle“, in deinem Studio und in jeder Serie.
Wähle zwei bis fünf Modelle
Durchsuche die Modelle von Novelmint, die größere OpenRouter-Liste und die Modelle jedes API-Schlüssels, den du unter Konto → KI-Schlüssel gespeichert hast.
Runden wählen und den Preis prüfen
Der Tab zeigt dir vor dem Start den Preis für den Durchlauf und wie viele Credits du hast.
Starten und lesen
Wenn der Durchlauf fertig ist, lies die Texte jeder Szene nebeneinander, mit Wortzahlen und Bewertungen. Blende die Namen aus, wenn du blind lesen willst.
Den Gewinner nutzen
Klicke beim gewünschten Text auf „Für Builds verwenden“. Dein nächster Kapitel-Build nutzt ihn.
Example
So sieht ein Ergebnis aus
You ask
Eine Benchmark-Szene: Zwei entfremdete Schwestern treffen sich bei der Beerdigung ihres Vaters, und keine sagt, was sie sagen wollte.
You get back
- Modell A: 231 Wörter, Bewertung 78. Lässt das Schweigen die Szene tragen und hält sich strikt ans Briefing.
- Modell B: 214 Wörter, Bewertung 71. Starke Dialoge, aber im letzten Satz spricht eine Schwester das Unausgesprochene aus.
- Modell C: 226 Wörter, Bewertung 64. Lebendiges Setting, doch die Emotion wird eher erzählt als gezeigt.
- Du wählst Modell A, die Namen werden aufgedeckt, und mit „Für Builds verwenden“ wird es das Modell deiner Serie.
Eine Illustration mit erfundener Szene, erfundenen Bewertungen und blinden Labels, um die Form eines Ergebnisses zu zeigen. Dein Durchlauf nutzt die echten Szenen des Benchmarks und die echten Bewertungen der Richter.
Questions
Frequently asked
- Wie kann ich KI-Modelle für das Schreiben von Fiktion vergleichen?
- Öffne in Novelmint auf der Seite „KI-Modelle“ den Tab „Bake-off“ und wähle zwei bis fünf Modelle. Jedes schreibt dieselben Standardszenen aus dem öffentlichen Fiction-Benchmark, ein Richtergremium bewertet jeden Text blind, und du liest sie nebeneinander.
- Nutzt ein Bake-off mein eigenes Buch?
- Nein. Jedes Modell schreibt die Standardszenen des Benchmarks, sodass die Ergebnisse vergleichbar sind und dein Manuskript nicht Teil des Durchlaufs ist. Um zu sehen, wie ein Modell mit deinen eigenen Kapiteln umgeht, wähle es für eine Serie aus und starte einen Build.Wähle dein KI-Modell
- Kann ich ein Modell mit meinem eigenen API-Schlüssel testen?
- Ja. Jedes Basismodell, das dein gespeicherter Schlüssel erreicht, kann an einem Bake-off teilnehmen, und sein Text wird über deinen Schlüssel geschrieben. Von dir selbst feinabgestimmte Modelle sind ausgeschlossen, damit die Richter ein Modell stets so sehen, wie sein Hersteller es gebaut hat.Bring deinen eigenen KI-Schlüssel mit
- Wer bewertet die Texte?
- Dasselbe Gremium aus Richtermodellen wie beim öffentlichen Benchmark von Novelmint. Sie bewerten jeden Text, ohne zu sehen, welches Modell ihn geschrieben hat, und ein Richter bewertet nie ein Modell aus dem Haus seines eigenen Herstellers.
- Was kostet ein Bake-off?
- Das Bewerten und das Schreiben durch Modelle von Novelmint kosten Credits zu dem Preis, den die KI Novelmint kostet, ohne Aufschlag. Das Schreiben mit deinem eigenen Schlüssel kostet keine Credits. Du siehst den Preis vor dem Start und zahlst nie mehr als diesen.Preise
- Werden meine Ergebnisse öffentlich?
- Deine Bewertungen, nie die Texte, können helfen, Modelle im öffentlichen Benchmark zu ranken. Du kannst das im Tab abschalten; dabei werden auch die Bewertungen deiner früheren Durchläufe zurückgenommen.
- Wie nutze ich das Modell, das gewonnen hat?
- Klicke bei seinem Text auf „Für Builds verwenden“. Aus einer Serie heraus baut diese Serie danach damit. Aus deinem Studio wird es zum Standard für jede Serie ohne eigene Modelle.
What this page does not claim
- Ein Bake-off läuft mit den Standardszenen des Benchmarks, nicht mit deinem Manuskript.
- Ein paar Szenen sind eine Stichprobe. Ein Modell, das einen kurzen Durchlauf gewinnt, passt nicht garantiert zu jedem Kapitel deines Buchs.
- Die Richter bewerten Handwerk und Treue zum Briefing. Ob dir der Ton gefällt, bleibt deine Entscheidung, deshalb liest du die Texte selbst.
- Die Szenen, Bewertungen und Labels im Beispiel auf dieser Seite sind erfunden. Sie stammen nicht aus einem echten Durchlauf.
Keep reading
Der Benchmark dahinter
Ein Bake-off ist der öffentliche Fiction-Benchmark, von dir mit den Modellen durchgeführt, die dich interessieren. Die Bewertungen deiner Durchläufe können helfen, Modelle für alle zu ranken. Deshalb wird das Bewerten zu Selbstkosten berechnet.
Verwandt
Buch mit Minty planen
Erzähl die Geschichte, und sieh zu, wie sie zu Kapiteln und Szenen auf deiner Timeline wird.
Kapitel-Builds
Wandle die Beats eines Kapitels in Prosa um – geschrieben aus deinem Plan, deiner Bible und deiner Stimme.
Eigenen KI-Schlüssel verwenden
Erstelle Kapitel mit deinem eigenen Anthropic-, OpenAI-, Google-, xAI- oder OpenRouter-Schlüssel oder mit der KI, die deine Credits enthalten. Deine Wahl, pro Serie.
KI-Modell wählen
Wähle das KI-Modell, das deine Serie schreibt – verglichen nach gemessener Schreibqualität und Kosten – und lege für einzelne Beats ein anderes fest.
Lies die Belege, dann wähle deinen Autor.
Keine Karte nötig. Dein erstes Kapitel ist gratis.