AI ماڈلز کو فکشن پر خود آزمائیں، پھر جیتنے والے سے بنائیں
Last checked against the product November 10, 2026
لیڈر بورڈ بتاتا ہے کہ اوسطاً کس ماڈل کا اسکور سب سے اچھا رہا۔ وہ یہ نہیں بتا سکتا کہ آپ کو کس کی تحریر پڑھنا پسند آئے گی۔ Bake-off آپ کو یہ جاننے دیتا ہے۔ دو سے پانچ ماڈلز چنیں، Novelmint کے اپنے، وسیع OpenRouter فہرست سے، یا اپنی API key سے، اور ہر ایک ہمارے عوامی فکشن بینچ مارک کے وہی مناظر لکھتا ہے۔ ججوں کا ایک پینل ہر عبارت کو بلائنڈ اسکور کرتا ہے، اور آپ انہیں ساتھ ساتھ پڑھتے ہیں، چاہیں تو نام چھپا کر۔ جب کوئی ماڈل نمایاں نکلے تو ایک کلک اسے آپ کی سیریز کا بلڈ ماڈل بنا دیتا ہے۔
Key takeaways
- Bake-off آپ کے چنے ہوئے دو سے پانچ ماڈلز پر Novelmint کا فکشن بینچ مارک چلاتا ہے: Novelmint کے ماڈلز، OpenRouter فہرست کا کوئی بھی، یا آپ کی اپنی API key کے ماڈلز۔
- ہر ماڈل کو ہر منظر کے لیے وہی بریف ملتا ہے، جو بینچ مارک کے معیاری مناظر سے لیا گیا ہے، اس لیے موازنہ برابر کی بنیاد پر ہوتا ہے۔
- بینچ مارک کا اپنا جج پینل ہر عبارت کو بلائنڈ اسکور کرتا ہے، اور کوئی جج اپنے ہی ساختہ کار کے ماڈل کو اسکور نہیں کرتا۔
- آپ عبارتیں ساتھ ساتھ پڑھتے ہیں، چننے تک ماڈلز کے نام چھپا سکتے ہیں، اور پوری رن کو فائل کی صورت میں محفوظ کر سکتے ہیں۔
- "Use for Builds" پر ایک کلک جیتنے والے کو اس سیریز کا ماڈل بنا دیتا ہے، یا ہر سیریز کے لیے آپ کا Studio ڈیفالٹ۔
What it does
Bake-off آپ کو کیا دیتا ہے
ایک وقت میں پانچ ماڈلز تک
Novelmint کے جانچے گئے ماڈلز، "More models" فہرست کے وہ ماڈلز جن کا ابھی کوئی اسکور نہیں، اور وہ بنیادی ماڈلز جن تک آپ کی اپنی کلید رسائی رکھتی ہے، سب کو ملا کر آزمائیں۔
سب کے لیے ایک جیسے مناظر
ہر راؤنڈ میں ہر ماڈل بینچ مارک کے چند معیاری مناظر لکھتا ہے، یعنی وہ جنہیں اب تک سب سے کم اسکور ملے ہیں۔ آپ طے کریں کہ ایک ساتھ کتنے راؤنڈ چلانے ہیں۔
اندھی اسکورنگ
عوامی بینچ مارک والا ہی ججوں کا پینل ہر اقتباس کو یہ جانے بغیر اسکور کرتا ہے کہ اسے کس ماڈل نے لکھا، اور کبھی اس کے اپنے بنانے والے کا ماڈل نہیں جانچتا۔ اسکور 0 سے 100 تک ہوتا ہے: منظر اپنے مقصد پر کتنا پورا اترتا ہے، اور ہدایات پر کتنا قائم رہا۔
اندھا مطالعہ، آپ کے لیے بھی
"Hide model names until I pick" پر نشان لگائیں تو اقتباسات Model A، Model B وغیرہ کے نام سے نظر آئیں گے، تاکہ آپ شہرت سے پہلے تحریر کو پرکھیں۔
ثبوت محفوظ رکھیں
کسی رن کو فائل کی صورت میں محفوظ کریں، اس کلید کے ساتھ جو بتاتی ہے کون سا ماڈل کون سا ہے۔ آپ کے پرانے بیک آف ٹیب پر درج رہتے ہیں۔
سیدھا آپ کی بلڈز میں
جو اقتباس پسند آئے اس پر "Use for Builds" دبائیں۔ سیریز کے اندر سے یہ اس سیریز کا ماڈل طے کرتا ہے؛ آپ کے Studio سے یہ ہر سیریز کا ڈیفالٹ بن جاتا ہے۔
How to use it
بیک آف چلانا
Bake-off ٹیب کھولیں
یہ AI Models صفحے پر ہے، آپ کے Studio میں بھی اور ہر سیریز میں بھی۔
دو سے پانچ ماڈلز چنیں
Novelmint کے ماڈلز، OpenRouter کی وسیع فہرست، اور Account، پھر AI keys کے تحت محفوظ کی گئی کسی بھی API کلید کے ماڈلز میں تلاش کریں۔
راؤنڈز کی تعداد چنیں اور قیمت دیکھیں
ٹیب رن شروع ہونے سے پہلے اس کی قیمت دکھاتا ہے، اور یہ بھی کہ آپ کے پاس کتنے کریڈٹس ہیں۔
چلائیں اور پڑھیں
رن مکمل ہونے پر ہر منظر کے اقتباسات الفاظ کی تعداد اور اسکورز کے ساتھ ساتھ ساتھ پڑھیں۔ اندھا مطالعہ کرنا چاہیں تو نام چھپا دیں۔
جیتنے والے کو استعمال کریں
جو پسند آئے اس پر "Use for Builds" دبائیں۔ آپ کی اگلی چیپٹر بلڈ اسی کو استعمال کرے گی۔
Example
نتیجہ کیسا دکھتا ہے
You ask
بینچ مارک کا ایک منظر: دو بچھڑی ہوئی بہنیں اپنے والد کے جنازے پر ملتی ہیں، اور کوئی بھی وہ بات نہیں کہتی جو کہنے آئی تھی۔
You get back
- Model A: 231 الفاظ، اسکور 78۔ خاموشی کو منظر سنبھالنے دیتا ہے اور ہدایات پر پوری طرح قائم رہتا ہے۔
- Model B: 214 الفاظ، اسکور 71۔ مکالمہ مضبوط ہے، مگر آخری سطر میں ایک بہن ان کہی بات بول دیتی ہے۔
- Model C: 226 الفاظ، اسکور 64۔ ماحول جاندار ہے، اور جذبات دکھائے کم، بتائے زیادہ گئے ہیں۔
- آپ Model A چنتے ہیں، نام ظاہر ہو جاتے ہیں، اور "Use for Builds" اسے آپ کی سیریز کا ماڈل بنا دیتا ہے۔
یہ ایک مثال ہے جس میں فرضی منظر، فرضی اسکورز اور اندھے لیبل ہیں، تاکہ نتیجے کی شکل واضح ہو۔ آپ کا رن بینچ مارک کے اصل مناظر اور ججوں کے اصل اسکورز استعمال کرتا ہے۔
Questions
Frequently asked
- فکشن لکھنے کے لیے AI ماڈلز کا موازنہ کیسے کروں؟
- Novelmint میں AI Models صفحے پر Bake-off ٹیب کھولیں اور دو سے پانچ ماڈلز چنیں۔ ہر ایک عوامی فکشن بینچ مارک کے وہی معیاری مناظر لکھتا ہے، ججوں کا پینل ہر اقتباس کو اندھا اسکور کرتا ہے، اور آپ انہیں ساتھ ساتھ پڑھتے ہیں۔
- کیا بیک آف میری اپنی کتاب استعمال کرتا ہے؟
- نہیں۔ ہر ماڈل بینچ مارک کے معیاری مناظر لکھتا ہے، اس لیے نتائج برابر کی بنیاد پر موازنہ کرتے ہیں اور آپ کا مسودہ رن کا حصہ نہیں ہوتا۔ کوئی ماڈل آپ کے اپنے چیپٹرز کو کیسے سنبھالتا ہے، یہ دیکھنے کے لیے اسے کسی سیریز کے لیے چنیں اور بلڈ کریں۔اپنا AI ماڈل چنیں
- کیا میں کسی ماڈل کو اپنی API کلید پر آزما سکتا ہوں؟
- جی ہاں۔ آپ کی محفوظ کلید جس بنیادی ماڈل تک پہنچ سکے وہ بیک آف میں شامل ہو سکتا ہے، اور اس کی تحریر آپ کی کلید پر چلتی ہے۔ آپ کے خود فائن ٹیون کیے ہوئے ماڈلز شامل نہیں ہوتے، تاکہ جج ہمیشہ ماڈل کو ویسا ہی دیکھیں جیسا اس کے بنانے والے نے بنایا۔اپنی AI کلید لائیں
- اقتباسات کو کون جانچتا ہے؟
- وہی جج ماڈلز کا پینل جو Novelmint کے عوامی بینچ مارک میں ہے۔ وہ ہر اقتباس کو یہ دیکھے بغیر اسکور کرتے ہیں کہ کس ماڈل نے لکھا، اور کوئی جج اپنے ہی بنانے والے کے ماڈل کو کبھی اسکور نہیں کرتا۔
- بیک آف کی قیمت کیا ہے؟
- ججنگ اور Novelmint کے ماڈلز کی تحریر پر کریڈٹس لگتے ہیں، اتنے ہی جتنا AI کا خرچ Novelmint کو پڑتا ہے، بغیر کسی اضافی منافع کے۔ آپ کی اپنی کلید پر تحریر کے کریڈٹس نہیں لگتے۔ آپ کو شروع کرنے سے پہلے قیمت نظر آتی ہے، اور اس سے زیادہ کبھی نہیں لی جاتی۔قیمتیں
- کیا میرے نتائج عوامی ہو جاتے ہیں؟
- آپ کے اسکورز، اقتباسات نہیں، عوامی بینچ مارک پر ماڈلز کی درجہ بندی میں مدد دے سکتے ہیں۔ آپ ٹیب پر اسے بند کر سکتے ہیں، اور بند کرنے سے آپ کے پچھلے رنز کے اسکورز بھی واپس لے لیے جاتے ہیں۔
- جیتنے والا ماڈل کیسے استعمال کروں؟
- اس کے اقتباس پر "Use for Builds" دبائیں۔ سیریز کے اندر سے وہ سیریز اب اسی سے بلڈ ہوگی۔ آپ کے Studio سے یہ ہر اس سیریز کا ڈیفالٹ بن جاتا ہے جس کے اپنے ماڈلز نہیں ہیں۔
What this page does not claim
- بیک آف بینچ مارک کے معیاری مناظر پر چلتا ہے، آپ کے مسودے پر نہیں۔
- چند مناظر محض ایک نمونہ ہیں۔ جو ماڈل مختصر رن جیت جائے، ضروری نہیں کہ وہ آپ کی کتاب کے ہر چیپٹر کے لیے موزوں ہو۔
- جج فن اور ہدایات سے وفاداری کو اسکور کرتے ہیں۔ آواز پسند آئی یا نہیں، یہ فیصلہ پھر بھی آپ کا ہے، اسی لیے آپ اقتباسات خود پڑھتے ہیں۔
- اس صفحے کی مثال کے مناظر، اسکورز اور لیبل فرضی ہیں۔ یہ کسی اصل رن کا آؤٹ پٹ نہیں ہیں۔
Keep reading
اس کے پیچھے کا بینچ مارک
بیک آف دراصل وہی عوامی فکشن بینچ مارک ہے جو آپ اپنے پسندیدہ ماڈلز پر خود چلاتے ہیں۔ آپ کے رنز سے بنے اسکورز سب کے لیے ماڈلز کی درجہ بندی میں مدد دے سکتے ہیں، اسی لیے ججنگ کی قیمت اس کی لاگت کے برابر رکھی گئی ہے۔
متعلقہ
Minty کے ساتھ کتاب کی منصوبہ بندی کریں
کہانی پر بات کریں اور اسے اپنی Timeline پر ابواب اور مناظر میں بدلتے دیکھیں۔
Chapter builds
ایک باب کے beats کو نثر میں بدلیں — آپ کے منصوبے، آپ کی bible، اور آپ کی آواز سے لکھی ہوئی۔
اپنی AI کلید لائیں
ابواب اپنی Anthropic، OpenAI، Google، xAI یا OpenRouter کلید پر بنائیں، یا اس AI پر جو آپ کے کریڈٹس میں شامل ہے۔ آپ کا انتخاب، ہر سیریز کے لیے۔
اپنا AI ماڈل چنیں
وہ AI ماڈل چنیں جو آپ کی سیریز لکھے، جس کا موازنہ ناپے گئے تحریری معیار اور لاگت پر ہو، اور کسی ایک بیٹ پر مختلف ماڈل پن کریں۔
ثبوت پڑھیں، پھر اپنا لکھاری چنیں۔
کارڈ کی ضرورت نہیں۔ آپ کا پہلا چیپٹر مفت ہے۔