নিজেই ফিকশনে AI মডেল পরীক্ষা করুন, তারপর বিজয়ীকে দিয়ে বিল্ড করুন
Last checked against the product November 10, 2026
লিডারবোর্ড বলে দেয় গড়ে কোন মডেল সবচেয়ে ভালো স্কোর করেছে। কিন্তু কোনটি পড়তে আপনার ভালো লাগবে, তা বলতে পারে না। bake-off দিয়ে আপনি তা নিজেই জানতে পারেন। দুই থেকে পাঁচটি মডেল বেছে নিন, Novelmint-এর নিজস্ব মডেল, বৃহত্তর OpenRouter তালিকা, বা আপনার নিজের API কী থেকে, আর প্রতিটি আমাদের পাবলিক ফিকশন বেঞ্চমার্কের একই দৃশ্যগুলো লিখবে। একদল বিচারক প্রতিটি অংশের ব্লাইন্ড স্কোর দেন, আর আপনি সেগুলো পাশাপাশি পড়েন, চাইলে নাম লুকিয়ে। কোনোটি আলাদা করে চোখে পড়লে এক ক্লিকেই সেটি আপনার সিরিজের বিল্ড মডেল হয়ে যায়।
Key takeaways
- একটি bake-off আপনার বাছাই করা দুই থেকে পাঁচটি মডেলে Novelmint-এর ফিকশন বেঞ্চমার্ক চালায়: Novelmint-এর মডেল, OpenRouter তালিকার যেকোনোটি, বা আপনার নিজের API কী-র মডেল।
- প্রতিটি দৃশ্যে প্রতিটি মডেল একই ব্রিফ পায়, যা বেঞ্চমার্কের স্ট্যান্ডার্ড দৃশ্য থেকে নেওয়া, ফলে তুলনাটি সমানে সমান হয়।
- বেঞ্চমার্কের নিজস্ব বিচারক প্যানেল প্রতিটি অংশের ব্লাইন্ড স্কোর দেয়, আর কোনো বিচারক কখনও নিজের নির্মাতার মডেলকে স্কোর দেয় না।
- আপনি অংশগুলো পাশাপাশি পড়েন, বেছে নেওয়ার আগে পর্যন্ত মডেলের নাম লুকিয়ে রাখতে পারেন, এবং পুরো রানটি ফাইল হিসেবে সংরক্ষণ করতে পারেন।
- "Use for Builds"-এ এক ক্লিকে বিজয়ী মডেলটি সেই সিরিজের মডেল হয়ে যায়, অথবা সব সিরিজের জন্য আপনার Studio ডিফল্ট হয়।
What it does
একটি bake-off আপনাকে কী দেয়
একসঙ্গে সর্বোচ্চ পাঁচটি মডেল
Novelmint-এর পরিমাপ করা মডেল, "More models" তালিকার যেসব মডেলের এখনও স্কোর নেই, এবং আপনার নিজের কী দিয়ে পাওয়া যায় এমন বেস মডেল একসঙ্গে মিলিয়ে নিন।
সবার জন্য একই দৃশ্য
প্রতিটি রাউন্ডে প্রতিটি মডেল বেঞ্চমার্কের কয়েকটি স্ট্যান্ডার্ড দৃশ্য লেখে, যেগুলোর স্কোর এ পর্যন্ত সবচেয়ে কম। একসঙ্গে কয়টি রাউন্ড চালাবেন তা আপনি বেছে নিন।
ব্লাইন্ড স্কোরিং
পাবলিক বেঞ্চমার্কের একই বিচারক-প্যানেল প্রতিটি অংশ স্কোর করে, কোন মডেল লিখেছে তা না জেনেই, এবং কখনও নিজের নির্মাতার মডেলের লেখা নয়। স্কোর ০ থেকে ১০০: দৃশ্যটি যা যাচাই করতে চায় তা কতটা ভালো করেছে, আর ব্রিফ কতটা মেনেছে।
ব্লাইন্ড পড়া, আপনার জন্যও
"Hide model names until I pick" টিক দিন, অংশগুলো Model A, Model B ইত্যাদি নামে দেখাবে, ফলে খ্যাতির আগে আপনি লেখাটাই বিচার করবেন।
প্রমাণ রেখে দিন
কোন মডেল কোনটি তার চাবিসহ একটি রান ফাইল হিসেবে সেভ করুন। আপনার আগের বেক-অফগুলো ট্যাবে তালিকাভুক্ত থাকে।
সরাসরি আপনার বিল্ডে
যে অংশটি ভালো লেগেছে তাতে "Use for Builds" চাপুন। সিরিজ থেকে চাপলে সেই সিরিজের মডেল ঠিক হয়; আপনার Studio থেকে চাপলে সব সিরিজের ডিফল্ট ঠিক হয়।
How to use it
একটি চালানোর ধাপ
Bake-off ট্যাব খুলুন
এটি AI Models পাতায় থাকে, আপনার Studio-তে এবং প্রতিটি সিরিজে।
দুই থেকে পাঁচটি মডেল বেছে নিন
Novelmint-এর মডেল, বিস্তৃত OpenRouter তালিকা, এবং Account, তারপর AI keys-এ সেভ করা যেকোনো API কী-এর মডেল খুঁজুন।
রাউন্ড সংখ্যা ঠিক করুন ও দাম দেখুন
রান শুরুর আগেই ট্যাবে এর দাম এবং আপনার কত ক্রেডিট আছে তা দেখানো হয়।
চালান ও পড়ুন
রান শেষ হলে প্রতিটি দৃশ্যের অংশগুলো শব্দসংখ্যা ও স্কোরসহ পাশাপাশি পড়ুন। ব্লাইন্ডভাবে পড়তে চাইলে নামগুলো লুকিয়ে রাখুন।
বিজয়ীটি ব্যবহার করুন
যেটি চান তাতে "Use for Builds" চাপুন। আপনার পরের চ্যাপ্টার বিল্ডে সেটিই ব্যবহার হবে।
Example
ফলাফল দেখতে কেমন
You ask
বেঞ্চমার্কের একটি দৃশ্য: বাবার শেষকৃত্যে দুই বিচ্ছিন্ন বোনের দেখা, আর কেউই যা বলতে এসেছিল তা বলে না।
You get back
- Model A: ২৩১ শব্দ, স্কোর ৭৮। নীরবতাকে দিয়েই দৃশ্য বহন করায় এবং ব্রিফ কঠোরভাবে মেনে চলে।
- Model B: ২১৪ শব্দ, স্কোর ৭১। সংলাপ জোরালো, কিন্তু শেষ লাইনে এক বোন না-বলা কথাটা মুখে বলে ফেলে।
- Model C: ২২৬ শব্দ, স্কোর ৬৪। পরিবেশ জীবন্ত, কিন্তু আবেগ দেখানোর চেয়ে বলে দেওয়া হয়েছে বেশি।
- আপনি Model A বেছে নেন, নামগুলো প্রকাশ পায়, আর "Use for Builds" সেটিকে আপনার সিরিজের মডেল করে দেয়।
ফলাফলের ধরন বোঝাতে বানানো দৃশ্য, বানানো স্কোর ও ব্লাইন্ড লেবেলসহ একটি উদাহরণ। আপনার রানে বেঞ্চমার্কের আসল দৃশ্য ও বিচারকদের আসল স্কোর ব্যবহার হয়।
Questions
Frequently asked
- কথাসাহিত্য লেখার জন্য AI মডেলগুলোর তুলনা করব কীভাবে?
- Novelmint-এ AI Models পাতার Bake-off ট্যাব খুলে দুই থেকে পাঁচটি মডেল বেছে নিন। প্রতিটি মডেল পাবলিক ফিকশন বেঞ্চমার্কের একই স্ট্যান্ডার্ড দৃশ্য লেখে, একটি বিচারক-প্যানেল প্রতিটি অংশ ব্লাইন্ডভাবে স্কোর করে, আর আপনি সেগুলো পাশাপাশি পড়েন।
- বেক-অফে কি আমার নিজের বই ব্যবহার হয়?
- না। প্রতিটি মডেল বেঞ্চমার্কের স্ট্যান্ডার্ড দৃশ্য লেখে, তাই ফলাফল সমান সমান তুলনা করে এবং আপনার পাণ্ডুলিপি রানের অংশ নয়। কোনো মডেল আপনার নিজের চ্যাপ্টার কেমন সামলায় দেখতে, সেটি কোনো সিরিজের জন্য বেছে নিয়ে বিল্ড করুন।আপনার AI মডেল বেছে নিন
- নিজের API কী দিয়ে কি কোনো মডেল পরীক্ষা করতে পারি?
- হ্যাঁ। আপনার সেভ করা কী দিয়ে পাওয়া যায় এমন যেকোনো বেস মডেল বেক-অফে যোগ দিতে পারে, এবং তার লেখা আপনার কী-তে চলে। আপনার নিজে ফাইন-টিউন করা মডেল বাদ থাকে, যাতে বিচারকেরা সবসময় মডেলটিকে নির্মাতার তৈরি রূপেই দেখেন।নিজের AI কী নিয়ে আসুন
- অংশগুলো কে বিচার করে?
- Novelmint-এর পাবলিক বেঞ্চমার্কের একই বিচারক-মডেল প্যানেল। কোন মডেল লিখেছে তা না দেখেই তারা প্রতিটি অংশ স্কোর করে, এবং কোনো বিচারক কখনও নিজের নির্মাতার মডেল স্কোর করে না।
- একটি বেক-অফে কত খরচ?
- বিচার এবং Novelmint-এর মডেলের যেকোনো লেখায় ক্রেডিট লাগে, AI-এর জন্য Novelmint-এর খরচের সমান, কোনো মার্কআপ ছাড়া। নিজের কী-তে লিখলে ক্রেডিট লাগে না। শুরুর আগেই দাম দেখতে পান, এবং তার বেশি কখনও কাটা হয় না।মূল্য
- আমার ফলাফল কি প্রকাশ্য হয়ে যায়?
- আপনার স্কোর, অংশগুলো কখনও নয়, পাবলিক বেঞ্চমার্কে মডেল র্যাঙ্ক করতে সাহায্য করতে পারে। ট্যাবে এটি বন্ধ করতে পারেন, আর বন্ধ করলে আগের রানগুলোর স্কোরও ফিরিয়ে নেওয়া হয়।
- যে মডেল জিতল সেটি কীভাবে ব্যবহার করব?
- তার অংশে "Use for Builds" চাপুন। সিরিজ থেকে চাপলে সেই সিরিজ এখন সেটি দিয়ে বিল্ড হয়। আপনার Studio থেকে চাপলে নিজস্ব মডেল নেই এমন সব সিরিজের ডিফল্ট হয়ে যায়।
What this page does not claim
- বেক-অফ চলে বেঞ্চমার্কের স্ট্যান্ডার্ড দৃশ্যে, আপনার পাণ্ডুলিপিতে নয়।
- কয়েকটি দৃশ্য একটি নমুনা মাত্র। ছোট রানে জেতা মডেল আপনার বইয়ের প্রতিটি চ্যাপ্টারে মানাবে, এমন নিশ্চয়তা নেই।
- বিচারকেরা কারুকাজ ও ব্রিফের প্রতি বিশ্বস্ততা স্কোর করেন। কণ্ঠস্বর ভালো লাগল কি না তা এখনও আপনার সিদ্ধান্ত, তাই অংশগুলো নিজে পড়বেন।
- এই পাতার উদাহরণের দৃশ্য, স্কোর ও লেবেল বানানো। এগুলো কোনো আসল রানের আউটপুট নয়।
Keep reading
এর পেছনের বেঞ্চমার্ক
বেক-অফ হলো পাবলিক ফিকশন বেঞ্চমার্ক, যা আপনি নিজের পছন্দের মডেলগুলোর ওপর চালান। আপনার রানের স্কোর সবার জন্য মডেল র্যাঙ্ক করতে সাহায্য করতে পারে, তাই বিচারের দাম রাখা হয় খরচের সমান।
সম্পর্কিত
Minty-র সাথে একটি বই পরিকল্পনা করুন
গল্পটি নিয়ে কথা বলুন এবং দেখুন এটি আপনার Timeline-এ অধ্যায় ও দৃশ্যে পরিণত হচ্ছে।
Chapter builds
একটি অধ্যায়ের beats-কে গদ্যে রূপান্তরিত করুন, আপনার পরিকল্পনা, আপনার bible এবং আপনার কণ্ঠস্বর থেকে লেখা।
নিজের AI কী নিয়ে আসুন
আপনার নিজের Anthropic, OpenAI, Google, xAI বা OpenRouter কী দিয়ে, অথবা ক্রেডিটে অন্তর্ভুক্ত AI দিয়ে অধ্যায় তৈরি করুন। পছন্দ আপনার, প্রতিটি সিরিজে আলাদা।
আপনার AI মডেল বেছে নিন
আপনার সিরিজ লেখার AI মডেল বেছে নিন, পরিমাপ করা লেখার মান ও খরচের তুলনায়, আর যে কোনো একটি বিটে আলাদা মডেল বসিয়ে দিন।
প্রমাণ পড়ুন, তারপর আপনার লেখক বেছে নিন।
কার্ড লাগবে না। প্রথম চ্যাপ্টার বিনামূল্যে।