গ্রাফ: প্রবন্ধের একটি ডেটাসেট পেশাদার গ্রেডারের দ্বারা 1-10 রেঞ্জে গ্রেড করা হয়েছিল এবং তাদের প্রকৃত স্কোর নির্ধারণের জন্য রুব্রিকের মধ্যে বিশদ মানদণ্ডের বিপরীতে ক্রস-রেফারেন্স করা হয়েছিল। প্রকৃত স্কোর থেকে স্কোরের তারতম্য দ্বারা বিচ্যুতি সংজ্ঞায়িত করা হয়েছিল। গ্রাফটিতে একটি সামগ্রিক স্কোর (সমস্ত মানদণ্ডের গড়) পাশাপাশি প্রতিটি পৃথক মানদণ্ড রয়েছে৷ মানদণ্ড হল স্মোডিনের এআই গ্রেডারে উপলব্ধ পূর্বনির্ধারিত মানদণ্ড, কলাম শিরোনাম হিসাবে গ্রাফে তালিকাভুক্ত। কাস্টম রুব্রিকগুলি Smodin এর AI Grader কাস্টম মানদণ্ড জেনারেটর ব্যবহার করে Smodin-এর পূর্বনির্ধারিত মানদণ্ডে তালিকাভুক্ত প্রতিটি মানদণ্ড তৈরি করতে তৈরি করা হয়েছিল (কলাম শিরোনামের মতো একই মানদণ্ড)। স্মোডিন প্রিমেড রুব্রিক্সের সামগ্রিক স্কোর আমাদের উন্নত AI-এর সাথে মানুষের স্কোরের 73% সময়ের সাথে মিলেছে, যেখানে Smodin-এর কাস্টম রুব্রিক জেনারেটর দ্বারা তৈরি করা কাস্টম রুব্রিকগুলি আমাদের উন্নত AI-এর সাথে মানুষের গ্রেডের 82% মেলে৷ সমস্ত মানদণ্ডের জন্য প্রকৃত স্কোর থেকে গড় বিচ্যুতি উপরে দেখানো হয়েছে।

*Smodin এর AI কাস্টম মানদণ্ড ব্যবহার করে তৈরি রুব্রিকগুলি উন্নত AI সেটিংয়ে মানুষের স্কোরের 82% এর সাথে মিলে যায়৷ স্মোডিনের পূর্বনির্ধারিত মানদণ্ড মানুষের স্কোরের 73% সময়ের সাথে মিলেছে। যখন AI স্কোর মানুষের স্কোর থেকে আলাদা ছিল, তখন 86% সময়ের স্কোরের 10 পয়েন্ট স্কেলে 1 পয়েন্টের পার্থক্য ছিল।

**AI গ্রেডার 100% ধারাবাহিকতা প্রদান করে, যার অর্থ হল একই রচনা প্রতিবার গ্রেড করার সময় একই স্কোর তৈরি করবে। ডেটাতে ব্যবহৃত সমস্ত গ্রেডগুলি 3 বার পুনরাবৃত্তি হয়েছিল এবং সমস্ত 3টি গ্রেডিং প্রচেষ্টা জুড়ে 100% ধারাবাহিকতা তৈরি করেছে৷