Perplexity
অন্য নাম: পারপ্লেক্সিটি
e^(গড় cross-entropy)। মোটামুটি “প্রতি token-এ মডেল কয়টি বিকল্পের মধ্যে দ্বিধায়”। একই tokenizer ও ডেটায় তুলনা করলে তবেই অর্থবহ।
বিস্তারিত শিখুন: Smoothing, Cross-Entropy ও Perplexity (এই পাঠ পড়তে লগইন প্রয়োজন)
অন্য নাম: পারপ্লেক্সিটি
e^(গড় cross-entropy)। মোটামুটি “প্রতি token-এ মডেল কয়টি বিকল্পের মধ্যে দ্বিধায়”। একই tokenizer ও ডেটায় তুলনা করলে তবেই অর্থবহ।
বিস্তারিত শিখুন: Smoothing, Cross-Entropy ও Perplexity (এই পাঠ পড়তে লগইন প্রয়োজন)