বেঞ্চমার্ক বিল্ডার

গড় এবং মধ্যমা একটি কারণে ভিন্নমত পোষণ করে

টেবিলটি উভয়ই দেখায়, এবং এদের মধ্যে ব্যবধানই প্রথম দেখার বিষয়। গড় মধ্যমার অনেক উপরে বসে থাকলে, অল্প সংখ্যক ধীর রান গড়কে টেনে তুলছে - একটি গার্বেজ কালেকশন বিরতি, ক্যাশ মিস ঝড়, অপারেটিং সিস্টেম আপনার কোর-এ অন্য কিছু শিডিউল করার সিদ্ধান্ত। মধ্যমা সেগুলো উপেক্ষা করে; গড় করে না।

কোনোটিই স্বয়ংক্রিয়ভাবে উদ্ধৃত করার সঠিকটি নয়। স্থির-অবস্থা থ্রুপুটের জন্য সার্ভার সাইজ করছেন? গড়টিই গুরুত্বপূর্ণ, কারণ সেই ধীর রানগুলো সত্যিই সময় খরচ করে। কোন অ্যালগরিদম ভালো তা সিদ্ধান্ত নিতে দুটি বাস্তবায়ন তুলনা করছেন? মধ্যমা সাধারণত আরও ন্যায্য সংখ্যা, কারণ আউটলায়ারগুলো আপনার কোড নয়, আপনার মেশিন মাপছে। আপনি যা নিয়ে আসলে যুক্তি করছেন তা উদ্ধৃত করুন, এবং এটি কোনটি তা বলুন।

স্ট্যান্ডার্ড ডেভিয়েশন বলে তুলনা বাস্তব কিনা

গড়ের পার্থক্য তখনই কিছু বোঝায় যখন এটি বিস্তারের সাপেক্ষে বড়। 0.05 স্ট্যান্ডার্ড ডেভিয়েশনসহ 12.0 এবং 12.4 মিলিসেকেন্ডের দুটি স্যুট সত্যিই ভিন্ন। একই দুটি গড় 3.0 স্ট্যান্ডার্ড ডেভিয়েশনসহ একই সংখ্যা, ভিন্ন টুপি পরা, এবং এগুলো থেকে আঁকা যেকোনো সিদ্ধান্ত কোলাহল।

এই টুলটি স্যাম্পল স্ট্যান্ডার্ড ডেভিয়েশন ব্যবহার করে, n-1 দিয়ে ভাগ করে, n দিয়ে নয়। এখানে এটিই সঠিক পছন্দ: আপনার রানগুলো সম্ভাব্য সব রানের জনসংখ্যা থেকে আঁকা একটি স্যাম্পল, সম্পূর্ণ জনসংখ্যা নয়, এবং n দিয়ে ভাগ করলে বিস্তার নিয়মতান্ত্রিকভাবে কম অনুমান হবে। একক রানে গণনা করার মতো বিস্তার থাকে না, তাই কলামটি শূন্য পড়ে - যা একটি অনুস্মারক যে এক মাপ বেঞ্চমার্ক নয়।

আপেক্ষিক গতি সেই সংখ্যা যা মানুষ মনে রাখে

শেষ কলামটি প্রতিটি স্যুটকে দ্রুততমের গুণিতক হিসেবে প্রকাশ করে, কারণ ফলাফল সাধারণত এই ফর্মে পুনরাবৃত্তি হয়। "নতুন পার্সার 2.4x দ্রুত" ছড়ায়; "নতুন পার্সার গড় 8.2 মিলিসেকেন্ড" ছড়ায় না, যদি না শ্রোতা ইতিমধ্যে বেসলাইন জানে।

দুটি সতর্কতা। প্রথমত, অনুপাতটি এর পিছনের দুটি গড়ের সমস্ত অনিশ্চয়তা উত্তরাধিকার করে, তাই শোরগোল ডেটায় 1.05x পার্থক্য আদৌ পার্থক্য নয়। দ্বিতীয়ত, গড়ের অনুপাত অনুপাতের গড়ের মতো নয়, এবং রানগুলো আকারে অনেকটা ভিন্ন হলে দুটি ভিন্ন দিকে ইঙ্গিত করতে পারে। সংখ্যাগুলো কাছাকাছি হলে, অনুপাতের পাশাপাশি বিস্তারও রিপোর্ট করুন এবং পাঠককে বিচার করতে দিন।