Entropiya va ehtimollik ilmiy tushunchalar bo‘lib, ular axborot nazariyasi hamda statistik fizikada muhim o‘rin egallaydi. Bu mavzularda chuqur tahlil muhimdir. Entropiya tizimdagi tartibsizlik darajasini ifodalaydi, ehtimollik esa hodisalarning yuz berish imkoniyatini o‘lchaydi. Ikkalasi ham aniqlikni tushunishga yordam beradi