エントロピー関数の導入 例えば、1, 0を0.1, 0.9の確率で発生する無記憶情報源のエントロピー

エントロピー関数の導入

例えば、1, 0を0.1, 0.9の確率で発生する無記憶情報源のエントロピーは

H(S) = ?(0.9) = -0.9log20.9-0.1log20.1
となることについて、
引数を、0.9とするのは、慣習
ですか？

No.2 ベストアンサー 回答者： ありものがたり 回答日時： 2022/09/09 23:50

だって、 p + q = 1 のとき

p log p + (1-p) log(1-p) = (1-q) log(1-q) + q log q でしょう？

この回答へのお礼

はい。私はそのことについて、どうして;そちらを引数にしないのと、疑問に思いました。それについて理由はありますか？

お礼日時：2022/09/09 23:56

No.1 回答者： ありものがたり 回答日時： 2022/09/09 22:57

0.1 にしたって、結果は同じですよ。

この回答へのお礼

ありがとうございます。どうしてですか？

お礼日時：2022/09/09 23:22