Entries from 2016-06-05 to 1 day
定常情報源のエントロピーレートには2つの表し方があります。 1つは で、もう1つは です。 この2つの極限が等しいことを示します。 まず、以下が成り立ちます。これをチェインルールといいます。 すなわち です。 ここで、条件が多くなるとエントロピーが小…
定常情報源のエントロピーレートには2つの表し方があります。 1つは で、もう1つは です。 この2つの極限が等しいことを示します。 まず、以下が成り立ちます。これをチェインルールといいます。 すなわち です。 ここで、条件が多くなるとエントロピーが小…