Производительность источника сообщений
Производительностью источника называется
количество информации, порождаемое
источником в среднем за единицу времени
Пусть Н – энтропия источника, m
– мощность алфавита, pi
(i=1, 2,…, m)
– вероятность появления i-го
символа, θi
– длительность генерации i–го
символа. Рассмотрим процесс генерации
n символов. В среднем,
один символ генерируется за время
.
На генерацию n символов
будет затрачено время Т=n∙M[θ].
Количество информации, порожденное
источником за это время равно: I = n∙H.
Производительность источника:
Если все символы генерируются за одно
и то же время θ, то
.
Максимальной производительностью
обладает исто
чник с максимальной энтропией: