Файл: Бовбель, Е. И. Элементы теории информации.pdf

ВУЗ: Не указан

Категория: Не указан

Дисциплина: Не указана

Добавлен: 24.10.2024

Просмотров: 49

Скачиваний: 0

ВНИМАНИЕ! Если данный файл нарушает Ваши авторские права, то обязательно сообщите нам.

В предположении, что распределения вероятностей сиг­ нала x(t) и шума n(t) нормальны, энтропия ti\=2dfT независимых отсчетов сигнала у(і), взятых по теореме Котельникова,

H {df)(Y) =* 2d/Г log \/2Vea{df) =

 

-

2dfT log V 2 ^

 

 

 

-

=

d /r io g 2 * *[(&,(/) +

S„(/)] rf//

(5.11)

Аналогично,

энтропия tii =

2dfT

независимых отсчетов

шума

 

 

 

 

 

Hdf(n) =

2rf/Tlog\/ 2ъеапЛ == d/T log 2neSn(f) df.

(5.12)

Подставляя (5.11) и (5.12)

в (5.6а), получаем

 

 

 

dl = df log

Sv(/) + 5л(/)

 

откуда

 

 

SnU)

 

 

SA/) + SnU)

 

 

 

 

 

(5.13)

 

 

S/iif)

 

 

 

 

 

Как видно из формулы

(5.13),

скорость передачи рас­

тете ростом спектральной плотности мощности передава­ емого сигнала х(і) и убывает с увеличением спектраль­ ной плотности мощности шумов.

Задача 1. Используя формулу (5.13), вычислить ско­

рость передачи,

если спектральные плотности мощности

сигнала

x(t) и шума n(t)

постоянны в

полосе

частот

W = / 2—

/1 и равны нулю вне этой полосы.

 

 

Р е ш е н и е . Пусть в полосе частот W = f 2f\, S n(f) =

= So, a Sn (f) =

no. Тогда из (5.13)

 

 

I

(f, -

h) l o g ^

 

=

W l o g s-z± 2

 

(5.14)

Мощность сигнала P =

ft

e

J

откуда

 

j

Sx{f)df = S0W ,

 

 

 

 

h

 

 

 

 

 

 

 

 

W'

 

 

(5.15)

 

 

fi

 

 

 

 

 

 

Sn{f) df = n0W, откуда

' «I

Мощность шума N = j

 

 

-h

__ _/v

 

 

 

 

 

*0

 

 

(5:16)

 

 

 

yp *

 

 

102


Подставляя (5.15) и (5.16) в (5.14), получаем

Т = u 7 io g (i + - £ - l

Задача 2. При заданных спектральной плотности мощ­

ности

шума Sn(f) и средней

мощности

сигнала

опреде­

лить

вид функции

спектральной плотности

сигнала

SJf),

доставляющей

максимум скорости передачи.

Р е ш е н и е . Эта

задача

является

вариационной по

отысканию максимума функционала

 

 

[5,(01 = f log§ л л ± М І І df

S„U)

при дополнительном условии

 

 

 

 

P =

J S,(0 df = const.

(5.17)

 

 

 

 

 

f,

 

функцию F*= Fj +

^F2, где

Для этого

нужно

составить

 

 

 

 

 

 

 

 

 

 

 

fr

Fi = log

 

 

~ h . f ' ; Д2= 5 ,(0 ; X=const, и из уравнения

OF*

 

Оп\І)

 

 

 

 

'

дР*

 

0

определить

искомую

dS yj =

функцию:

 

- 5 І Й

Ш

+ 1 -

0'

°ТКУЯа

 

 

 

 

 

 

 

5,(0 = — ІА — Sn(f).

(5.18)

Подставив в (5.17),

получим

Р =

-----^-----J Sn(f)df =

 

W

 

Л,

-

 

 

 

 

 

h

 

 

 

откуда

 

 

 

 

 

= -----^------/V,

 

 

 

 

 

 

 

 

 

 

 

-

4

- = Ч г '

 

(5Л9>

Подставив

(5.19)

в (5.18), получим искомую функцию

 

 

 

 

 

Sk{ f ) = p ^ - - S n(f).

(5.20)

При этом максимальная скорость передачи

 

 

 

 

/™ах =

r .lo g С + Д - J l o g Sn(f)df.

 

 

 

 

 

 

 

 

 

 

\i

 

 

 

Если соотношение (5.20) выполняется, то говорят, что сигнал согласован с помехой.

103


П Р И Л О Ж Е Н И Я

1. Модель сигналов по Котельникову

Решение задач теории информации существенно упро­ щается, если представить сигнал x(t) счетным множест­ вом некоторых чисел х'ь’Для такого представления выби­ рают систему функций {%(/)) такую, что

jy«

 

(1

где окі— символ Кронекера. Тогда

сигнал x(t)

можно

представить в виде ряда

 

 

X(t) = 2 x k ®* (*).

■•

(2)

(А)

 

 

в котором коэффициенты разложения являются числами

А* = J x(t)

№ .

(3)

—оо

 

 

В зависиімости от выбора

ортонормированноіі (усло­

вие (1)) системы функций {<р*(0}

ряд (2) может быть

известным рядом Фурье, рядом Котельникова (см. ниже) и т. д.

Модель Котельникова позволяет существенно упрос­ тить определение коэффициентов х&- После соответству­ ющего выбора совокупности ортонормированных функций {<?*(£)} коэффициенты будут просто определяться зна­ чениями x(t) в некоторые моменты времени.

Теорема. Произвольная функция x(t), имеющая преоб­ разование Фурье, ограниченное полосой частот W, можетбыть тождественно представлена счетным числом отсче­

тов, взятых через интервалы времени А / ==~^г-

Д о к а з а т е л ь с т в о . Функцию x(f), найденную пу­ тем обратного преобразования Фурье,

‘ 104

'2- \F

x ( t ) = ± - j' x ^ ) e i m t d ü), (4>

—2-V

определим для дискретных моментов времени, равных

t = к = ± 1, ± 2, ± 3, ...» (5)‘

и расположенных последовательно на оси времени через

равные промежутки

1

 

Д * « -

( 6)=

2W*

Тогда

Поскольку по условию теоремы спектр Фурье задан на конечном отрезке (—2^W1 2nW), он может быть раз­ ложен в ряд Фурье

 

 

 

00

 

...

&

 

 

 

 

 

 

— / си

 

 

Л

» =

/

ус к е

'

2\\7

(8).

 

 

 

 

 

 

/.’= —00

 

 

 

где

 

 

 

 

 

 

 

 

 

 

2гЛГ

 

.

 

 

С

1

f

X { u ) e " 2^r du.

(9)-

 

* ~

4г. №

 

 

 

 

 

 

 

—2.-U7

 

 

 

 

Сравнивая выражения

(9)

и (7), находим,

что

' Подставляя *(10) в (8), получаем

Іі=—00

Это значение спектра подставим в (4):

105.


г

 

k

 

sin 2к\Ѵ I t

 

2- \V

t

О 2W

(12)

2W

 

 

 

 

Таким образом, произвольная функция x(t), имеющая ограниченный спектр, может быть представлена в виде ряда Котельникова:

sin 2г. Wit — 2\Ѵ

2г. W it — 2W

где Xk = — отсчеты функции x(t) в моменты вре­

мени k/2W. Простым интегрированием легко проверить, что функции отсчетов

sin 2т, W

2к W

ортонормированье т. е. удовлетворяют условию (2).

^

1

Г Т

 

 

t

Sin27clF^

пРед:

Задача 1.

Показать,

 

что функция

~27 W ~

ставляет

собой

реакцию

линейного фильтра с частотной

Xарактернетикой

 

 

 

 

 

 

 

1

— 2тс1|7'<(о< 2іг W\

 

 

я н

 

i W '

 

 

 

 

 

 

 

 

 

 

О , при остальных ш

 

на дельта-функцию Дирака.

 

 

Р е ш е н и е .

Как известно, выходной сигнал (реакция)

произвольной линейной системы на входной сигнал в ви­ де о (t) определяется по формуле

_ і_

?(*) =

 

 

Подставляя (15) в (16), получаем

1

2г. W

Sin 2TZWt

 

4г. W -2г. W

2т, Wt

что и требовалось показать.

■ч*

 

4 0 6


Таким образом, функцию времени (13) можно рас­ сматривать как реакцию фильтра с частотной характери­ стикой (15) на совокупность дельта-функций с площадя­ ми, равными отсчетам исходного сигнала x(k/2W) и сле­ дующими друг за другом через промежутки времени

A t = 1/2W

(рис. 6).

Задача 2.

Регистрируемую величину, заданную регу­

лярной функцией времени

t > 0; * < 0 ,

представить ее отсчетами

W .

согласно

теореме

Котель-

|

никова

с

относительной

 

'погрешностью по

энергии

 

А £ /£ =

0,01.

Спект­

 

Р е ш е н и е .

 

ральную

 

плотность ам-

г

плитуд сигнала x(t) най-

хф(+)^

дем из прямого преобра­

 

зования Фурье:

 

 

- ол ХгУгМ

0,5+/(о

Модуль спектральной плотности

I X (ш) I =

0.1

XsW"

 

]/■(),25 +

 

t

t

График |1К( ш) I пред­ ставлен на рис. 7. Так как функция | Х ( ш) | . имеет неограниченный спектр, теорема Котельникова не­ применима. Однако если ограничиться полосой W0 (см. рис. 7), погрешность

в определении энергии бу­ дет равна