Файл: Бовбель, Е. И. Элементы теории информации.pdf

ВУЗ: Не указан

Категория: Не указан

Дисциплина: Не указана

Добавлен: 24.10.2024

Просмотров: 48

Скачиваний: 0

ВНИМАНИЕ! Если данный файл нарушает Ваши авторские права, то обязательно сообщите нам.

со

I 2d со =

Полная энергия сигнала

 

 

 

I •

£ =

І х ( " ) І ч ” “ т [ 5 3 Я Г ? ‘і " =

 

 

О

 

 

о

 

 

0,01

т-

=

0,01.

 

 

 

2-0,5

 

 

 

 

 

 

Из уравнения

А Е

 

 

 

1

—£—=0,01 находим

 

Wo = - A - tg (0,495 • -) Äc 5 (Гц).

‘ié'*

Тамим образом, отсчеты сигнала следует брать с. темпом И?о=5Гц.

1 0 8

2. Значения функции — p \ o g 2P

Тысячные доіи р

 

0

1

о

3

4

 

5

6

7

8

9

0,00

0,0000

0100

0179

0251

0319

 

0382

0443

0501

0557

0612

01

0664

0716

0766

0815

0862

 

0909

0955

0999

1043

1086

02

1129

1170

1211

1252

1291

 

1330

1369

1407

1444

1481

03

1518

1554

1589

1624

1659

 

1693

1727

1760

1793

1825

04

1858

1889

1921

1952

1983

 

2013

2043

2073

2103

2131

0,05

0,2161

2190

2218

2246

2274

 

2301

2329

2356

2383

2409

Об

2435

2461

2487

2513

2538

 

2563

2588

2613

2637

2661

07

2686

2709

2733

2756

2780

 

2803

2826

2848

2871

2893

08

2915

2937

2959

2980

3002

 

3023

3044

3065

3086

3106

09

3127

3147

3167

3187

3207

 

3226

3246

3265

3284

3303

0,10

0,3322

3341

3359

3378

3396

 

3414

3432

3450

3468

3485

11

3503

3520

3537

3555

3571

 

3588

3605

3622

3638

3654

12

3671

3687

3703

3719

3734

 

3750

3766

3781

3796

3811

13

3826

3841

3856

3871

3886

 

3900

3915

3929

3943

3957

14

3971

3985

3999

4012-

4026

4040 4053 4066 4079 4092

0,15

0,4105

4118

4131

4144

4156

 

4169

4181

4194

4206

4218

16

4230

4242

4254

4266

4277

 

4289

4301

4312

4323

4335

17

4346

4357

4368

4379

4390

 

4400

4411

4422

4432

4443

18

4453

4463

4474

4484

4494

 

4504

4514

4523

4533

4543

19

4552

4562

4571

4581

4590

4599

4608

4617

4626

4635

0,20

0,4644

4653

4661

4670

4678

4687

4695

4704

4712

4720

21

4728

4736

4744

4752

4760

4768

4776

4783

4791

4798

22

4806

4813

4820

1828

4835

4842

4849

4856

4863

4870

23

4877

4883

4890

4897

4903

4910

4916

4923

4929

4935

24

4941

4947

4954

4960

4966

4971

4977

4983

4989

4994

0,25

0,5000

5006

5011

5016

5022

5027

5032

5038

5943

5048

26

5053

5053

5063

5068

5072

5077

5082

5987

5091

5095

27

5100

5105

5109

5113

5118

5122

5126

5130

5134

5138

28

5142

5146

5150

5154

5158

5161

5165

5169

5172

5176

29

5179

5182

5186

5189

5192

5196

5199

5202

5205

5208

0,30

0,5211

5214

5217

5220

5222

5225

5228

5230

5233

5235

31

5238

5240

5243

5245

5247

5250

5252

5254

5256

5258

32

5260

5262

5264

5266

5268

5270

5272

5273

5275

5277

33

5278

5280

5281

5283

5284

5286

5287

5288

5289

5290

34

5292

5293

5294

5295

5296

5297

5298

5299

5299

5300

0,35

0,5301

5302

5302

5303

5304

5304

5305

5305

5305

5306

36

5306

5306

5307

5307

5307

5307

5307

5307

5307

5307

37

5307

5307

5307

5307

5307

5306

5306

5306

5305

5305

38

5304;

5304

5303

5303

5302

5302

5301

5300

5300

5299

39

5298

5297

5296

5295

294

5293

5292

5291

5290

5289

0,40

0,5288

5286

5285

5284

5283

5281

5280

5278

5277

5275

41

5274

5272

5271

5269

5267

5266

5264

5262

5260

5258

42

5256

5255

5253

5251

5249

5246

5244

5242

5240

5238

43

5236

5233

5231

5229

5226

5224

5222

5219

5217

5214

44

5211

5209

5206

5204

5201

5198

5195

5193

5190

5187

109



Тысячные доли р

р

0

1

о

3

4

5

6

7

8

9

 

 

 

 

 

 

 

 

 

 

 

 

 

 

1

0,45

0,5184

5181

5178

5175

5172

5169

5166

5163

5160

5157

 

46

5153

5150

5147

5144

5140

5137

5133

5130

5127

5123

 

47

5120

5116

5112

5109

5105

5102

5098

5094

5090

5087

 

48

5083

5079

5075

5071

5067

5063

5059

5055

5051

5047

 

49

5043

5039

5034

5030

5026

5022

5016

5013

5009

5004 .

0,50

3.5000

4996

4991

4987

4982

4978

4973

4968

4964

4959

51

4954

4950

4945

4940

4935

4930

4926

4921

4916

4911

52

4906

4901

4896

4891

4886

4880

4875

4870

4865

4860

 

. 53

4854

48і9

4844

4839

4833

4828

4822

4817

4811

4806

:

54

4800

4795

4789

4784

4778

4772

4767

4761

4755

4750

0,55

0,4744

4738

4732

4726

4720

4714

4708

4702

4697

4691

:

56

4684

4678

4672

4666

4660

4654

4648

4641

4635

4629

 

57

. 4623

4616

4610

4603

4597 4591 4584 4578 4571 4565

 

58

4558

4551

4545

4538

4532

4525

4518

4512

4505

4498

 

59

• 4491

4484

4477

4471

4464 4457 4450 4443 4436 4429

 

-0,60

0,4422.

4415

4408

4401

4393

4388

4379

4372

4365

4357

:

61

4350

4343

4335

4328

4321

4313

4306

4298

4291

.4283

 

62

4276

4268

4261

4253

4246

4238

4230

4223

4215

4207

 

63

4199

4192

4184

4176

4168

4160

4153

4145

4137

4129

 

64

4121

4113

4105

4097

4089

4080

4072

4064

4056

4018

 

0,65

0,4040

4032

4023

4015

4007

3998

3990

3982

3973

3965

 

66

3957

3948

3940

3931

3922

3914

3905

3897

3888

3880

 

67

3871

3862

3854

3845

3836

3828

3819

3810

3801

3792

 

68

3784

3775

3766

3757

3748

3739

3730

3721

3712

3703

 

69

3694

3685

3676

3666

3657

3648

3639

3630

3621

3611

 

0,70

0,3602

3593

3583

3574

3565

3555

3546

3536

3527

3518

 

71

3508

3499

3489

3480

3470

3461

3451

3441

3432

3422

 

72

3412

3403

3393

3383

3373

3364

3354

3344

3334

3324

 

73

3314

3304

3295

3285

3275

3265

3255

3245

3235

3225

 

74

3215

3204

3194

3184

3174 3164 3154 ЗН4 3133 3123

 

0,75

0,3113

3103

3092

3082

3071

3061

3051

ЗОЮ 3030

3019

 

76

3009

2999

2988

2978

2967

2956

2946

2935

2925

2914

 

77

2903

2893

2882

2871

2861

2850

2839

2828

2818

2807

 

78

2796

2785

2774

2763

2753

2741

2731

2720

2709

2698

 

79

2687

2676

2664

2653

2642

2631

2620

2609

2598

2587

 

0,80

0.2575

2565

2553

2542

2531

2519

2508

2497

2485

2474

 

81

2462

2451

2440

2428

2417

2405

2394

2382

2371

2359

 

82

2348

2336'

2324

2313

2301

2290

2278

2266

2255

2243

 

83

2231

2220

2208

2196

2184

2172

2160

2149

2137

2125

 

84

2113 • 2101

2089

2077

2065 2053 2041 2029 2017 2005

 

 

3,1993

1981

1969

1957

1944

1932

1920

1908

1896

1884

 

0,85 *'(

і 847

1822

1797

1785

1773

1760

 

86

1871

1859

1834

1810

 

87

1748

1735

1723

1711

1698

1686

1673

1661

1648

1635

 

88

1623-

1610

1598

1585

1572

1560

1547

1534

1522

1509

 

89

1496

1484

1471

1458

1445

1432.

1419

1407

1394

1381

 

по


Тысячные доли р

р

0

1

2

3

4

5

б

7

8

9

 

0,90

0,1368

1355

1342

1329

І316 1303 1290 1277 1264

1251

91

1238

1225

1212

1199

1186

1173

1159

1146

1133

1120

92

1107

1094

1080

1067

1054

1040

1027

1014

1000

0987

93

0974

0960

0947

0933

0920

0907

0893

0880

0866

0853

94

0839

0826

0812

0798

0785

0771

0758

'0744

0730

0717

0,95

0,0703

0689

0676

0662

0648

0634

0621

0607

0593

0579

96

0565

0552

0538

0524

0510

0496

0482

0468

0464

0440

97

0426

0412

0398

0384

0370’

0356

0342

0328

0314

0300

98

0286

0271

0257

0243

0230

0214

0201

0186

0172

0158

99

0143

0129

0115

0101

0086

0072

0058

0043

0029

0014

Л И Т Е Р А

Т У Р А

Г о л д м а н С. Теория информации. М., 1958.

К л ю е в

Н. И. Информационные основы передачи сообщений.

М., 1966.

Р о з и А. М. Теория информации и связи. М., 1971.

Сборник задач по теории вероятностей, математической статис­ тике и теории случайных функций. Под ред. А. А. С в е ш н и к о в а .

М., 1965.

 

Введение в ку.рс теории информации. Томск,

Т а р а с е н к о Ф. П.

1963.

 

 

 

Ф ай н е т ейн А. Основы теории информации. М., 1960.

 

Ф ан о Р. Передача информации. М., 1965.

Ф е л ь д-

Теоретические основы связи и управления. Под ред. А. А.

б а у ы а. М.,

1963.

(

М., 1970.

Фи н к Л.

М. Теория передачи дискретных сообщений.


О Г Л А В Л Е Н И Е

 

П р е д и с л о в и е .....................................................................................

3

Г л а в а

1. ЭНТРОПИЯ. КОЛИЧЕСТВО ИНФОРМАЦИИ . .

 

1.

Установление количественной меры информации при от­

5

 

 

сутствии неопределенности после о п ы т а .............................

§ 2. Энтропия и ее свойства............................................... ....

13

§

3.

Количество информации от опыта в общем случае . . .

23

§

4.

Относительная энтропия н количество информации . . .

34

§ 5.

Определение плотности вероятности, доставляющей мак­

' 4 0

 

 

симум относительной энтропии ...............................................

Г л а в а *

2. ИСТОЧНИКИ ДИСКРЕТНЫХ СООБЩЕНИЙ.

46

§

1. Эргодическне источники и их энтропия.................................

§

2.

Фундаментальное свойство энтропии дискретных эргодп-

52

§

3.

ческих источников . ...................................................................

Избыточность и поток информации источника сообщений

58

Г л а в а 3. ДИСКРЕТНЫЕ КАНАЛЫ БЕЗ ШУМОВ . . . .

61

§

1.

Модель -информационной системы передачи дискретных

61

 

 

сообщений в отсутствие шумов ...................................................

 

 

§ 2. Пропускная способность канала связи .................................

 

шума

62

§

3.

Экономное

кодирование

сообщений в отсутствие

71

Г л а в а 4. ДИСКРЕТНЫЕ КАНАЛЫ С ШУМАМИ . . . .

87

§

1.

Модель канала связи, в котором действуют шумы . . .

87

§

2.

Пропускная

способность

дискретного

канала связи с

89

§

3.

шумами .....................................................................................

 

 

 

 

 

Теоремы о кодировании в присутствии ш умов...................

 

92

Г л а в а 5. НЕПРЕРЫВНЫЕ КАНАЛЫ С ШУМАМИ . . .

98

§

1.

Пропускная

способность

непрерывных

каналов . . . .

98

§

2.

Пропускная

способность

стационарной

гауссовой

линии

100

§ 3.

связи .................................

 

 

 

 

 

Зависимость скорости передачи информации от распреде­

101

 

 

ления сигнала и-шума по спектручастот

.....................................

.

П р и л о ж е н и я

.......................................................................

по Котельникову

 

104

1.

Модель сигналов

 

 

104

2.

Значения функции

Р log2 Р ..........................................................

 

 

109

Л и т е р а т у р а ................................................................................

 

 

 

 

Ill

Б о в б е л ь Е в г е н и и И в а н о в и ч , Д а н е й к о И г о р ь Конст ант инович , И з о х В л а д и м и р В а с и л ь е в и ч

'у

Э Л Е М Е Н Т Ы Т Е О Р И И И Н Ф О Р М А Ц И И

Р е д а к т о р ы Т.

М . Б е л а я ,

 

С.

Б . Г у л я е в а .

О б л о ж к а В.

Т. Л а п и ц к о г о .

Х у д о ж е с т ­

в е н н ы й р е д а к т о р Л .

Г.

М е д в е д е в а . Т ех н и ч ес ки й р е д а к т о р И .

Ф. К л е н о в а .

К о р ­

р екторы

В.

А .

Ж д а н о в и ч ,

В.

М .

К и з и л .

АТ

06146. С д а н о

в

н а б о р

1/Х. 1973

г.

П о д п и с а н о

к п еч ати

15/Ѵ

1974

г.

Ф о р м а т

84X 108'А»• Б у м а г а

т и п о г р а ф с к а я

3.

Печ.

л.

3,5.

Уел. печ.

л.

5,8S. У ч етн .- п зд .

л. 5,72.

Т и р а ж

6000.

З а к а з

2340.

Ц е н а

21

коп.

И з д а т е л ь с т в о

Б е л о р у с с к о го го с у д а р ст в е н н о го

у н и в е р с и т е т а

нм.

В.

И .

Л е н и н а .

М инск,

ул .

К и рова , 24.

Т и п о г р а ф и я

И з д а т е л ь с т в а БГУ

им.

В.

И .

Л е н и н а .

М инск, ул .

К и р о ва ,

24.

 

 

 

 

 

 

 

 

\