Академический Документы
Профессиональный Документы
Культура Документы
.
.
.
.
.
.
.
.
.
.
.
.
.
1
1
3
6
7
7
7
8
10
11
11
12
13
2 Waveform Encoding . . . . . . . . . . . . . . . . . . . . . . . . .
2.1 Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . .
2.2 Pulse Code Modulation (PCM) . . . . . . . . . . . . . . . . .
2.2.1 Process of Sampling . . . . . . . . . . . . . . . . . . .
2.2.2 Process of Quantization . . . . . . . . . . . . . . . . .
2.2.3 PCM Transmitter and Receiver . . . . . . . . . . . . .
2.2.4 Quantization Error . . . . . . . . . . . . . . . . . . . .
2.2.5 Signal to Noise Ratio (SNR) for Quantized Pulses . . .
2.2.6 Non-uniform Quantization: Companding . . . . . . . .
2.3 Differential Pulse Code Modulation (DPCM) . . . . . . . . . .
2.3.1 Cumulative Error in PCM . . . . . . . . . . . . . . . .
2.3.2 Prevention of Cumulative Error by Applying Feedback .
2.3.3 How We Can Predict the Future? . . . . . . . . . . . .
2.3.4 Analysis of DPCM . . . . . . . . . . . . . . . . . . . .
2.4 Delta Modulation . . . . . . . . . . . . . . . . . . . . . . . .
2.4.1 Drawbacks of Delta Modulation . . . . . . . . . . . . .
2.5 Adaptive Delta Modulation . . . . . . . . . . . . . . . . . . .
2.5.1 Song Algorithm . . . . . . . . . . . . . . . . . . . . .
2.5.2 Space-Shuttle Algorithm . . . . . . . . . . . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
15
15
15
16
22
24
27
29
30
35
35
36
38
40
41
43
44
44
46
xiii
xiv
Contents
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
47
48
49
49
50
53
53
54
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
55
55
56
59
61
61
63
67
67
67
70
72
74
75
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
77
77
77
78
78
80
81
83
86
87
88
89
90
91
93
5 Equalization . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
5.1 Inter-Symbol Interference (ISI) . . . . . . . . . . . . . . . .
5.2 Nyquist Criterion for Distortion Less Transmission (Zero ISI)
5.2.1 Criteria in Frequency Domain . . . . . . . . . . . . .
5.2.2 Concept of Ideal Nyquist Channel . . . . . . . . . . .
5.2.3 Limitations of Ideal Solution: Raised Cosine Spectrum
.
.
.
.
.
.
.
.
.
.
.
.
95
95
97
98
100
101
Contents
xv
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
103
104
104
106
106
108
110
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
111
111
112
113
115
117
118
118
119
121
122
123
124
125
125
125
127
127
127
131
131
132
134
136
136
137
138
139
139
140
141
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
143
143
144
145
145
146
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
xvi
Contents
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
147
149
149
151
152
155
155
157
159
159
159
163
163
165
166
166
8 Information Theory . . . . . . . . . . . . . . . . . . .
8.1 Introduction . . . . . . . . . . . . . . . . . . . . .
8.2 Entropy . . . . . . . . . . . . . . . . . . . . . . . .
8.3 Rate of Information . . . . . . . . . . . . . . . . .
8.4 Information Sources . . . . . . . . . . . . . . . . .
8.5 Discrete Memoryless Channel (DMC) . . . . . . .
8.5.1 Channel Representation . . . . . . . . . . .
8.5.2 The Channel Matrix . . . . . . . . . . . . .
8.6 Special Channels . . . . . . . . . . . . . . . . . . .
8.6.1 Lossless Channel . . . . . . . . . . . . . . .
8.6.2 Deterministic Channel . . . . . . . . . . . .
8.6.3 Noise-Less Channel . . . . . . . . . . . . .
8.6.4 Binary Symmetric Channel (BSC) . . . . . .
8.7 Mutual Information . . . . . . . . . . . . . . . . .
8.8 Channel Capacity . . . . . . . . . . . . . . . . . .
8.8.1 Gaussian Channel: Shanon-Hartley Theorem
8.9 Entropy Coding . . . . . . . . . . . . . . . . . . .
8.9.1 Shanon-Fano Coding . . . . . . . . . . . .
8.9.2 Huffman Coding . . . . . . . . . . . . . . .
8.10 MATLAB Code . . . . . . . . . . . . . . . . . . .
8.10.1 Convergence of Pe in Cascaded BSC . . . .
References . . . . . . . . . . . . . . . . . . . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
169
169
171
173
173
176
176
176
177
177
178
179
179
182
183
183
185
186
187
188
188
189
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
191
191
192
193
193
195
.
.
.
.
.
.
Contents
xvii
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
196
196
199
200
200
202
204
204
206
207
207
208
210
210
211
213
225
237
Index . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
245
http://www.springer.com/978-3-642-12742-7