Chng 5: Tính hội tụ và phân bố tiệm cận của tham số
Hunh Thái Hồng – B mơn iu khin T đng
1
Chương 5
TÍNH HỘI TỤ VÀ PHÂN BỐ TIỆM CẬN
CỦA THAM SỐ ƯỚC LƯNG
Chương 5: TÍNH HỘI TỤ VÀ PHÂN BỐ TIỆM CẬN CỦA THAM SỐ ƯỚC
LƯNG
5.1. Giới thiệu
5.2. Tính hội tụ của tham số ước lượng
5.3. Phân bố tiệm cận của tham số ước lượng
Tham khảo:
[1] L. Ljung (1999), System Identification – Theory for the user.
chương 8, 9
5.1 GIỚI THIỆU
Chương 4 đã đề cập đến các loại cấu trúc mô hình, các phương pháp ước
lượng tham số và các thuật toán ước ước lượng tham số. Về nguyên tắc,
chúng ta đã ước lượng được tham số
N
ˆ
của mô hình
),(
ˆ
ty
từ tập dữ liệu
N
Z . Vấn đề đặt ra là:
1. ?
ˆ
→
N
khi ∞→
N
2. Phân bố xác suất của biến ngẫu nhiên
)
ˆ
(
*
−
N
?
Chương 5 trình bày cơ sở lý thuyết để trả lời các câu hỏi trên.
5.2 TÍNH HỘI TỤ CỦA THAM SỐ ƯỚC LƯNG
Chỉ xét tính hội tụ của tham số mô hình tuyến tính bất biến.
)(),()(),()(
teqHtuqGty += (5.1)
5.2.1 Điều kiện đối với tập dữ liệu
Cho tập dữ liệu:
{ }
)(),(,),1(),1( NuNyuyZ
N
K=
(5.2)
khi
∞→N
ta có tập
∞
Z
.
Chng 5: Tính hội tụ và phân bố tiệm cận của tham số
Hunh Thái Hồng – B mơn iu khin T đng
2
Dữ liệu
N
Z có thể tạo ra từ thí nghiệm thu thập dữ liệu vòng hở hoặc
vòng kín
. Sơ đồ khối thí nghiệm thu thập dữ liệu như hình 5.1. Chú ý rằng
nếu thí nghiệm vòng hở thì hàm truyền của khối chỉnh đònh bằng 0.
Hình 5.1: Sơ đồ khối thí nghiệm thu thập dữ liệu
Điều kiện D1:
Tập dữ liệu
∞
Z là tập dữ liệu sao cho tồn tại các bộ lọc
{ }
)(
)(
kd
i
t
, 4,1=i ,
)(ty và )(tu có thể biểu diễn dưới dạng:
∑∑
∞
=
∞
=
−+−=
1
0
)2(
1
)1(
)()()()()(
k
t
k
t
ktekdktrkdty (5.3)
∑∑
∞
=
∞
=
−+−=
1
0
)4(
1
)3(
)()()()()(
k
t
k
t
ktekdktrkdtu (5.4)
trong đó:
1.
{}
)(tr là chuỗi tín hiệu vào bên ngoài, tiền đònh, bò chặn.
2.
{}
)(
0
te là chuỗi biến ngẫu nhiên độc lập có trung bình bằng 0 và
moment đến bậc
δ
+4
,
0>
δ
bò chặn.
3. Các bộ lọc
{}
∞
=1
)(
)(
k
i
t
kd
ổn đònh đều (
4,1=i
,
,...2,1=t
)
4. Các tín hiệu
{}
)(ty
,
{}
)(tu
liên kết gần dừng.
•
Nhắc lại các khái niệm:
1. Moment bậc k
của biến ngẫu nhiên X có hàm mật độ phân bố xác
suất )(xf
X
là kỳ vọng của đại lượng ngẫu nhiên
k
aX )( − . Nếu EXa = ta gọi
đó là moment trung tâm, ký hiệu là
k
µ
; nếu
0
=a
ta gọi đó là moment gốc,
ký hiệu là
k
v .
∫
+∞
∞−
−= dxxfax
X
k
k
)()(
µ
(5.5)
Hệ thống cần
nhận dạng
Chỉnh đònh
u(t)
y(t)
e
0
(t) r(t)
y
0
=const
Chng 5: Tính hội tụ và phân bố tiệm cận của tham số
Hunh Thái Hồng – B mơn iu khin T đng
3
2. Xét họ các bộ lọc
∑
∞
=
−
=
1
)()(
k
k
qkgqG
αα
, A∈
α
. Họ bộ lọc )(qG
α
được
gọi là ổn đònh đều
nếu )()( kgkg ≤
α
, A∈∀
α
và ∞≤
∑
∞
=1
)(
k
kg .
3. Hai tín hiệu
{}
)(ty và
{ }
)(tu được gọi là liên kết gần dừng nếu
{}
)(ty ,
{}
)(tu
là các tín hiệu gần dừng, đồng thời tồn tại:
)()()(
ττ
−= tutyER
yu
,
τ
∀ (5.6)
Giả thiết S1:
Tập dữ liệu
∞
Z được tạo ra do hệ thống thật:
)()()()()(:
000
teqHtuqGty
+= S (5.7)
trong đó
{}
)(
0
te là chuỗi các biến ngẫu nhiên độc lập có trung bình bằng 0,
phương sai là
0
λ
và moment bò chặn đến bậc
δ
+4
,
0>
δ
;
)(
0
qH
là bộ lọc
ổn đònh, khả đảo và monic
.
Cho cấu trúc mô hình tuyến tính bất biến:
{ }
M
M DqHqG ∈ ),(),,(: (5.8)
Ta cần xác đònh xem hệ thống thật (5.7) có nằm trong tập hợp đònh nghóa ở
biểu thức (5.8) hay không?
Ký hiệu:
{
);(),(|),(
0
ωω
jj
T
eGeGDD =∈=
θθ
M
MS
}
πωπ
ωω
≤≤−= );(),(
0
jj
eHeH
θ
(5.9)
Nếu ∅≠),( MS
T
D thì M
S ∈
Bổ đề:
Nếu giả thiết S1 thỏa mãn, và tín hiệu vào được chọn như sau:
)()()()(
trtyqFtu +−=
(5.10)
sao cho có trễ trong
0
G
hoặc
F
, các bộ lọc:
)()]()(1[
0
1
0
qGqFqG
−
+ , )()]()(1[
0
1
0
qHqFqG
−
+
)()]()(1)[(
0
1
0
qGqFqGqF
−
+ , )()]()(1)[(
0
1
0
qHqFqGqF
−
+
ổn đònh, và
{}
)(tw
gần dừng thì điều kiện D1 thỏa mãn.
Chng 5: Tính hội tụ và phân bố tiệm cận của tham số
Hunh Thái Hồng – B mơn iu khin T đng
4
Thông tin trong tập dữ liệu:
• Tập dữ liệu gần dừng
∞
Z được gọi là đủ giàu thông tin đối với tập hợp
mô hình
*
M
nếu cho hai mô hình
)(
1
qW
và
)(
2
qW
bất kỳ thuộc
*
M
:
0)]())()([(
2
21
=− tzqWqWE (5.11)
thì
)()(
11
ωω
jj
eWeW ≡
tại hầu hết mọi tần số
ω
.
• Tập dữ liệu gần dừng
∞
Z được gọi là giàu thông tin nếu tập dữ liệu
này đủ giàu thông tin đối với tập hợp mô hình
*
L chứa tất cả các mô hình
tuyến tính bất biến.
Đònh lý 5.1: (Đònh lý 8.1, [Ljung,1999]) Tính giàu thông tin của tập dữ liệu
thực nghiệm
Tập dữ liệu gần dừng
∞
Z giàu thông tin nếu ma trận phổ )(
ω
z
Φ của tín
hiệu
T
tytutz )]()([)( = xác đònh dương tại hầu hết tất cả các tần số
ω
.
Trong đó:
ΦΦ
ΦΦ
=Φ
)()(
)()(
)(
ωω
ωω
ω
yyu
uyu
z
(5.12)
∑
+∞
−∞=
−
=Φ
τ
ωτ
τω
j
uu
eR )()(
(5.13)
∑
+∞
−∞=
−
=Φ
τ
ωτ
τω
j
yy
eR )()( (5.14)
∑
+∞
−∞=
−
=Φ
τ
ωτ
τω
j
uyuy
eR )()(
(5.15)
∑
=
∞→
−=−=
N
t
N
u
tutEu
N
tutuER
1
)()(
1
lim)()()(
τττ
(5.16)
∑
=
∞→
−=−=
N
t
N
y
tytEy
N
tytyER
1
)()(
1
lim)()()(
τττ
(5.17)
∑
=
∞→
−=−=
N
t
N
uy
tytEu
N
tytuER
1
)()(
1
lim)()()(
τττ
(5.18)
Chng 5: Tính hội tụ và phân bố tiệm cận của tham số
Hunh Thái Hồng – B mơn iu khin T đng
5
5.2.2 Tính hội tụ của tham số ước lượng theo phương pháp sai số dự báo
Tham số ước lượng theo phương pháp sai số dự báo là:
),(minarg
ˆ
N
N
D
N
ZV
θθ
θ
M
∈
=
(5.19)
trong đó:
∑
=
=
N
t
N
N
t
N
ZV
1
2
),(
1
),(
θθ ε
(5.20)
Đặt:
∑
=
∞→
==
N
t
N
tE
N
tEV
1
22
)],([
1
lim)],([)(
θθθ εε
(5.21)
Bổ đề: Xét cấu trúc mô hình tuyến tính bất biến ổn đònh đều M. Nếu tập dữ
liệu thực nghiệm
∞
Z thỏa mãn giả thiết D1 thì 0|)(),(|sup →−
∈
θθ
θ
VZV
N
N
D
M
với xác suất bằng 1 khi
∞→N
.
Đònh lý 5.2: (Đònh lý 8.2, [Ljung,1999]) Tính hội tụ của tham số ước lượng
trong trường hợp cấu trúc mô hình tuyến tính bất biến và tiêu chuẩn ước lượng
dạng toàn phương
Cho
N
θ
ˆ
xác đònh bởi (5.19) và (5.20), trong đó ),(
θ
t
ε
được đònh nghóa từ
cấu trúc mô hình tuyến tính bất biến ổn đònh đều M. Nếu tập dữ liệu thực
nghiệm thỏa mãn giả thiết D1 thì:
CN
D→
θ
ˆ
với xác suất bằng 1 khi
∞→N (5.22)
trong đó:
′
=∈==
∈
′
∈
)(min)(|)(minarg
θθθθ
θθ
VVDVD
DD
C
MM
M
(5.23)
Nếu tập hợp D
C
chỉ có một phần tử
∗
θ
,
)(minarg
θθ
θ
V
D
M
∈
∗
=
thì (5.22) được
viết lại là:
∗
→
θθ
N
ˆ
với xác suất bằng 1 khi ∞→N (5.24)
Chú ý: Các kết quả trên có thể mở rộng cho trường hợp tiêu chuẩn ước lượng
tổng quát:
∑
=
=
N
t
N
N
tl
N
ZV
1
)),,((
1
),(
θθθ ε
(5.25)
và cấu trúc mô hình phi tuyến, biến đổi theo thời gian:
),,(),(
ˆ
θθ
tZgty
t
=
Kết quả tổng quát:
)]),,(([minarg
ˆ
θθθ
θ
tlE
D
N
ε
M
∈
→
với xác suất bằng 1 khi ∞→
N
Chng 5: Tính hội tụ và phân bố tiệm cận của tham số
Hunh Thái Hồng – B mơn iu khin T đng
6
5.2.3 Tính vững và tính nhận dạng được của tham số ước lượng theo
phương pháp sai số dự báo
Ở mục trước ta đã rút ra kết luận khi điều kiện D1 thỏa mãn thì
∗
→
θθ
N
ˆ
với xác suất bằng 1 khi
∞→N . Vấn đề đặt ra là
0
θθ
=
∗
? (với
0
θ
là tham số
“thật” của hệ thống). Nếu
0
θθ
=
∗
thì ước lượng
N
θ
ˆ
được gọi là ước lượng
vững.
Đònh lý 5.3: (Đònh lý 8.3, [Ljung,1999]) Tính vững của ước lượng trong trường
hợp S
∈
M và tiêu chuẩn ước lượng dạng toàn phương
Giả thiết:
• tập dữ liệu
∞
Z thỏa mãn giả thiết D1 và S1,
• M là cấu trúc mô hình tuyến tính ổn đònh đều sao cho S ∈ M,
•
∞
Z đủ giàu thông tin đối với M.
• Nếu tín hiệu vào có chứa thành phần hồi tiếp từ ngõ ra thì giả thiết có
một khâu trể trong bộ chỉnh đònh hoặc trong cả )(
0
qG và ),(
θ
qG .
Kết luận:
),( MS
TC
DD
=
(5.26)
trong đó:
′
=∈==
∈
′
∈
)(min)(|)(minarg
θθθθ
θθ
VVDVD
DD
C
MM
M
,
)],([)(
2
θθ
tEV
ε
=
{
);(),(|),(
0
ωω
jj
T
eGeGDD =∈=
θθ
M
MS
}
πωπ
ωω
≤≤−= );(),(
0
jj
eHeH
θ
Ngoài ra nếu cấu trúc mô hình nhận dạng được toàn cục tại
),(
0
MS
T
D∈
θ
thì:
{ }
0
θ
=
C
D
Kết hợp đònh lý 5.2 và đònh lý 5.3, ta rút ra kết luận hàm truyền nhận
dạng được thỏa mãn:
→
→
)()
ˆ
,(
)()
ˆ
,(
0
0
ωω
ωω
j
N
j
j
N
j
eHeH
eGeG
θ
θ
với xác suất bằng 1 khi ∞→N