Theo dõi và đánh giá các chương trình bồi dưỡng và tăng cường năng lực

Theo dõi và đánh giá các
chương trình bồi dưỡng
và tăng cường năng lực
9/2/2007
Richard Torbin
Viện Ngân hàng thế giới


Theo dõi là gì?
Theo dõi là một hoạt động quản lý để đảm bảo
rằng việc thực thi và các hoạt động đang được
tiến hành như dự định
- Phản hồi liên tục: chúng ta đang làm đúng cách
không?
- Chúng ta đang làm đúng việc khơng?
- Chúng ta có nên thay đổi thiết kế chương trình
khơng?


Đánh giá là gì?
Việc đánh giá sẽ

– Đánh giá xem một dự án hay chương trình có
đạt được các mục tiêu đề ra không
– Dựa trên những chuẩn mực trực tiếp hay gián
tiếp để đánh giá hoạt động hoặc kết quả của
một chương trình hay chính sách xem chúng
có tác dụng hồn thiện chương trình hay
chính sách đó khơng.

Mục đích của theo dõi
và đánh giá
Tính giải trình
• Chương trình có vận hành như đã định khơng?
- Tính hiệu năng, chất lượng, tính thích hợp
• Chương trình có đạt được các mục tiêu đề ra
không?
- Kết quả, tác động


Mục đích của theo dõi
và đánh giá
• Nghiên cứu xem
- Những yếu tố nào làm cho chương trình vận
hành hoặc không vận hành như dự định?
- Những yếu tố nào giúp đạt được hay khơng
đạt được kết quả?
- Chương trình cần hoàn thiện như thế nào?- Các kết quả đạt được có phải nhờ chương
trình khơng?


Một vài khái niệm quan trọng
Can thiệp: Hoạt động, chính sách hoặc chương trình
nhằm dẫn đến sự thay đổi
- Một đạo luật về giáo dục
- Một chương trình đào tạo
- Luật đầu tư nước ngoài ở Việt Nam

Đầu vào: Nguồn lực tài chính, con người và những
nguồn khác để phục vụ cho các hoạt động

Đầu ra: Các sản phẩm, hàng hoá, dịch vụ
- Số lượng các giảng viên được đào tạo
- Số lượng trường học đã xây
- Số lượng văn bản luật đã thông qua


Một vài khái niệm quan trọng (2)
• Thành quả: Sự sử dụng hoặc kết quả của đầu ra, ví
dụ:
- Sức khoẻ trẻ em tốt hơn
- Ơ nhiễm khơng khí và nguồn nước ít hơn
- Bảo vệ thị trường nội địa
• Sự quy dẫn: Những tác động đã thấy có phải do sự
can thiệp gây ra khơng? Ví dụ:
- Chương trình đào tạo có dẫn đến những đạo luật tốt
hơn khơng?
- Chương trình hành động quốc gia Việt Nam vì trẻ em
có giảm lao động trẻ em khơng?


Mơ hình chương trình
Các kết quả dài hạn

Các kết quả ngắn
hạn/trung hạn

Thành quả
Đầu ra

Sự can thiệp

Đầu vào

Tác động

Các kết quả
trước mắt

Các dịch vụ

Các nguồn lực


Áp dụng mẫu chương trình
vào đào tạo
Đầu vào

Can thiệp

Đầu ra

Thành quả

Tác động

Các nguồn
lực

Các dịch
vụ

Các sản phẩm

Các kết quả
ngắn hạn

Các kết
quả dài hạn

• Tiền

• Các
phương án
học tập

• Kiến thức
được áp dụng
trong mơi
trường làm việc
ở cấp độ quốc
gia

• Những
thiết chế,
chính sách
và thực tiễn
tốt hơn ở
cấp độ quốc
gia

• Nhân lực

• Cácnguồn
phụ trợ
• Phương
tiện

• Những
dịch vụ xây
dựng năng
lực khác

• Những người
tham gia có
thêm kiến thức
và kỹ năng
• Những tổ
chức được
hồn thiện hơn

• Sự ủng hộ
mạnh mẽ hơn
đối với sự thay
đổi về thiết chế
ở mức độ quốc
gia


Áp dụng mẫu chương trình để
giảm tử vong trẻ em
Đầu vào
Các nguồn

lực

Can thiệp
Các dịch vụ

• Tiền

• Chăm sóc
trước khi sinh

• Nhân lực

• Phịng ngừa

• Phụ trợ

• Hộ sinh
• Tiêm phịng

Đầu ra
Các sản
phẩm
• Sử dụng
dịch vụ
trước khi
sinh nhiều
hơn
• Nhiều trẻ
được tiêm
phịng hơn

Thành quả
Lợi ích
• Những
người mẹ
khoẻ mạnh
• Những
đứa trẻ khoẻ
mạnh

Tác động
Sự thay
đổi
• Giảm tử
vong trẻ em
• Giảm
nghèo đói


Khung đánh giá cơ bản
1.

Vạch các câu hỏi để đánh giá

2.

Chọn cách thiết kế nghiên cứu đánh giá

3.

Tìm hiểu logic của chương trình

4.

Phát triển các chỉ số và biện pháp

5.

Phát triển chiến lược thu thập dữ liệu

6.

Xác định chiến lược phân tích


Các câu hỏi để đánh giá
Sự đánh giá nhằm trả lời các câu hỏi về:
- Thiết kế chương trình
- Thực hiện chương
trình
- Hiệu quả
- Tác động…


Các câu hỏi để đánh giá
Tác động: Chương trình đã tạo nên khác biệt gì?
•

Làm

sao để biết chương trình có hiệu
quả?

•

Làm

sao để xác định được các mối
quan tâm chính đã thay đổi là do
chương trình?

•

Chúng
nào?

•

Làm

ta đo đếm các kết quả như thế

}

sao để xác định liệu các đầu ra và
các hoạt động đã tạo ra các kết quả tối
ưu chưa?

Trả lời các câu
hỏi này chính

là vai trị của
theo dõi và
đánh giá


Một vài ví dụ
1. Những thành quả hay hệ quả nào của khu công
nghiệp năng lượng gas Cà Mau?
2. Khu cơng nghiệp hố dầu Dung Quất có làm
giảm xuất khẩu dầu từ Việt Nam khơng?
3. Khố tập huấn này có chất lượng và tính hữu
dụng ra sao?


4 cấp độ để phát triển các biện
pháp và chỉ số cho đào tạo
• Cấp độ 1: Những người tham gia có ý kiến gì
về hoạt động đào tạo?
• Cấp độ 2: Những người tham gia đã nhận
được những kiến thức/kỹ năng nào?
• Cấp độ 3: Hành vi của những người tham gia
đã thay đổi ra sao? Họ có áp dụng các kiến
thức/kỹ năng mới trong cơng việc khơng?
• Cấp độ 4: Những kiến thức, kỹ năng hoặc
hành vi mới của những người tham gia có
dẫn đến những tác động trong tổ chức hoặc
xã hội không?


Xem lại khung lý thuyết

của Kirkpatrick
Cách phân loại của
Kirkpatrick

• Cấp độ 1: Phản ứng
• Cấp độ 2: Học hỏi
• Cấp độ 3: Hành xử

Khung lý thuyết nâng cấp
• Cấp độ 1: Phản ứng
- Phản ứng cảm tính
- Suy xét vị lợi (có áp dụng
được khơng, thích hợp khơng,
hữu dụng khơng)

• Cấp độ 2: Học hỏi
- Kiến thức nhận được ngay
- Duy trì kiến thức
- Thể hiện hành vi/kỹ năng

• Cấp độ 3: Chuyển giao

• Cấp độ 4: Kết quả

- Hành vi được gìn giữ và áp
dụng tại nơi làm việc

• Cấp độ 4: Kết quả
- Tác động lên tổ chức

Những chỉ số thơng minh
• S - Specific = đặc thù (các biện pháp khớp
với các kết quả)
• M - Measurable = đo đếm được (làm sao để
có thể theo dõi được)
• A - Attainable = có thể làm được (tính thực
tế)
• R- Relevant = phù hợp (với kết quả dự tính)
• T- Timebound = xác định về thời gian (thể
hiện quãng thời gian nhất định)


Cảm ơn các quý vị!