Đánh giá các yếu tố ảnh hưởng đến quá trình xây dựng bộ đề thi trắc nghiệm khách quan tại khoa Công nghệ Thông tin - ĐH Thái Nguyên
Bạn đang xem bản rút gọn của tài liệu. Xem và tải ngay bản đầy đủ của tài liệu tại đây (423.17 KB, 14 trang )
<span class='text_page_counter'>(1)</span><div class='page_container' data-page=1>
<b>ĐẠI HỌC QUỐC GIA HÀ NỘI </b>
<b>VIỆN ĐẢM BẢO CHẤT LƢỢNG GIÁO DỤC </b>
_______________________
<b>Nguyễn Anh Tuấn </b>
<b>ĐÁNH GIÁ CÁC YẾU TỐ ẢNH HƢỞNG ĐẾN QUÁ TRÌNH </b>
<b>XÂY DỰNG CÁC BỘ ĐỀ THI TRẮC NGHIỆM KHÁCH QUAN </b>
<b> TẠI KHOA CÔNG NGHỆ THÔNG TIN - ĐH THÁI NGUYÊN </b>
LUẬN VĂN THẠC SĨ
</div>
<span class='text_page_counter'>(2)</span><div class='page_container' data-page=2>
<b>ĐẠI HỌC QUỐC GIA HÀ NỘI </b>
<b>VIÊN ĐẢM BẢO CHẤT LƢỢNG GIÁO DỤC </b>
______________________________
<b>Nguyễn Anh Tuấn </b>
<b>ĐÁNH GIÁ CÁC YẾU TỐ ẢNH HƢỞNG ĐẾN QUÁ TRÌNH </b>
<b>XÂY DỰNG CÁC BỘ ĐỀ THI TRẮC NGHIỆM KHÁCH QUAN </b>
<b> TẠI KHOA CÔNG NGHỆ THÔNG TIN - ĐH THÁI NGUYÊN </b>
<b>Chuyên ngành: Đo lƣờng và đánh giá trong giáo dục </b>
(Chuyên ngành đào tạo thí điểm)
LUẬN VĂN THẠC SĨ
<b>Ngƣời hƣớng dẫn khoa học: </b>
<b>PGS.TS. Nguyễn Công Khanh </b>
</div>
<span class='text_page_counter'>(3)</span><div class='page_container' data-page=3>
<i><b>LỜI CAM ĐOAN </b></i>
<i>Tôi xin cam đoan đây là phần nghiên cứu do tôi thực hiện. </i>
<i>Các số liệu, kết luận nghiên cứu trình bày trong luận văn này chưa hề được công </i>
<i>bố ở các nghiên cứu khác. </i>
<i>Tôi xin chịu trách nhiệm về nghiên cứu của mình! </i>
<i> </i>
<i> Thái Nguyên, ngày 20 tháng 9 năm 2009. </i>
<i> Tác giả </i>
<i><b> </b></i>
</div>
<span class='text_page_counter'>(4)</span><div class='page_container' data-page=4>
<i><b>LỜI CẢM ƠN </b></i>
<i>Tác giả xin bày tỏ lòng biết ơn sâu sắc đến PGS.TS. Nguyễn Công Khanh </i>
<i>đã hướng dẫn hết sức chu đáo, nhiệt tình trong suốt quá trình thực hiện luận </i>
<i>văn. </i>
<i>Xin chân thành cảm ơn các thầy, cô giáo của Trung tâm Đảm bảo chất </i>
<i>lượng đào tạo & Nghiên cứu phát triển giáo dục - Đại học Quốc gia Hà Nội. đã </i>
<i>tạo điều kiện thuận lợi cho tác giả trong thời gian học tập và nghiên cứu tại </i>
<i>trường. </i>
<i>Xin chân thành cảm ơn Lãnh đạo Khoa Công nghệ thông tin - Đại học </i>
<i>Thái Nguyên, các đồng nghiệp đã tạo điều kiện thuận lợi cho tác giả trong quá </i>
<i>trình tiến hành thực nghiệm đề tài. </i>
</div>
<span class='text_page_counter'>(5)</span><div class='page_container' data-page=5>
<b>MỤC LỤC </b>
Trang
Trang phụ bìa
Lời cam đoan...1
Lời cảm ơn ...2
Mục lục ...3
Danh mục các chữ viết tắt ...5
Danh mục bảng ...6
Danh mục hình ...7
<b>MỞ ĐẦU </b>
1. Lý do chọn đề tài ...8
2. Mục đích nghiên cứu...9
3. Giới hạn nghiên cứu ...9
4. Phương pháp nghiên cứu ...9
<b>Chƣơng 1. CƠ SỞ LÝ LUẬN VÀ TỔNG QUAN </b>
1.1. Các khái niệm về chất lượng bộ đề thi trắc nghiệm ... 11
1.1.1. Các công cụ đo lường đánh giá kết quả học tập ... 11
1.1.2. Trắc nghiệm và những vấn đề liên quan ... 13
1.1.3. Độ tin cậy của bộ câu hỏi trắc nghiệm ... 19
1.1.4. Độ giá trị (hiệu lực) của bộ câu hỏi trắc nghiệm ... 24
1.2. Quy trình xây dựng bộ đề thi trắc nghiệm khách quan... 26
1.2.1. Các quy tắc viết câu hỏi trắc nghiệm nhiều lựa chọn ... 26
1.2.2. Xây dựng bảng trọng số của môn học ... 31
1.2.3. Xây dựng ngân hàng đề thi trắc nghiệm môn học ... 32
</div>
<span class='text_page_counter'>(6)</span><div class='page_container' data-page=6>
2.1.1. Chuyên đề nghiên cứu thứ nhất ... 34
2.1.2. Chuyên đề nghiên cứu thứ hai ... 34
2.1.3. Chuyên đề nghiên cứu thứ ba ... 35
2.2. Thiết kế mẫu phiếu điều tra đối với giáo viên ... 35
<b>Chƣơng 3. XỬ LÝ SỐ LIỆU KẾT QUẢ THI TRẮC NGHIỆM </b>
3.1. Xử lý số liệu kết quả thi TNKQ ... 39
3.1.1. Phân tích độ khó của item ... 39
3.1.2. Phân tích độ phân biệt của item ... 40
3.1.3. Đánh giá độ tin cậy của bài trắc nghiệm ... 42
3.1.4. Xử lý số liệu đề thi trên mơ hình QUEST ... 48
3.1.5. Kết luận về độ giá trị của các bộ đề ... 52
3.2. Xử lý số liệu mẫu phiếu hỏi trong giảng viên... 52
3.2.1. Đánh giá độ tin cậy của công cụ đo (mẫu phiếu hỏi) ... 52
3.2.2. Đánh giá về độ giá trị của công cụ đo và sự phù hợp
của mơ hình các yếu tố ảnh hưởng đến chất lượng
bộ đề thi TNKQ qua xử lý phiếu hỏi ... 62
3.3. Kết luận về các yếu tố ảnh hưởng đến việc xây dựng
bộ đề TNKQ ... 62
<b>KẾT LUẬN, ĐỀ XUẤT GIẢI PHÁP, KIẾN NGHỊ</b>
4.1. Kết luận ... 71
4.2. Đề xuất giải pháp... 73
<b>TÀI LIỆU THAM KHẢO</b>... 74
<b>PHỤ LUC </b>
Phụ lục 1. File dữ liệu mon01.Itn... 75
Phụ lục 2. File dữ liệu mon01.map ... 77
</div>
<span class='text_page_counter'>(7)</span><div class='page_container' data-page=7>
<b>DANH MỤC CÁC CHỮ VIẾT TẮT </b>
<b>TT </b> <b>VIẾT TẮT </b> <b>ĐỌC LÀ </b>
1 ĐHTN Đại học Thái Nguyên
2 GD Giáo dục
3 GD – ĐT Giáo dục - đào tạo
4 GV Giảng viên
5 HS Học sinh
6 KT – ĐG Kiểm tra đánh giá
7 MCQ Câu hỏi nhiều lựa chọn
8 NXB Nhà xuất bản
9 SV Sinh viên
</div>
<span class='text_page_counter'>(8)</span><div class='page_container' data-page=8>
<b>DANH MỤC BẢNG </b>
Trang
Bảng 1.1: Ví dụ về bảng trọng số của 1 đề thi
hết học phần gồm 60 câu trắc nghiệm ... 32
Bảng 3.1: Kết quả phân tích độ tin cậy (Reliability Analysis Alpha)
của toàn bài trắc nghiệm trong đề số 1... 44
Bảng 3.2: Các thông số về độ tin cậy (Reliability Statistics)... 46
Bảng 3.3: Hệ số tin cậy Alpha Cronbach’s của 50 đề trắc nghiệm ... 46
Bảng 3.4: Phân bố tương quan giữa độ khó của đề và năng lực học sinh... 49
Bảng 3.5: Phân bố các item trong khoảng cho phép (infit mean square).... 50
Bảng 3.6: Các thông số đo lường của từng item trong file mon1.itn ... 51
Bảng 3.7: Hệ số tin cậy của từng item trên mẫu 50 giáo viên (N = 50) ... 55
Bảng 3.8: Ma trận tương quan của các item qua xử lý phiếu hỏi... 57
Bảng 3.9: Ma trận phân bố của các item phiếu hỏi trong file Phieu.map ... 60
Bảng 3.10: Phân bố của các item trong phiếu hỏi
</div>
<span class='text_page_counter'>(9)</span><div class='page_container' data-page=9>
<b>DANH MỤC HÌNH </b>
Trang
Hình 1.1: Sơ đồ các phương pháp kiểm tra - đánh giá ... 12
Hình 3.1: Thủ tục Analyze \ Scale \ Reliability trong file SPSS.sav ... 54
Hình 3.2: Phân bố thống kê của biến “diem.ptn” ... 64
Hình 3.3: Biểu đồ phân chia mức khi Recode biến “diem.ptn” ... 65
Hình 3.4: Thủ tục Transform \ Recode \ Into Same Variables ... 66
Hình 3.5: Thủ tục Transform \ Recode \ Into
Same Variables khi nhóm biến... 65
Hình 3.6: Biểu đồ phân bố biến “chl.de” trên mẫu
kết quả thi của 50 bộ đề TNKQ ... 66
Hình 3.7: Phân bố mức của biến “chl.de” sau khi Recode ... 67
Hình 3.8: Thủ tục Bảng chéo (Statistics \ Summaries \ Crosstabs) ... 68
</div>
<span class='text_page_counter'>(10)</span><div class='page_container' data-page=10>
<b>MỞ ĐẦU </b>
<b>1. Lý do chọn đề tài </b>
Để nâng cao chất lượng giảng dạy đại học, việc đánh giá chính xác kết quả
học tập của sinh viên là một vấn đề rất quan trọng. Trong thực trạng giáo dục đại
học còn nhiều tiêu cực và bất cập như hiện nay, việc áp dụng hình thức thi, kiểm
tra trắc nghiệm khách quan là một trong những biện pháp có hiệu quả cho phép
đánh giá tương đối chính xác kết quả học tập của sinh viên. Khoa Công nghệ
thông tin - Đại học Thái Nguyên cũng như các trường đại học khác hiện đang
tích cực áp dụng hình thức thi trắc nghiệm khách quan cho khoảng 40% tổng số
các môn học, coi đây là một trong những biện pháp nhằm đổi mới phương pháp
kiểm tra đánh giá, nâng cao chất lượng giáo dục. Tuy nhiên một thực tế xảy ra là
chất lượng các bộ đề thi trắc nghiệm khách quan chưa được bảo đảm cả về độ
giá trị cũng như độ tin cậy. Do đó tơi đã lựa chọn đề tài “<i><b>Đánh giá các yếu tố ảnh </b></i>
<i><b>hưởng đến chất lượng các bộ đề thi trắc nghiệm khách quan tại Khoa Công nghệ </b></i>
<i><b>thông tin - Đại học Thái Nguyên</b></i>”
</div>
<span class='text_page_counter'>(11)</span><div class='page_container' data-page=11>
Thực hiện đề tài này, chúng tôi mong muốn sẽ đánh giá được thực chất về
độ giá trị, độ tin cậy của các bộ đề thi trắc nghiệm khách quan của Nhà trường
cũng như các yếu tố ảnh hưởng đến chất lượng các bộ đề thi trắc nghiệm, từ đó
chỉ ra được các giải pháp khắc phục.
<b>2. Mục đích nghiên cứu của đề tài </b>
Nghiên cứu này hướng đến những mục tiêu như sau:
- Đánh giá độ tin cậy của bộ đề thi trắc nghiệm khách quan.
- Đánh giá độ giá trị của bộ đề thi trắc nghiệm khách quan.
- Nghiên cứu các yếu tố ảnh hưởng đến chất lượng bộ đề trắc nghiệm.
<b>3. Giới hạn nghiên cứu của đề tài </b>
Đề tài giới hạn trong việc nghiên cứu, đánh giá độ tin cậy, độ giá trị của
50 bộ đề thi trắc nghiệm khách quan đã được sử dụng tại Khoa CNTT - ĐHTN.
Nghiên cứu các yếu tố ảnh hưởng đến việc xây dựng đề thi trắc nghiệm của 50
giáo viên thông qua xử lý phiếu điều tra ý kiến kết hợp xử lý số liệu kết quả thi
của các môn học tương ứng.
<b>4 . Phƣơng pháp nghiên cứu </b>
<i><b>Câu hỏi nghiên cứu / giả thiết nghiên cứu </b></i>
Câu hỏi nghiên cứu được đặt ra là:
<i><b>“Những yếu tố nào ảnh hưởng đến quá trình xây dựng các bộ đề trắc nghiệm”. </b></i>
Các giả thiết nghiên cứu được đặt ra là các yếu tố ảnh hưởng trực tiếp đến
chất lượng các bộ đề:
<i>1- Yếu tố thời gian đầu tư cho công việc:</i> Là thời gian thực tế giáo viên dùng
để nghiên cứu tài liệu và biên soạn đề thi, quỹ thời gian của nhà trường dành cho
việc này.
<i>2- Động cơ của người thực hiện:</i> Là các yếu tố như sự say mê, hứng thú của
</div>
<span class='text_page_counter'>(12)</span><div class='page_container' data-page=12>
<i>3- Mức độ người ra đề được trang bị kỹ thuật thiết kế đề trắc nghiệm:</i> Thể
hiện ở mức độ được tập huấn, tự nghiên cứu về kỹ thuật xây dựng đề thi trắc
nghiệm.
<i>4- Sự quan tâm của nhà trường:</i> Thể hiện ở sự khuyến khích, động viên
bằng tinh thần hay vật chất cụ thể.
<i>5- Tính chất các nhóm mơn học:</i> Là đặc thù của nhóm mơn học đến việc ra
đề trắc nghiệm (phù hợp hay khó thực hiện).
<i><b>Khách thể và đối tượng nghiên cứu </b></i>
Khách thể nghiên cứu là số liệu kết quả thi của 50 bộ đề trắc nghiệm khách
quan tại Khoa CNTT và các giáo viên trực tiếp xây dựng các bộ đề đó.
Đối tượng nghiên cứu là các yếu tố ảnh hưởng đến chất lượng các bộ đề thi
trắc nghiệm.
<i><b>Phương pháp tiếp cận nghiên cứu </b></i>
1. Phương pháp khảo cứu lý thuyết: Nghiên cứu các quy định về triển khai
thực hiện việc thi trắc nghiệm và xây dựng ngân hàng thi trắc nghiệm của Bộ
GD&ĐT; Các lý thuyết về đo lường đánh giá trong giáo dục.
2. Phương pháp điều tra khảo sát: Thực hiện qua hai bước chính là nghiên
cứu sơ bộ và nghiên cứu chính thức.
- Nghiên cứu sơ bộ: Thực hiện thông qua phương pháp định tính, sử dụng
kỹ thuật thảo luận nhóm để bổ sung mơ hình.
</div>
<span class='text_page_counter'>(13)</span><div class='page_container' data-page=13>
3. Phương pháp lấy ý kiến chuyên gia: Tham khảo ý kiến của các chuyên gia
có kinh nghiệm trong giáo dục đại học và đo lường đánh giá trong giáo dục.
</div>
<span class='text_page_counter'>(14)</span><div class='page_container' data-page=14>
<b>TÀI LIỆU THAM KHẢO </b>
<b>Tiếng Việt </b>
1- Nguyễn Phụng Hoàng (2003), <i>Phương pháp trắc nghiệm trong kiểm tra </i>
<i>và đánh giá thành quả học tập</i>. NXB Giáo dục.
2- Phạm Viết Vượng (2006), <i>Giáo dục học</i>. NXB ĐHQGHN.
3- Nguyễn Công Khanh (2004),<i> Đánh giá và đo lường trong khoa học xã </i>
<i>hội.</i> NXB Chính trị quốc gia.
4- Nguyễn Công Khanh (2001), <i>Ứng dụng SPSS FOR WINDOWS: Xử lý và </i>
<i>phân tích dữ liệu</i>. NXB ĐHQGHN.
5- Lê Đức Ngọc (2003), <i>Bài giảng đo lường và đánh giá thành quả học tập </i>
<i>trong giáo dục</i>. Đại học Quốc gia Hà Nội.
6- Phạm Minh Hạc, Trần Kiều, Đặng Bá Lãm, Nghiêm Đình Vỹ (2002),
<i>Giáo dục thế giới đi vào thế kỉ XXI</i>, NXB Chính trị Quốc gia.
7 - Dương Thiệu Tống (2004), <i>Phương pháp nghiên cứu trong khoa học </i>
<i>giáo dục và tâm lí,</i> NXB Giáo dục.
<b>Tiếng Anh </b>
8- Taylo & Francis Grup (2003),<i> Quality in Higher Education. </i>
9- Jemes H.McMillan (2001), <i>Classroom assessment,</i> Virginia
Commonwealth University.
10- Norman E. Grounlund (2003),<i> Constructing Achivement Tets. </i>
11- Peggy O’Neill (2009), <i>Guide to College Writing Assessment,</i> Utah State
University Press.
</div>
<!--links-->
