Thông tin vỀ luẬn án tiẾn sĩ

1. Họ và tên nghiên cứu sinh: Bùi Thị Kim Phượng           2. Giới tính: Nữ

3. Ngày sinh: 30/06/1986                                                      4. Nơi sinh: Hải Phòng

5. Quyết định công nhận nghiên cứu sinh số: 2120/QĐ-ĐHGD ngày 16 tháng 12 năm 2020 của Hiệu trưởng Trường Đại học Giáo dục – Đại học Quốc gia Hà Nội

6. Các thay đổi trong quá trình đào tạo:

Đề tài được giao ban đầu là: “Đánh giá hiệu quả của hình thức kết hợp (blended learning) trong chương trình đào tạo biên phiên dịch” tại Quyết định số 642/QĐ-ĐHGD ngày 19/04/2021 của Hiệu trưởng Trường Đại học Giáo dục. Sau đó, hướng nghiên cứu đã được điều chỉnh với tên đề tài mới: “Xây dựng bài kiểm tra thích ứng bằng máy tính để đánh giá kiến thức từ vựng tiếp nhận tiếng Anh” theo Quyết định số 1814/ QĐ-ĐHGD ngày 5/10/2022 của Hiệu trưởng Trường Đại học Giáo dục, ĐHQGHN. Quá trình thực hiện đề tài đã được gia hạn 06 tháng.

7. Tên đề tài luận án: Xây dựng bài kiểm tra thích ứng bằng máy tính để đánh giá kiến thức từ vựng tiếp nhận tiếng Anh

8. Chuyên ngành: Đo lường và đánh giá trong giáo dục                    9. Mã số: 9140115

10. Cán bộ hướng dẫn khoa học:                      

1. GS.TS. Nguyễn Quý Thanh

2. PGS.TS. Lê Thái Hưng

11. Tóm tắt các kết quả mới của luận án:

Về mặt lý luận, luận án là một công trình nghiên cứu khoa học được thực hiện dựa trên cơ sở lý thuyết chặt chẽ và tổng quan nghiên cứu có hệ thống khoa học về kiểm tra từ vựng và trắc nghiệm thích ứng bằng máy tính. Luận án đã nỗ lực tổng hợp những tiềm năng và những thách thức trong việc triển khai CAT trong đánh giá ngôn ngữ nói chung và từ vựng nói riêng. Nhìn chung, có thể tin tưởng chắc chắn rằng CAT sẽ ngày càng trở nên phổ biến như một lựa chọn đánh giá hiệu quả trong cả nghiên cứu và thực tiễn ở Việt Nam.

Về mặt thực tiễn, luận án xây dựng, thử nghiệm và đánh giá hiệu quả của một công cụ kiểm tra kiến thức từ vựng tiếp nhận tiếng Anh hướng tới người học ngoại ngữ tiếng Anh tại Việt Nam. Với việc áp dụng trắc nghiệm thích ứng bằng máy tính, công cụ hứa hẹn có những tính năng vượt trội, mang lại tính chính xác và hiệu quả đánh giá cao khi so với các bài kiểm tra cố định đã được phát triển trước đây. Luận án cũng cung cấp những bằng chứng xác thực để khẳng định tính khả thi của việc áp dụng trắc nghiệm thích ứng bằng máy tính trong kiểm tra từ vựng. Cùng với một số lượng ít các nghiên cứu được thực hiện về trắc nghiệm thích ứng bằng máy tính ở Việt Nam, luận án góp phần mở đường cho các nghiên cứu trong tương lai về việc áp dụng trắc nghiệm thích ứng trong kiểm tra và đánh giá với các nội dung và mục đích khác. Luận án thu nhận những kết quả đánh giá từ quá trình thử nghiệm cũng như từ góc nhìn của các thí sinh có trải nghiệm trực tiếp, vì vậy có thể cung cấp những ý tưởng cũng như nhận định có giá trị và đáng tin cậy về việc áp dụng trắc nghiệm thích ứng trong kiểm tra đánh giá cũng như trong quá trình dạy và học, để có thể mang lợi ích cho cả người dạy và người học, cũng như các nhà nghiên cứu hay nhóm phát triển hệ thống trắc nghiệm thích ứng.

12. Khả năng ứng dụng trong thực tiễn:

Kết quả của luận án sẽ là một trong những căn cứ thực tiễn cho việc áp dụng trắc nghiệm thích ứng trong kiểm tra đánh giá cũng như trong quá trình dạy và học nhằm nâng cao chất lượng dạy và học ngoại ngữ tiếng Anh ở Việt Nam cũng như chất lượng giáo dục nói chung. Ngoài ra, những khuyến nghị được đề xuất cũng sẽ góp phần mở đường cho việc ứng dụng CAT rộng rãi hơn trong thực tiễn giáo dục với các nội dung và mục đích khác nhau.

13. Những hướng nghiên cứu tiếp theo:

Một số hướng nghiên cứu tiếp theo được đề xuất bao gồm:

- Nghiên cứu việc sử dụng các thuật toán trắc nghiệm thích ứng, các mô hình phân tích nhiều tham số và các công cụ phân tích dữ liệu khác nhau trong quá trình xây dựng và phát triển các hệ thống trắc nghiệm thích ứng.

- Nghiên cứu xây dựng ngân hàng câu hỏi với các nội dung khác và các mục đích giáo dục khác nhau.

- Nghiên cứu áp dụng trắc nghiệm thích ứng để phục vụ kiểm tra và đánh giá thường xuyên, hỗ trợ thực hành dạy, học và nghiên cứu tại Việt Nam.

14. Các công trình đã công bố có liên quan đến luận án:

1. Bùi Thị Kim Phượng, Nguyễn Quý Thanh và Lê Thái Hưng, "Computerized adaptive testing in language education: oppotunities and challenges in Era 4.0", Kỷ yếu Hội thảo Hafpes, tr. 264-274, 2021.

2. Bùi Thị Kim Phượng, “A review on vocabulary tests of high frequency English words”, VNU Journal of Science: Education Research, Vol. 38 (3), tr. 51-60, 2022.

3. Bùi Thị Kim Phượng, Nguyễn Quý Thanh và Lê Thái Hưng, “The development of a Vietnamese-English bilingual version of the New General Service List test”, Kỷ yếu Hội thảo Hafpes 2, tr. 502-509, 2022.

4. Bùi Thị Kim Phượng, Nguyễn Quý Thanh và Lê Thái Hưng, “Assessing the quality of a newly designed vocabulary test for Vietnamese EFL learners: a Rasch-based analysis”, Vietnam Journal of Education, Vol. 7, tr. 63-73, 2023.

5. Nguyễn Thái Hà, Bùi Thị Kim Phượng và Lê Thái Hưng, “Phát triển ngân hàng câu hỏi trắc nghiệm thích ứng đánh giá từ vựng tiếng Anh thông dụng: áp dụng IRT và phương pháp cân bằng đề”, Tạp chí Giáo dục, Vol. 23 (19), tr. 8-14, 2023.

6. Bùi Thị Kim Phượng, Nguyễn Quý Thanh và Lê Thái Hưng, “Perceptions of a computerized adaptive test of English vocabulary: an online survey with Vietnamese test-takers”, Kỷ yếu Hội thảo Hafpes 3, tr. 481-491, 2023.

7. Bùi Thị Kim Phượng, “Phỏng vấn thí sinh về bài trắc nghiệm thích ứng từ vựng tiếp nhận tiếng Anh”, Tạp chí Giáo dục và Xã hội, Số đặc biệt Tháng 10, tr.104-108, 2023.

INFORMATION ON DOCTORAL THESIS

1. Full name: Bui Thi Kim Phuong                                      2. Sex: Female

3. Date of birth: 30/06/1986                                                 4. Place of birth: Hai Phong

5. Admission decision number: 2120/QD-DHGD dated 16 December 2020

6. Changes in academic process:

The initially assigned topic was "Evaluating the effectiveness of blended learning in the translation and interpretation training program" in Decision No. 642/QD-DHGD dated 19 April 2021 by the Rector of the University of Education, VNU. After that, however, the research direction was adjusted and the thesis title was changed into "Developing a computerized adaptive test to assess the English receptive vocabulary knowledge" according to Decision No. 1814/QD-DHGD dated 10 May 2022 by the Rector of the University of Education, VNU. The implementation process was extended for a period of 6 months.

7. Official thesis title: Developing a computerized adaptive test to assess the English receptive vocabulary knowledge

8. Major: Educational Assessment and Measurement                      9. Code: 9140115   

10. Supervisors:

1. Prof. Dr. Nguyen Quy Thanh

2. Assoc. Prof. Dr. Le Thai Hung

11. Summary of the new findings of the thesis:

Theoretically, the thesis is a scientific research project carried out based on a strict theoretical basis and a systematic literature review on vocabulary assessment and CAT - computerized adaptive testing. The thesis has attempted to synthesize the potentials and challenges in implementing CAT in language assessment in general and vocabulary assessment in particular. Overall, it is strongly believed that CAT will become increasingly popular as an effective assessment tool in both research and practice in Vietnam.

In terms of practice, the thesis develops, tests and evaluates the effectiveness of a tool to assess Vietnamese EFL learners’ English receptive vocabulary knowledge. By integrating CAT, the tool promises to have outstanding features, bringing high accuracy and efficiency compared to fixed tests. The thesis also provides reliable evidence to confirm the feasibility of applying CAT in vocabulary assessment. Along with a small number of studies conducted on CAT in Vietnam, the thesis helps open up greater possibilities for future studies on the application of CAT in educational assessment and measurement with various contents and purposes. The thesis collects relevant results from the experimental process as well as from the perspectives of candidates with direct experience. Therefore, it can provide valuable and reliable ideas about the application of CAT in assessment as well as in the teaching and learning process which benefit both teachers and learners, researchers and CAT system development team alike.

12. Practical applicability, if any:

The results of the thesis will be one of the practical bases for applying CAT in assessment and measurement as well as in the teaching and learning process to improve the quality of English language teaching and learning in Vietnam as well as the quality of overall education. In addition, the proposed suggestions will also help pave the way for wider application of CAT in educational practice with different contents and purposes.

13. Further research directions, if any:

Some suggestions for further studies include:

- Examining adaptive testing algorithms, multi-parameter analysis models and various data analysis tools in the process of building and developing adaptive testing systems.

- Developing item banks with different contents and different educational purposes.

- Applying CAT to serve regular assessment and measurement and support teaching, learning and research practices in Vietnam.

14. Thesis-related publications:

1. Bui Thi Kim Phuong, Nguyen Quy Thanh & Le Thai Hung, “Computerized adaptive testing in language education: opportunities and challenges in Era 4.0”, Proceedings of HAFPES, pp. 264-274, 2021.

2. Bui Thi Kim Phuong, “A review on vocabulary tests of high frequency English words”, VNU Journal of Science: Education Research, Vol. 38 (3), pp. 51-60, 2022.

3. Bui Thi Kim Phuong, Nguyen Quy Thanh & Le Thai Hung, “The development of a Vietnamese-English bilingual version of the New General Service List Test”, Proceedings of HAFPES 2, pp. 502-509, 2022.

4. Bui Thi Kim Phuong, Nguyen Quy Thanh & Le Thai Hung, “Assessing the quality of a newly designed vocabulary test for Vietnamese EFL learners: a Rasch-based analysis”, Vietnam Journal of Education, Vol. 7, pp. 63-73, 2023.

5. Nguyen Thai Ha, Bui Thi Kim Phuong & Le Thai Hung, “Phát triển ngân hàng câu hỏi trắc nghiệm thích ứng đánh giá từ vựng tiếng Anh thông dụng: áp dụng IRT và phương pháp cân bằng đề” [The development of CAT item bank to assess the knowledge of high frequency English words: applying IRT and equating methods], Tạp chí Giáo dục [Vietnam Journal of Education], Vol. 23 (19), pp. 8-14, 2023.

6. Bui Thi Kim Phuong, Nguyen Quy Thanh & Le Thai Hung, “Perceptions of a computerized adaptive test of English vocabulary: an online survey with Vietnamese test-takers”, Proceedings of HAFPES 3, pp. 481-491, 2023.

7. Bui Thi Kim Phuong, “Phỏng vấn thí sinh về bài trắc nghiệm thích ứng từ vựng tiếp nhận tiếng Anh” [An interview with test-takers on the adaptive test of English receptive vocabulary], Tạp chí Giáo dục và Xã hội [Journal of Education and Society], October Special Issue, pp. 104-108, 20232023.