PGS. TS Nguyễn Lộc

PVT. Viện KHGD Việt Nam – Giám Đốc điều phối quốc gia

ĐÁNH GIÁ TRÊN DIỆN RỘNG VÀ PISA

TS. Lê Thị Mỹ Hà

QUY TRÌNH ĐÁNH GIÁ TRÊN DIỆN RỘNG

2

3

Xác định mục đích cần đánh giá

Xác định đối tượng đánh giá và chọn mẫu học sinh để đánh giá

Chuẩn bị về tổ chức thực hiện

Xác định nội dung, phương pháp đánh giá

Tiến hành đánh giá

Thu thập dữ liệu và xử lý dữ liệu

Viết báo cáo kết quả

Thông báo kết quả tới các đối tượng có liên quan và đề xuất các giải pháp cải tiến

Xây dựng công cụ đánh giá

Xây dựng ma trận của các bộ công cụ

Viết các câu hỏi

Thử nghiệm các bộ công cụ đánh giá

Phân tích, đánh giá các câu hỏi

Sửa chữa, hoàn thiện các bộ công cụ sử dụng cho khảo sát chính thức

Tổng kết đợt đánh giá và lựa chọn các câu hỏi tốt đưa vào ngân hàng câu hỏi.

QUY TRÌNH ĐÁNH GIÁ PISA

4

5

Tóm tắt cấu trúc báo cáo

1. Tổng quan về PISA OECD 2. Tóm tắt quá trình triển khai PISA

tại Việt Nam

6

PGS. TS Nguyễn LộcPVT. Viện KHGD Việt Nam – NPM

GIỚI THIỆU CHUNG VỀ PISAGIỚI THIỆU CHUNG VỀ PISA

PISA là viết tắt của "Programme for International Student Assessment - Chương trình đánh giá học sinh quốc tế" do Tổ chức hợp tác và phát triển kinh tế (OECD) khởi xướng và chỉ đạo.

Đến 2015, hơn 70 quốc gia tham gia PISA để theo dõi tiến bộ của mình nhằm phấn đấu đạt được các mục tiêu giáo dục cơ bản.

PGS. TS Nguyễn LộcPVT. Viện KHGD Việt Nam – NPM

ĐẶC ĐIỂM CỦA PISAĐẶC ĐIỂM CỦA PISA

PISA nổi bật nhờ quy mô toàn cầu và tính chu kỳ.

PISA là khảo sát giáo dục duy nhất đánh giá kiến thức và kỹ năng của học sinh ở độ tuổi 15, độ tuổi kết thúc giáo dục bắt buộc ở hầu hết các quốc gia.

MỤC TIÊU CỦA CHMỤC TIÊU CỦA CHƯƠƯƠNG TRÌNH NG TRÌNH

PISAPISA

Mục tiêu của Chương trình PISA là đánh giá năng lực của học sinh ở độ tuổi 15 kết thúc phần giáo dục bắt buộc đã được chuẩn bị để đáp ứng những thách thức của cuộc sống sau này.

PISA thu thập và cung cấp cho các quốc gia các dữ liệu có thể so sánh được ở tầm quốc tế cũng như sự tiến bộ về khả năng đọc hiểu, toán học và khoa học

của học sinh độ tuổi 15 ở các quốc gia tham gia PISA.

Khảo sát của PISAKhảo sát của PISA

PISA được thực hiện theo chu kì 3 năm/lần.Đối tượng đánh giá là học sinh trung học trong

độ tuổi 15. Việc đánh giá được thực hiện ở 03 lĩnh vực kiến

thức chính là đọc hiểu, toán học và khoa học; đồng thời học sinh và nhà trường sẽ trả lời 01 phiếu hỏi về điều kiện, hoàn cảnh.

Mỗi kì đánh giá sẽ có một lĩnh vực kiến thức được lựa chọn để đánh giá sâu hơn.

Các nội dung đánh giá của PISA qua Các nội dung đánh giá của PISA qua các kỳcác kỳ

Năm 2000 Năm 2003 Năm 2006Năm

2009Năm 2012

Năm

2015

Đọc hiểu

Toán học

Khoa học

Đọc hiểu

Toán học

Khoa học

Giải quyết

vấn đề

Đọc hiểu

Toán học

Khoa học

Đọc hiểu

Toán học

Khoa học

Đọc hiểu

Toán học

Khoa họcGiải quyết vấn đề

Bài thi trên máy

tính

Bài thi đánh giá

năng lực tài chính

Đọc hiểu

Toán học

Khoa

học

Ghi chú: Phần được gạch chân là nội dung trọng tâm trong mỗi kỳ đánh giá

MẪU MẪU KKHẢO SÁTHẢO SÁT PISA PISA

Trong mỗi chu kỳ đánh giá, mỗi quốc gia có khoảng từ 4.500 đến 50.000 học sinh được chọn để tham gia đánh giá theo cách chọn mẫu ngẫu nhiên.

Việc lấy mẫu được tiến hành theo phương pháp phân tầng 2 cấp (chọn trường ở cấp quốc gia và chọn học sinh ở cấp trường) dựa trên các bằng chứng chính xác về tuổi và nơi đang học. Điều này đòi hỏi các quốc gia tham gia PISA phải có một hệ thống dữ liệu chính xác và đầy đủ về học sinh và nhà trường của mình.

Khảo sát của PISAKhảo sát của PISA

Tính đến năm 2006, tất cả học sinh đều sử dụng bút chì và giấy khi làm bài trắc nghiệm. Tuy nhiên, từ 2009 sẽ có thêm bài thi trắc nghiệm trên máy tính.

Hiện nay, mỗi kỳ PISA được tiến hành theo 2 đợt,

Đợt 1: PISA chính thức dành cho các nước thành viên OECD.

Đợt 2 (thông thường sau 1 năm): PISA bổ sung (PISA Plus hay PISA+) dành cho các nước không phải là thành viên OECD.

• Ý nghĩa: Bước tích cực của hội nhập quốc tế về giáo dục; So sánh “mặt bằng” giáo dục quốc gia với giáo dục

quốc tế; OECD đưa ra kết quả phân tích và đánh giá về chính

sách giáo dục quốc gia và đề xuất những thay đổi về chính sách giáo dục cho các quốc gia;

Góp phần đổi mới phương pháp đánh giá, đưa ra cách tiếp cận mới về dạy – học, thi và đánh giá.

Là bước chuẩn bị tích cực cho lộ trình đổi mới giáo dục sau 2015.

14

VIỆT NAM THAM GIA PISA

VIỆT NAM THAM GIA PISA

Ngày 27/10/2008 Phó thủ tướng, Bộ trưởng Nguyễn Thiện Nhân có văn bản giao Bộ Giáo dục và Đào tạo tiến hành khẩn trương nhất để đăng ký Việt Nam tham gia Chương trình quốc tế đánh giá học sinh (Programme for International Student Assessment - PISA)

Ngày 22/10/2009 Phó thủ tướng, Bộ trưởng Nguyễn Thiện Nhân có thư gửi ông Angel Gurria, Tổng Thư ký OECD đề nghị chấp nhận Việt Nam tham gia PISA 2012.

Ngày 11/11/2009: OECD có thư chính thức gửi Phó thủ tướng, Bộ trưởng Nguyễn Thiện Nhân về việc đồng ý đề Việt Nam tham gia PISA.

Thực hiện khảo sát thử nghiệm 2011 và chính thức năm 2012. So với các nước tham gia PISA 2012:

+ Xếp thứ 69/70 về GDP bình quân đầu người+ Xếp thứ 70/70 về chỉ số HDI

Phương pháp luận cơ bản

Công cụ đánh giá học sinh (các đề thi)

Phiếu hỏi học sinh Phiếu hỏi trường học (Hiệu trưởng) Phiếu hỏi phụ huynh 2012 Không có phiếu hỏi giáo viên

Học sinh được lựa chọn từ nhiều lớp học Trọng tâm đánh giá không giới hạn ở

các môn học đuợc dạy ở trường(2015 mới có phiếu hỏi giáo viên)

16

Các giai đoạn hoạt động chính của PISA 2015

Chuẩn bị đề thi và phiếu hỏi Năm 2013

Triển khai thử nghiệm Năm 2014

Kỳ thi chính thức Năm 2015

17

Xây dựng các câu hỏi thi cho PISA 2015

- Các quốc gia xây dựng câu hỏi đóng góp cho OECD, nộp trước tháng 12/2012.

- OECD tập trung các câu hỏi, sàng lọc và tập hợp thành các tập câu hỏi chuyển cho các quốc gia.

- Đánh giá câu hỏi vào năm 2013- Dịch các câu hỏi thi (2013)- Xây dựng thành các bộ đề thi theo yêu

cầu kỹ thuật của OECD (2014)18

Dịch các bộ công cụ khảo sát PISA

Tất cả các ngôn ngữ chiếm hơn 5% dân số trong mẫu đều được sử dụng.

Yêu cầu về dịch kép/Sự hòa hợp (ngoại trừ các chỉ dẫn/ hướng dẫn mã số và các sổ tay hướng dẫn)

19

Mẫu khảo sát

Khảo sát thử nghiệm: Cỡ mẫu được xác định sao cho có thể lấy được 200 học sinh trả lời mỗi câu hỏi. Mỗi quốc gia chọn 40 trường x 35 HS/trường = 1.400 HS.

Khảo sát chính thức: 150 trường x 35 HS = 5.250 HS.

20

Chuẩn bị tài liệu kiểm tra Thu thập thông tin của học sinh

(tên, mã số học sinh, số cuốn đề thi/ bảng hỏi) để in & dán nhãn thay vì viết tay lên cuốn đề thi. In nhãn tên như vậy sẽ hạn chế sai sót trong quá trình phát cuốn đề thi cho học sinh. Đồng thời cũng tăng độ chính xác và hiệu quả của việc nhập dữ liệu và làm sạch dữ liệu

21

Các Buổi thi dự phòng

Khuyến nghị nên lên kế hoạch tổ chức buổi thi dự phòng ở những trường chưa tới 80% học sinh được chọn tham gia làm bài thi.

22

Cán bộ giám sát chất lượng Năm 2015, đội ngũ cán bộ giám sát

chất lượng chương trình PISA được chỉ định và trả lương bởi Nhà thầu quốc tế để đến 1 số trường (thông thường là 15 trường)

Cán bộ coi thi không được thông báo về việc có Cán bộ giám sát đến trường. Nhưng điều phối của trường có thể được thông báo trước để Giám sát viên có thể tiếp cận với truờng học.

23

Phạm vi: Quy trình này chỉ áp dụng cho việc tạo lập và tổ

hợp các đề thi & bảng hỏi phục vụ cho khảo sát chính thức PISA 2012.

Mục đích: Tạo lập 13 đề thi, 01 bảng hỏi nhà trường, 03

bảng hỏi học sinh phục vụ cho khảo sát chính thức PISA 2012

Yêu cầu: Tạo lập các đề thi (bao gồm cluster) và bảng

hỏi theo đúng tiêu chuẩn 10.3 do OECD đề ra trong tài liệu hướng dẫn NPM về các yêu cầu cho chuẩn bị tài liệu phục vụ khảo sát chính thức PISA 2012

24

Quy trình và yêu cầu tạo lập đề thi và phiếu hỏi

Mỗi Cluster được cấu thành từ các Units

Mỗi Unit được đánh mã PM _ _ _ hoặc PR _ _ _ hoặc PS _ _ _ (vị trí _ có thể là một con số từ 0-9 hoặc chữ cái hoa)

25

Các thông số liên quan

Cấu tạo một đề thi

26

Trang bìa

Bảng công thức

Hướng dẫn

chung

Khảo sát

năng lực

Cấu tạo một bảng hỏi học sinh

27

TRANG BÌA

28

Booklet – trang bìa-Mã học sinh, tên học sinh và tên trường đã được VP PISA xây dựng sẵn và in trực tiếp lên trang bìa bằng phần mềm. --Việc này tránh sai sót và tiết kiệm thời gian cho cả học sinh và Cán bộ quản lý khảo sát.-OECD đã khuyến nghị các nước nên tiến hành dán nhãn lên trang bìa tuy nhiên họ nhất trí với cách làm của Việt Nam là in trực tiếp sau quá trình đàm phán

29

Bảng công thức và phần hướng dẫn chung

30

Trang khảo sát năng lực

Trang này xuất hiện ở cuối mỗi đề thi

31

Phiếu hỏi học sinh

Mã học sinh đã được xây dựng sẵn và in trực tiếp lên

trang bìa

32

Phiếu hỏi nhà trường

Phiếu hỏi này dành cho Hiệu trưởng trả lời

GiỚI THIỆU CƠ CẤU TỔ CHỨC CỦA PISA

1. Cơ cấu tổ chức của PISA OECD

Cơ cấu tổ chức của PISA OECD được thiết kế như sau:

- Cục Giáo dục OECD- Hội đồng quản trị PISA- Các nhà thầu quốc tế- Ban quản lý PISA quốc gia- Các nhóm chuyên gia của quốc tế

1.1. Cục Giáo dục OECD

Cục giáo dục OECD có trách nhiệm quản lý hoạt động thường nhật của PISA:

-Theo dõi việc triển khai khảo sát,-Quản lý hành chính các vấn đề của Hội đồng quản trị PISA,-Tạo đồng thuận giữa các nước và là trung gian giữa Hội đồng quản trị PISA và liên danh nhà thầu triển khai PISA.

1.2. Hội đồng quản trị PISA

-Mỗi quốc gia thành viên OECD tham gia PISA có 01 đại diện trong Hội đồng quản trị PISA.

-Mỗi quốc gia đối tác được cử 01 đại diện làm quan sát viên tại Hội đồng.

-Hội đồng quản trị PISA bầu ra Chủ tịch Hội đồng.

-Hội đồng quản trị PISA sẽ xác định các ưu tiên chính sách đối với PISA và đảm bảo là các ưu tiên này được triển khai trong cuộc khảo sát.

Như vậy các nước đối tác không thể có ảnh hưởng đối với các nội dung học thuật cũng như các vấn đề tổ chức thực hiện của PISA.

1.3. Nhà thầu quốc tế

Đối với mỗi kỳ PISA sẽ lựa chọn một nhà thầu quốc tế chịu trách nhiệm thiết kế và triển khai khảo sát.

Trong các kỳ đánh giá đã qua, liên danh quốc tế do Hội đồng nghiên cứu giáo dục Úc (ACER) đã trúng thầu và thực hiện. Các thành viên của liên danh này bao gồm:

ETS: Tổ chức tập huấn và các dịch vụ giáo dục – Mỹ ACER: Hội đồng nghiên cứu giáo dục Úc;

CAPSTAN: Cơ quan kiểm soát chất lượng ngôn ngữ Bỉ;

DIPF: Viện nghiên cứu sư phạm quốc tế Đức;

NIER: Viện nghiên cứu chính sách giáo dục quốc gia Nhật;

ASPE: Trung tâm phân tích hệ thống và thực tiễn giáo dục Đại học Liège - Bỉ;

WESTAT: Công ty tư vấn nghiên cứu Mỹ.

và một số tổ chức khác.

Mô hình cơ cấu tổ chức của PISA OECD:

2. Cơ cấu tổ chức của PISA ở Việt Nam

Việt Nam chính thức tham dự kỳ đánh giá PISA 2012. Việt Nam đã xây dựng cơ cấu tổ chức triển khai PISA ở Việt Nam như sau:

2. Cơ cấu tổ chức của PISA ở Việt Nam

2.1. Ban chỉ đạo đánh giá trong nước và quốc tế học sinh phổ thông

Trưởng ban: TS. Nguyễn Vinh Hiển, Thứ trưởng Bộ Giáo dục và Đào tạo.

2.2. Ban Dịch thuật các tài liệu PISA kỳ khảo sát 2.3. Ban Đề thi PISA 2.4. Ban tổ chức kỳ khảo sát 2.5. Ban chấm thi, chọn mẫu và xử lý số liệu, viết báo

cáo kỳ khảo sát 2.6. Văn phòng PISA Việt Nam.

Cơ cấu tổ chức PISA tại Việt Nam:

Ban Dịch thuật các tài liệu PISA

Ban Dịch thuật các tài liệu PISA

Ban Đề thi PISA Ban Đề thi PISA Ban tổ chức khảo sát

Ban tổ chức khảo sát

Ban chấm thi, chọn mẫu và xử lý số liệu, viết

báo cáo

Ban chấm thi, chọn mẫu và xử lý số liệu, viết

báo cáo

Văn phòng PISA Việt

Nam

Văn phòng PISA Việt

Nam

Ban chỉ đạo đánh giá trong nước và quốc tế

Ban chỉ đạo đánh giá trong nước và quốc tế

Ban chỉ đạo cấp tỉnh

Điều phối viên cấp trường

Kế hoạch triển khai PISA tại Việt Nam- Những mốc quan trọng

Khảo sát thử nghiệm 4/2014 Chuẩn bị dữ liệu mẫu thi PISA

chính thức 2015 và chọn mẫu học sinh thi chính thức.

Khảo sát chính thức 4/2015

43

pisavietnam@gmail.com ĐT: 04.36231513

44