國際學生評估項目(PISA)聚焦全球15歲年齡段學生的閱讀、數學、科學、財經等核心素養及協作問題解決能力,憑借其引領性的測評理念、科學的考試方法和先進的分析評價技術,系統評價、比較各參測國家和地區的教育質量。PISA已經成為當前影響力的國際教育評價項目之一。
2015年,我國北京、上海、江蘇、廣東等4個省(市)正式參加PISA2015測試,268所學校的1萬余名學生通過機考模式順利完成了PISA2015正式測試和調查問卷;268所學校的負責人和6000余名教師完成了在線調查問卷。經合組織(OECD)將于2016年12月公開70多個參測國家和地區的測試結果。
作為我國PISA2015測試工作的官方操作指南,《中國PISA2015測試實踐指導》一書詳細介紹了我國PISA2015測試嚴格執行國際統一標準與技術規范的實踐操作流程和具體環節,總結了PISA2015在測試理念、命題方式、閱卷評分、機考模式、數據挖掘等方面工作經驗,深入剖析了PISA2015發展趨勢,解讀了PISA對我國教育評價、教育改革,特別是考試制度改革的影響、借鑒意義和啟示。同時,為切實指導各省(市)的測試工作,本書還專門提煉了廣東省PISA2015測試實踐的成果。
《中國PISA2015測試實踐指導》對于我國各級教育督導部門、教育研究與評價機構、各級各類學校的管理人員、專家學者和感興趣的教師群體是一部不可多得的基礎教育評估指南。
及時章PISA2015抽樣
一、PISA201 5抽樣任務與技術標準
(一)抽樣任務
(二)技術標準
二、PlSA2015試測抽樣設計
(一)定義目標總體
(二)確定抽樣設計
(三)收集學生分布信息
(四)收集學校信息與試測排除類別信息
(五)收集試測樣本學校及其替補學校信息
(六)收集試測學生、教師名單
(七)抽樣軟件及試測名單導入
(八)試測校內抽樣
(九)更新試測抽樣數據
(十)校驗與提交試測抽樣數據
三、PlSA201 5正式測試階段抽樣工作
(一)收集期望目標總體和確定目標總體信息
(二)收集正式測試抽樣框
(三)抽取正式測試樣本學校及其替補學校
(四)收集正式測試學生、教師名單與校內抽樣
(五)更新正式測試抽樣數據
(六)校驗與提交正式測試抽樣數據
四、體會與啟示
第二章 PISA2015試題開發、翻譯和改編
一、試題開發
二、試題的翻譯改編審核程序
(一)初始步驟
(二)設置翻譯人員
(三)整合
(四)校對審核
(五)審核鑒定
(六)本國復審
(七)布局改編
(八)跟進審核
(九)最終確認
三、PISA2015中國國家中心關于翻譯改編工作的實施情況
(一)團隊的招募和組建
(二)文件管理
(三)翻譯改編工具及操作方法
(四)翻譯改編注意事項
(五)正式測試翻譯改編的修訂
四、體會與啟示
(一)與時俱進的試題
(二)規范的翻譯改編流程
(三)嚴格的試題篩選標準
(四)協商的工作機制
第三章機考測試系統
一、計算機診斷程序
(一)計算機診斷程序操作簡述
(二)PIsA2015中國國家中心在試測階段的檢測工作
(三)PISA2015中國國家中心在正式測試階段的檢測工作
二、學生機考系統
(一)PISA2015試測階段的學生機考系統
(二)正式測試階段的學生機考系統
三、體會與啟示
(一)關于計算機化考試的宣傳和引導
(二)關于計算機化考試的管理
(三)關于信息化時代的大數據
第四章閱卷編碼
一、閱卷編碼的理念
(一)充分理解學生的作答思路,進行有利推斷
(二)忽略微差錯,發現閃光點
(三)矛盾要素和不相關要素
二、主觀題編碼設計
(一)分數等級標簽
(二)代碼編號
三、關于工作坊材料的說明
四、本國樣例的說明
五、其他資料
六、多步驟的編碼解決方案
(一)嚴格忠實于編碼指南
(二)咨詢培訓專家
(三)國際咨詢和仲裁
七、試測閱卷編碼
(一)測試工具箱整理
(二)閱卷編碼前期準備
(三)紙筆測試閱卷編碼過程
八、試測機考編碼流程
(一)數據流轉
(二)編碼員編號和數據拆分
(三)PDF文件
(四)編碼流程
(五)質量檢驗
九、正式測試機考編碼
(一)樣例更新
(二)編碼員分組
(三)編碼質量監控
(四)PISA正式測試質量監控操作規范
十、職業編碼及學科編碼
(一)職業編碼依據
(二)職業編碼人員
(三)職業編碼工作流程
(四)科學課程名稱編碼
十一、體會與啟示
第五章學校、教師和學生問卷
一、PISA2015問卷設計
二、PISA試測問卷的模塊主題
(一)優先關注模塊
(二)中度關注模塊
(三)剩余模塊
三、問卷的翻譯改編
(一)PISA2015問卷的基本情況
(二)問卷的翻譯改編
四、測試實施——在線問卷的作答
(一)學校問卷、教師問卷作答賬號管理
(二)監控在線問卷作答進展
五、體會與啟示
(一)高效的管理運行模式
(二)系統的信息收集分析
第六章PISA2015考務管理
一、材料的改編、翻譯和印刷
(一)改編
(二)翻譯
(三)印刷
二、考務人員
(一)學校協調主任
(二)測試主任
(三)IT人員
三、考務培訓
四、測試實施
(一)測試材料的制作與運送
(二)測試前24小時布置機房
(三)時間安排
(四)實施過程
五、PlSA質量監控
(一)任命質量監控員
(二)確定質量監控校
(三)質量監控員工作內容
六、PISA2015國家中心值班
七、材料整理和數據錄入
(一)材料整理
(二)數據錄入
八、體會與啟示
第七章PISA數據管理
一、前期準備
二、檢查編碼手冊
三、測試DME
四、導入機考數據
五、導入其他數據
六、錄入數據
七、克隆與合并數據庫
八、校驗與提交數據
九、體會與啟示