第一章 PISA2015抽样 1
一、PISA2015抽样任务与技术标准 1
(一)抽样任务 1
(二)技术标准 2
二、PISA2015试测抽样设计 4
(一)定义目标总体 5
(二)确定抽样设计 5
(三)收集学生分布信息 6
(四)收集学校信息与试测排除类别信息 6
(五)收集试测样本学校及其替补学校信息 7
(六)收集试测学生、教师名单 7
(七)抽样软件及试测名单导入 11
(八)试测校内抽样 14
(九)更新试测抽样数据 15
(十)校验与提交试测抽样数据 17
三、PISA2015正式测试阶段抽样工作 18
(一)收集期望目标总体和确定目标总体信息 18
(二)收集正式测试抽样框 19
(三)抽取正式测试样本学校及其替补学校 20
(四)收集正式测试学生、教师名单与校内抽样 20
(五)更新正式测试抽样数据 22
(六)校验与提交正式测试抽样数据 23
四、体会与启示 23
第二章 PISA2015试题开发、翻译和改编 25
一、试题开发 25
二、试题的翻译改编审核程序 26
(一)初始步骤 27
(二)设置翻译人员 27
(三)整合 27
(四)校对审核 27
(五)审核鉴定 27
(六)本国复审 28
(七)布局改编 28
(八)跟进审核 28
(九)最终确认 28
三、PISA2015中国国家中心关于翻译改编工作的实施情况 29
(一)团队的招募和组建 29
(二)文件管理 29
(三)翻译改编工具及操作方法 29
(四)翻译改编注意事项 31
(五)正式测试翻译改编的修订 34
四、体会与启示 41
(一)与时俱进的试题 41
(二)规范的翻译改编流程 41
(三)严格的试题筛选标准 42
(四)协商的工作机制 42
第三章 机考测试系统 43
一、计算机诊断程序 43
(一)计算机诊断程序操作简述 44
(二)PISA2015中国国家中心在试测阶段的检测工作 48
(三)PISA2015中国国家中心在正式测试阶段的检测工作 50
二、学生机考系统 52
(一)PISA2015试测阶段的学生机考系统 53
(二)正式测试阶段的学生机考系统 61
三、体会与启示 68
(一)关于计算机化考试的宣传和引导 68
(二)关于计算机化考试的管理 69
(三)关于信息化时代的大数据 70
第四章 阅卷编码 71
一、阅卷编码的理念 71
(一)充分理解学生的作答思路,进行有利推断 71
(二)忽略微差错,发现闪光点 72
(三)矛盾要素和不相关要素 72
二、主观题编码设计 73
(一)分数等级标签 73
(二)代码编号 74
三、关于工作坊材料的说明 75
四、本国样例的说明 75
五、其他资料 75
六、多步骤的编码解决方案 75
(一)严格忠实于编码指南 76
(二)咨询培训专家 76
(三)国际咨询和仲裁 76
七、试测阅卷编码 76
(一)测试工具箱整理 77
(二)阅卷编码前期准备 79
(三)纸笔测试阅卷编码过程 80
八、试测机考编码流程 82
(一)数据流转 82
(二)编码员编号和数据拆分 84
(三)PDF文件 84
(四)编码流程 85
(五)质量检验 86
九、正式测试机考编码 88
(一)样例更新 88
(二)编码员分组 90
(三)编码质量监控 91
(四)PISA正式测试质量监控操作规范 94
十、职业编码及学科编码 94
(一)职业编码依据 96
(二)职业编码人员 97
(三)职业编码工作流程 97
(四)科学课程名称编码 101
十一、体会与启示 102
(一)理念上从传统的评分提升到现代的编码 102
(二)在不同省份设置共同作答组,监控各省份的阅卷质量 103
(三)充分借助信息技术,更大程度发挥网上阅卷的潜在优势 103
第五章 学校、教师和学生问卷 104
一、PISA2015问卷设计 104
二、PISA试测问卷的模块主题 104
(一)优先关注模块 105
(二)中度关注模块 107
(三)剩余模块 107
三、问卷的翻译改编 108
(一)PISA2015问卷的基本情况 108
(二)问卷的翻译改编 109
四、测试实施——在线问卷的作答 119
(一)学校问卷、教师问卷作答账号管理 119
(二)监控在线问卷作答进展 120
五、体会与启示 121
(一)高效的管理运行模式 121
(二)系统的信息收集分析 122
第六章 PISA2015考务管理 123
一、材料的改编、翻译和印刷 123
(一)改编 123
(二)翻译 124
(三)印刷 124
二、考务人员 126
(一)学校协调主任 126
(二)测试主任 127
(三)IT人员 128
三、考务培训 128
四、测试实施 130
(一)测试材料的制作与运送 130
(二)测试前一天布置机房 130
(三)时间安排 131
(四)实施过程 132
五、PISA质量监控 133
(一)任命质量监控员 133
(二)确定质量监控校 134
(三)质量监控员工作内容 135
六、PISA2015国家中心值班 136
七、材料整理和数据录入 137
(一)材料整理 137
(二)数据录入 137
八、体会与启示 137
第七章 PISA数据管理 139
一、前期准备 139
二、检查编码手册 140
三、测试DME 143
四、导入机考数据 144
五、导入其他数据 146
六、录入数据 147
七、克隆与合并数据库 147
八、校验与提交数据 148
九、体会与启示 150
第八章 广东省PISA2015测试实践 152
一、广东省概况 152
二、广东省PISA2015实施组织机构 154
三、试测情况 154
(一)试测的抽样 154
(二)试测抽样中遇到的问题及解决办法 159
(三)试测的组织与实施 160
(四)试测结果分析 162
四、正式测试情况 165
(一)正式测试的抽样 165
(二)正式测试抽样中遇到的问题及解决办法 170
(三)正式测试的组织、培训与协调 170
(四)正式测试的实施 172
(五)正式测试的其他相关情况 174
五、体会与启示 174
(一)缺考问题 175
(二)PISA研究 175
(三)信息技术装备 175
附录1 PISA2015学生信息表 177
附录2 PISA2015正式测试抽样数据收集FAQ 179
附录3 PISA2015学校协调主任工作简述 181
附录4 PISA2015测试主任工作简述 182
附录5 PISA2015正式测试常见问题解答(FAQ) 186
附录6 PISA2015职业编码手册 188
一、职业大类、中类、小类、细类 188
1管理人员 188
2专业人员 195
3技术员及助理专业人员 212
4事务支持人员 227
5服务及销售工作人员 233
6农业、林业和渔业技术工人 240
7工艺及有关行业工人 244
8机械设备操作工人及组装工人 258
9简单劳动职业人员 267
0军人 273
二、编码思路与原则 276
三、相似职业的区别 277
四、职业编码举例 279