静态分析问题解决只有最后的一个结果，根据解题者达到目标的程度给予满分或部分评分。所以动态问题解决或复杂问题解决可以分别评价知识获取和知识应用两个阶段的结果。尽管后面四种方法没有因果关系图那么常用，但是问题解决者会意识到他们被问到的是获得外显的结构性知识。......
2023-10-19
提高形成性评价质量：基于LOG数据的研究成果
【摘要】：形成性评价强调了运用证据持续改善学生学习的动态过程。因此，形成性评价对塑造学生各方面的素养非常重要，是素养养成的导航器。然而，该指标对各国（地区）学生的数学成绩和问题解决成绩提高的作用是负向的，形成性评价指标未能得到大规模调查的证据支持，说明在这方面的调查设计还有待进一步改进。
形成性评价强调了运用证据持续改善学生学习的动态过程。如前所述，学生问题解决能力和可迁移知识的形成需要长期的实践和练习，如果在学习过程中，学习者能收到关于结果的反馈信息，包括正确与否、错误的类型和性质等，他们获取知识的速度就会加快。
形成性评价形式多样并且渗透在学生学习过程的方方面面，既包括教师在学习者完成挑战性任务时提供反馈和指导，也包括学生自己的质疑、阐述和自我解释，还包括学生参与自我和同伴评估，以及参与讨论交流中获得的评价和反馈。因此，形成性评价对塑造学生各方面的素养非常重要，是素养养成的导航器。如果形成性评价关注互动问题解决能力、关注元认知策略，那么学生的创新思维和批判性思维能力就会得到发展；如果形成性评价关注的是知识的复现和常规问题的解决，那么学生创新思维和批判性思维的发展机会就会受到限制。
Koh[48]对新加坡教师的日常评价工作开展了为期两年的实证研究，他分层抽取了59所新加坡学校4 097份教师提供的评价作业，包括课堂作业、回家作业、专题作业以及教师自编测验，每个教师要求提交高水平、中等水平、低水平作业各4篇，尽可能对应4种作业类型，共计12篇。他根据Newmann的模型和新加坡课堂编码方案，采用9项标准来评估教师布置的作业质量：知识深度、知识批评、知识操控、持续写作、清晰性和组织性、与课堂外的现实世界的联系、支持性任务框架、学生控制和明确的绩效标准；用6项标准来判断学生作业的质量：知识深度、知识批评、知识操控、持续写作、学生写作/答案的质量，以及与课堂以外现实世界的联系。研究有两个发现：第一，教师布置的作业任务与学生表现具有中度到较高的相关性，当教师布置的作业需要高水平的知识批评时，学生工作最有可能表现出高水平的知识批评和知识操控；第二，新加坡教师在课堂评估中仍然以基础知识和基本技能为主，主要评价学生复制事实和程序知识的能力，为高考做准备。
王月芬和张新宇[49]对3万份中国上海市义务教育阶段作业样本进行了分析，发现作业的多样性、选择性、结构性和解释性普遍不理想，较多的作业目标是记忆类的，体现“运用”“综合”等高阶思维水平的作业题目比较少。(www.chuimin.cn)
这些研究说明教师在日常教学中要关注知识深度、知识评价、知识应用、持续写作等有利于培养高阶思维能力的评价。在这方面，我们还有许多可以改进的空间，特别是真实问题评估的任务和量规设计的能力，因为只有转变了评价要求，才能够激发学生的高阶思维能力。
PISA 2012问卷调查了教师在数学课堂上运用形成性评价的情况，包括4个问卷题项：老师告诉我在数学课上的表现情况；老师就我在数学上的强项和弱项给予反馈；每次考试、测验或布置作业前，老师都对我们提出要求；老师会告诉我要怎样做才能把数学学得更好。中国上海数学教师的形成性评价指数为0.203、新加坡为0.293，显著高于OECD平均水平；日本、韩国分别为-0.629和-0.768，显著低于OECD平均水平，说明中国上海数学教师比较重视形成性评价。然而，该指标对各国（地区）学生的数学成绩和问题解决成绩提高的作用是负向的，形成性评价指标未能得到大规模调查的证据支持，说明在这方面的调查设计还有待进一步改进。
有关思维的痕迹：基于LOG数据的PISA问题解决能力研究的文章
- 详细阅读
-
基于LOG数据的问题解决能力评价指标详细阅读
在开展计算机化测试后，动态问题解决或复杂问题解决过程可以利用计算机后台保存的log文件对整个解题过程、知识获取阶段、知识应用阶段分别进行评价。从上述指标可以看出，目前对问题解决过程指标的分析主要局限在时间、步骤等基本统计上，综合的评价指标较少，并且指标比较分散，没有系统的分析框架。......
2023-10-19
-
基于LOG数据的PISA问题解决能力研究成果详细阅读
有人说，比较教育“有着悠长的过去，却只有简短的历史”。比较教育也逐渐在欧美学术界赢得了一席之地，正式成为教育学科中的一个独立分支。历史学方法、因素分析方法成为此阶段引领比较教育发展的主要方法。但在当时，要获取各国的教育统计数据也非易事。1962年，国际教育成就评价协会率先尝试发布了《12个国家13岁儿童的教育成就：一项国际研究的结果》，开创了通过国际测试比较各国教育成就的先河。......
2023-10-19
-
PISA结果统计分析：基于LOG数据的研究成详细阅读
将基于log数据的过程评价指标与PISA问题解决量表成绩和问卷指标结合开展综合分析。主要采用SPSS19.0软件和PISA Replicates插件进行分析，每个数据都按学生权重进行加权，因为PISA采用两阶段抽样，而SPSS是针对简单随机抽样设计的统计软件，所以要采用重复平衡计算法进行80次重复计算以估计标准误。此外，还用IEA IDB Analyzer V3.2.21计算了逻辑回归，用LatentGOLD5.0做了潜在类别分析，用PARSCALE4.1合成了问卷数据的IRT指标。......
2023-10-19
-
PISA问题解决能力：基于LOG数据的研究成详细阅读
新加坡在PISA 2012问题解决能力评价中获得第一，与新加坡在整体的课程设计中重视问题解决能力是分不开的。跨学科的普遍迁移很少发生，所以通用问题解决能力最好与学科学习内容结合起来培养。在这方面，新加坡以问题解决为核心的数学课程设计是一个典型做法。新加坡数学大纲是以培养学生问题解决能力为核心“五角框架”，该框架适用范围从小学一直到高中毕业的新加坡剑桥A水平，为数学的教学、学习和评估确定了方向。......
2023-10-19
-
基于LOG数据的PISA问题解决能力研究详细阅读
PISA 2012计算机化问题解决总的题量为80分钟，共16个单元42道试题，这些题目分为4个单元组，每个单元组的测试时间为20分钟。互动问题中，有4个单元8道试题是基于线性结构方程的微动态系统、有6个单元19道试题是基于有限状态机的微状态机底层结构。PISA中采用的微动态系统将输入和输出变量都控制在3个之内。表3-3PISA 2012正式测试互动问题解决框架分类......
2023-10-19
-
LOG数据揭示基于PISA的问题解决能力详细阅读
“交通”单元第2题的题目要求是，已知从钻石镇去爱因斯坦镇的最快行程需时31分钟，要求学生在地图上把这段行程标示出来，考查的主要认知过程是“计划和执行”。然后根据学生的答题行为对学生的潜在类别进行分析。表5-2交通单元第2题学生思维方式分类（续表）各国平均而言，“启发式”学生在这道题目上的正确率最高，问题解决平均成绩也最高，“传统式”学生正确率和平均成绩最低。......
2023-10-19
-
基于LOG数据研究PISA问题解决能力详细阅读
它表示在很多情况下，问题不会等待解决问题的人和他的决定，而是会随时间而自己改变。动态问题需要问题解决者考虑“时间”因素。内部因素包括解决问题所需的知识的广度，问题解决者的达成水平和领域知识的水平。（二）复杂问题解决的欧洲观点欧洲学派尽管都采用实验室模拟的办法来研究复杂问题解决，但实际上有两个在理论和方法上不同的分支。......
2023-10-19
相关推荐