从基于log数据的坚持性和问卷调查得到的坚持性指数比较可以看出，这些国家（地区）基于log数据的坚持性评价都是正值。统计结果发现，基于log数据得出的坚持性指数解释率显著高于问卷得出的坚持性指数，在各国都有显著性，如附表5-17所示。表5-21基于log数据和问卷调查的坚持性指数解释率比较同时数据分析也表明，并不是只要坚持就能买到合适的车票，认知水平也很重要，坚持很久仍然买错的学生也不少。......
2023-10-19
提取基于计算机日志文件的PISA问题解决能力指标
【摘要】：学生答题过程的计算机日志文件记录了学生在计算机上的每一次操作，是学生“思维的痕迹”，从中可以提取出有效的问题解决过程指标。将这些指标综合起来分析，并且在加入ESCS和性别作为控制变量的情况下，VOTAT策略指数、计划性指数、探究完全性指数仍然有显著作用，并且这些因素的作用都超过了ESCS的作用，说明这些因素之间有相对的独立性，可以作为评价问题解决过程的有效指标。
学生答题过程的计算机日志文件记录了学生在计算机上的每一次操作，是学生“思维的痕迹”，从中可以提取出有效的问题解决过程指标。根据采用的统计方法不同，本研究提取的指标主要分为两类：一类是简单指标，运用汇总或比例计算就可以得出；另一类是量尺指标（或者也可以称为复杂指标），需要将简单指标转化为标准分数。本书分析的简单指标包括学生与计算机互动的次数（包括看素材次数）、互动的有效性、第一反应时间（读题和初步思考的时间、计划时间）、执行时间、选择的最优性、运用VOTAT策略（控制变量策略）的次数和系统性等指标。量尺指标有VOTAT策略指数、计划性指数、探究完全性指数、坚持性指数。上面提到的简单指标在大多数国家（地区）与问题解决结果有显著正相关，但对成绩作用更为显著的是量尺指标，上面提到的4个量尺指标单独来看，对问题解决成绩都有显著的作用。将这些指标综合起来分析，并且在加入ESCS和性别作为控制变量的情况下，VOTAT策略指数、计划性指数、探究完全性指数仍然有显著作用，并且这些因素的作用都超过了ESCS的作用，说明这些因素之间有相对的独立性，可以作为评价问题解决过程的有效指标。由于样题数量有局限性，这些指标不是全覆盖的，但是研究证明基于log数据分析来提取学生问题解决的过程指标不仅有可操作性，而且对结果有较高的解释率，可以解开问题解决思维过程的“黑箱”。
利用log数据可以客观地评价学生是否有解决问题的动机以及学生的坚持性（毅力）等非认知因素，如果学生在计算机开始呈现题目后没有经过任何操作就直接结束，或者答题时间少于阅读题目所需要的最低时间，就可以认为这些学生缺乏答题的动机；而学生经过多次探究及反复修改才提交答案则反映了学生的坚持性。从目前可获得的文献中未见利用PISA log数据开展的学生动机和坚持性研究。本研究用实证数据说明，运用log数据能够甄别出缺乏动机的学生，能够评价学生的坚持性，所得出的坚持性指数对问题解决成绩的解释率显著高于问卷调查所获得的坚持性指数，有效地克服了问卷调查中学生主观报告的偏差，为运用计算机生成的过程指标来评价非认知因素提供了可行的方案实例。(www.chuimin.cn)
运用统计分析模型对这些指标开展综合分析，可以生成多方面的统计指标，包括平均数、百分比、回归系数、解释率、胜算比、潜在思维方式分类等。
有关思维的痕迹：基于LOG数据的PISA问题解决能力研究的文章
- 详细阅读
-
基于能力的课程：LOG数据揭示PISA问题解详细阅读
这一改革与PISA问题解决能力的要求完全一致，为新加坡在PISA问题解决中的优异表现作出了解释。从基于知识和基于效率的课程向基于能力的课程转变有多种途径，主要有根据核心素养培养要求重塑课程，将问题解决能力融入学科课程，开设综合活动课程等。......
2023-10-19
-
基于LOG数据研究PISA问题解决能力详细阅读
它表示在很多情况下，问题不会等待解决问题的人和他的决定，而是会随时间而自己改变。动态问题需要问题解决者考虑“时间”因素。内部因素包括解决问题所需的知识的广度，问题解决者的达成水平和领域知识的水平。（二）复杂问题解决的欧洲观点欧洲学派尽管都采用实验室模拟的办法来研究复杂问题解决，但实际上有两个在理论和方法上不同的分支。......
2023-10-19
-
LOG数据揭示基于PISA的问题解决能力详细阅读
“交通”单元第2题的题目要求是，已知从钻石镇去爱因斯坦镇的最快行程需时31分钟，要求学生在地图上把这段行程标示出来，考查的主要认知过程是“计划和执行”。然后根据学生的答题行为对学生的潜在类别进行分析。表5-2交通单元第2题学生思维方式分类（续表）各国平均而言，“启发式”学生在这道题目上的正确率最高，问题解决平均成绩也最高，“传统式”学生正确率和平均成绩最低。......
2023-10-19
-
基于LOG数据的PISA问题解决能力研究详细阅读
PISA 2012计算机化问题解决总的题量为80分钟，共16个单元42道试题，这些题目分为4个单元组，每个单元组的测试时间为20分钟。互动问题中，有4个单元8道试题是基于线性结构方程的微动态系统、有6个单元19道试题是基于有限状态机的微状态机底层结构。PISA中采用的微动态系统将输入和输出变量都控制在3个之内。表3-3PISA 2012正式测试互动问题解决框架分类......
2023-10-19
-
研究基于LOG数据的PISA问题解决能力详细阅读
澳门大学Man-kai Ieong等[2]研究了车票第1题上解决问题过程的最优性，他们比较了前10名的国家（地区），发现澳门只有8.4%的学生用5步买到了正确的车票。中国香港、中国澳门和中国台北在这道题上做出最优选择的学生比例分别为23.8%、8.4%、24.2%，可以说沪、港、澳、台四地最优性都不高，可能与这4个地区的地铁售票机系统与试题呈现的系统差异较大造成的。表5-4“车票”第1题部分国家（地区）做出最优选择的学生比例......
2023-10-19
-
PISA问题解决能力：基于LOG数据的国际比详细阅读
控制变量策略，即每次只改变一个变量的策略，简称VOTAT策略，是互动问题解决中重要的认知策略。PISA 2012公开样题“室温控制”第1题中用到这一策略，题目如图5-10所示，整个单元的试题、编码（评分）标准以及计算机log文件编码说明见附录2。利用学生在这道题目过程中计算机自动记录的log文件，来了解学生运用VOTAT策略的过程具有典型意义，因为凡是以线性结构方程为底层结构的试题都与此类似，PISA 2012问题解决中类似的试题有4个单元8道题。......
2023-10-19
-
基于LOG数据的问题解决能力评价指标详细阅读
在开展计算机化测试后，动态问题解决或复杂问题解决过程可以利用计算机后台保存的log文件对整个解题过程、知识获取阶段、知识应用阶段分别进行评价。从上述指标可以看出，目前对问题解决过程指标的分析主要局限在时间、步骤等基本统计上，综合的评价指标较少，并且指标比较分散，没有系统的分析框架。......
2023-10-19
相关推荐