Analyzing Force Concept Inventory with Item Response Theory
项目反应理论(IRT)是教育测量中常用的一种评估方法,它建立在一个概率框架的假设之上,该框架将学生的内在能力和他们在测试项目上的实际表现联系起来。该模型通过非线性回归过程将学生的原始考试成绩转换为缩放的熟练程度评级,该评级可用于比较不同考试问题获得的结果。项目反应理论还为解决天花板效应和猜测问题提供了一种理论方法。我们应用项目反应理论对力量概念量表进行分析。收集的数据来自2802名学生在俄亥俄州立大学力学入门课程。采用三参数多项选择题项目反应模型对数据进行分析。我们描述了分析的程序,并讨论了结果和解释。分析结果的汇编提供了一个详细的IRT测量指标的FCI,这可以很容易地参考和使用的教师和研究人员的一系列评估应用。
2010-07-30 physics.ed-ph
What do student responses to the car-truck problems tell us? An investigation into two Force Concept Inventory questions
School of Physical Sciences, The Open University(开放大学物理科学学院);School of Physics and Astronomy, University of Edinburgh(爱丁堡大学物理与天文学院)
本研究通过分析六所大学674名学生对修改后的力概念 inventory 的作答,探究学生对两道汽车-卡车问题的回答反映的概念理解,发现学生混淆相关力的概念,部分正确回答掩盖错误概念。
2026-09-02 physics.ed-ph
Development and validation of the Converging Lenses Concept Inventory for middle school physics education
光学是中学物理教育课程中的一个核心领域。在这项研究中,我们提出了一个测试仪器在光学领域的发展和验证,会聚透镜概念量表(CLCI)。它可以作为中学生对会聚透镜成像的概念理解的形成性或总结性评价。CLCI评估:(1)对与会聚透镜相关的基本概念的总体理解,(2)对具体概念的理解,以及(3)学生对该主题的困难倾向。最初的CLCI由16个多项选择题组成;然而,根据各种质量检查,删除了一项。本研究以干扰物分析、经典测验理论、项目反应理论、结构分析、不同测量点学生总成绩分析为定量方法,以学生访谈和专家问卷为定性方法,对CLCI进行了全面验证。定量分析主要是基于一个数据集的N = 318名中学生谁采取了CLCI作为后测。学生访谈进行了七名中学生后,他们被教导的概念会聚透镜。专家调查包括五位专家,他们对单个项目和整个测试进行了评估。分析表明,测试仪器的结果良好到优秀,证实了15项CLCI的有效性及其与上述三个焦点的一致性。
2022-05-19 physics.ed-ph
Exploring pedagogical content knowledge of physics instructors using the force concept inventory
力概念量表(FCI)被教育工作者和物理教育研究者广泛用于评估学生对力学概念的理解。FCI上的许多项目都有很强的干扰物选择,对应于学生在力学方面的替代概念。如果教师在教学设计中没有明确考虑学生的初始知识状态,教学就不可能是有效的。我们讨论的研究涉及FCI评估不同的教学经验的教师的教学内容的知识。对于FCI上的每一个项目,教师被要求确定最常见的错误答案选择的物理入门学生。我们还与一些教师单独讨论了这些反应。然后,我们使用FCI的前测和后测数据,从一个大的人口(约900)的入门学生,以评估与FCI相关的物理教师的教学内容的知识。虽然物理教师,平均而言,表现优于随机猜测在识别入门学生的困难与FCI内容,他们没有发现许多常见的困难,入门物理学生。此外,正确识别学生困难的能力与教师的教学经验无关。
2020-06-25 physics.ed-ph
Exploring Pedagogical Content Knowledge of Physics Instructors and Teaching Assistants Using the Force Concept Inventory
力概念量表(FCI)已被广泛用于评估学生的理解介绍力学概念的各种教育工作者和物理教育研究人员。这种广泛使用的一个原因是,FCI上的许多项目都有很强的干扰物选择,对应于学生在力学方面的替代概念。如果教师不了解物理导论学生的共同替代概念,并在教学设计中明确考虑学生的初始知识状态,则教学不太可能有效。在这里,我们讨论的研究涉及FCI评估教学内容的知识,教师和教学助理(TA)的不同教学经验。对于FCI上的每一个项目,教师和助教被要求识别物理入门学生最常见的错误答案选择。我们还与几位教师单独讨论了这些反应。然后,我们使用FCI的前测和后测数据,从一个大的人口(约900)的入门物理学生,以评估物理教师和助教的教学内容的知识。我们发现,虽然物理教师和助教,平均而言,表现优于随机猜测在确定入门学生的困难与FCI内容,他们没有确定许多常见的困难,入门物理学生,即使在传统的教学。此外,正确识别学生困难的能力与物理教师的教学经验无关。
2013-07-26 physics.ed-ph
Gender Fairness within the Force Concept Inventory
关于力量概念量表(FCI)的测验结构的研究在很大程度上忽略了性别,而关于FCI性别效应(通常被报道为“性别差距”)的研究很少询问测验的结构。这些很少交叉的研究流留下了这样一种可能性,即FCI在结构上可能不适用于所有性别,特别是因为许多报告的结果来自微积分课程,其中75%或更多的学生是男性。我们在考虑心理测量学和性别细分的情况下检查了FCI(同时承认这是二元简化),并发现了几个有问题的问题,这些问题的删除减少了明显的性别差距。我们分析了三个样本(总$N_{pre}=5,391$,$N_{post}=5,769$)寻找性别不对称使用经典测试理论,项目反应理论,和差分项目功能。这些方法的结合突出了六个项目,似乎大大不公平的妇女和两个项目偏向妇女。没有单一的物理概念或先前的经验统一这些问题,但它们与先前研究中确定的问题项目大致一致。在这项研究中,删除所有显著性别不公平的项目,使主要样本中的性别差距减半。我们建议使用FCI的教师报告简化工具分数以及30个项目的分数,并且不使用有偏见的项目分配给学生的学分或其他好处。
2017-09-01 physics.ed-ph
Multi-Dimensional Item Response Theory and the Force Concept Inventory
对部队概念量表(FCI)测验结构的研究,主要采用因子分析、聚类分析等探索性方法。多维项目反应理论(MIRT)提供了一种替代传统的探索性因素分析,它允许统计测试,以确定最佳数量的因素。将MIRT应用于$N=4,716$ FCI后测试的样本,确定9因子解决方案为最佳方案。进一步的分析表明,所确定的因素结构的很大一部分是由于使用问题块的做法和成对的类似问题。将MIRT应用于FCI项的简化集,去除阻塞项和重复项,得到6因子解;然而,这些因子与牛顿力学的一般结构几乎没有关系。FCI的理论模型由专家解构建,并通过将MIRT参数矩阵约束到理论模型来拟合FCI。然后探索理论模型的变化,以确定最佳模型。最佳模型支持牛顿第一定律和第二定律的微分;一维和三维运动学;以及牛顿第二定律的力相加原理。FCI作者建议的模型也是合适的;最佳MIRT模型在统计学上更优。
2018-03-06 physics.ed-ph
QISCIT: A validated concept inventory assessment for quantum information science
本文介绍了一种经11位专家验证、含31个条目的量子信息科学概念入门测试(QISCIT),用于无需大学数学即可评估QIS理解,并探讨了其在教学中的应用。
2025-06-23 physics.ed-ph quant-ph
The Force Concept Inventory Across Continents: Testing Q-Matrix Transferability and Cross-Cultural Differences in Mechanics Reasoning
Australian Catholic University(澳大利亚天主教大学);Technolyceum (Ministry of Education School)(技术学院(教育部学校));University of Johannesburg(约翰内斯堡大学);City University Macau(澳门城市大学);De La Salle University(德拉萨大学)
本研究利用G-DINA模型分析美国与南非学生FCI数据,发现14/30题项存在跨文化DIF,表明Q矩阵需在跨情境部署前验证,以反映真实概念推理差异。
2026-09-21 physics.ed-ph
Assessing Learning in Small Sized Physics Courses
我们描述了一个概念量表的建设,验证和测试的半导体物理介绍课程的物理系提供的本科工程专业的学生。通过设计,这个清单解决了内容知识和通过布卢姆分类法中描述的不同认知过程来解释内容的能力。主要的挑战来自于参加考试的人数很少。由于Rasch模型(又名1PL IRT模型),可用于小样本量,我们描述Rasch建模分析和结果,这个概念量表。
2015-08-26 physics.ed-ph
Student responses to a modified Force Concept Inventory: The Newtonian Mechanics Quiz
School of Physical Sciences, The Open University(开放大学物理科学学院)
本文开发了FCI的改进版NMQ,通过融入多形式后续问题及对应新颖分析,深入探查学生对牛顿定律的概念理解,解决FCI响应选项有限等问题。
2026-09-03 physics.ed-ph
Extending Modified Module Analysis to Include Correct Responses: An Analysis of the Force Concept Inventory
Brewe,Bruun和Bearden首先应用网络分析来理解多项选择工具中不正确的概念物理推理模式,并引入了多项选择响应模块分析(MAMCR)算法。Wells { \it等}提出了一个扩展的算法,允许分析大型数据集称为修改模块分析(MMA)。该方法分析了多项选择题回答的相关矩阵的网络结构。MAMCR和MMA都只能应用于不正确反应的网络。在这项研究中,MMA的扩展进行了探讨,它允许网络分析涉及正确和不正确的反应。该扩展分析了部分相关矩阵的网络结构,而不是相关矩阵。新的算法,称为MMA-P,被应用到FCI和恢复MMA确定的大部分结构。该算法还确定了正确的答案集,需要类似的物理推理在以前的研究报告。除了所有正确和所有不正确的反应组之外,还确定了一些混合正确和不正确反应的反应组。其中一些混合回答组是在出于不正确的原因选择了正确的回答时产生的;其中一些组有助于解释以前为FCI报告的性别不公平现象。
2020-01-23 physics.ed-ph
The Impacts of Learning Assistants on Student Learning of Physics
本研究调查了学习助理(LA)的支持是否以及如何与全国物理课程的学生成绩相关联。配对的学生概念量表分数收集了超过三个学期的3,753名学生,代表69门课程,和40名教师,从17个洛杉矶联盟成员机构。每个参与的学生在每个学期的开始(前)和结束(后)完成了一个在线概念量表。物理学概念量表包括力概念量表(FCI)、电磁学概念调查(CSEM)、力与运动概念评估(FMCE)和简明电磁学评估(BEMA)。在不同的工具中,科恩的d效应量平均高出1.4倍,与没有LA支持的课程相比,LA支持的课程。初步研究结果表明,物理学生的成果可能是最有效的,当LA支持在实验室环境中使用(比没有LA支持高1.9倍)相比,讲座(高1.4倍),背诵(高1.5倍),或未知用途(高1.3倍)。更多的研究将为各学科的LA实施最佳做法提供信息。
2016-07-25 physics.ed-ph
Exploring the Structure of Misconceptions in the Force Concept Inventory with Modified Module Analysis
多项选择反应的模块分析(MAMCR)被应用于大样本的力量概念量表(FCI)的前测和后测反应($N_{pre}=4509$和$N_{post}=4716$),以复制原始MAMCR研究的结果,并了解该数据集的先前研究中报告的性别差异的起源。当MAMCR的结果无法重复时,引入了该方法的修改,即修改模块分析(MMA)。MMA是富有成效的理解结构的不正确的答案在FCI,确定9组不正确的答案的前测和11组后测。在大多数情况下,这些群体可以映射到FCI的作者用来创建该工具的distactors的常见误解。在这些不正确答案组中,6个前测试组和8个后测试组的男女人数相同。两个男性只预测试组消失的指令,而第三个男性只预测试组被确定为男性和女性后的指令。在后测中确定的男女组中,有三组在前测中没有出现。其余被识别的错误答案组并不代表误解,而是与一些FCI项目的阻塞结构有关,其中多个项目与一个共同的词干有关。所确定的群体与先前为该数据集确定的性别不公平项目关系不大,因此,男女学生误解结构的差异无法解释FCI报告的性别差异。
2019-05-15 physics.ed-ph
Translating the Force Concept Inventory in the age of AI
本研究使用GPT-4o翻译力的概念量表,发现LLM虽能高效答题,但在科学术语、语言细微差别及编号格式上仍存在关键翻译问题,表明需人工审查以确保评估准确性。
2025-08-19 physics.ed-ph
Chained computerized adaptive testing for the Force Concept Inventory
Nagoya University(名古屋大学);University of Alaska Fairbanks(阿拉斯加大学费尔班克斯分校);Osaka University(大阪大学);Kyushu University(九州大学)
针对传统前后测的局限性,提出利用附带信息顺序链接每次测试结果的Chain-CAT算法,在保证测试准确性的前提下提高评估频率并缩短测试长度。
2025-10-09 physics.ed-ph
Exploring gender differences in the Force Concept Inventory using a random effects meta-analysis of international studies
本研究通过对38项国际研究的随机效应元分析发现,北美及非北美地区的FCI得分均存在男性更优的中等程度性别差异,且北美地区差距更大,为促进FCI的性别公平提供参考。
2024-03-11 physics.ed-ph
The Flight Physics Concept Inventory: Development of a research-based assessment instrument to enhance learning and teaching
本研究开发了飞行物理概念量表(FliP-CoIn),一种用于改善流体动力学概念学习的多项选择评估工具,并验证了其效度和信度,为教学提供支持。
2025-04-23 physics.data-an physics.ed-ph physics.flu-dyn
In-class vs. online administration of concept inventories and attitudinal assessments
本研究探讨学生在课堂上和在线管理的力量概念量表(FCI),电和磁的概念调查(CSEM),和科罗拉多州的学习态度有关的科学调查(CLASS)的反应的差异。来自三门不同课程的12个部分的近700名物理学生被要求完成与他们的课程相关的概念量表,无论是FCI还是CSEM,以及CLASS。每个学生都被随机分配到课堂上进行一项调查,另一项调查使用由学习助理联盟(LAA)主办的LA支持学生成果(LASSO)系统在线进行。我们研究测试环境和教师的做法如何影响参与率,并确定未来使用的最佳做法。
2017-01-06 physics.ed-ph
An item response theory evaluation of the Light and Spectroscopy Concept Inventory national data set
本文介绍了第一个项目反应理论(IRT)分析的国家数据集介绍,普通教育,大学水平的天文学教学使用光和光谱学概念量表(LSCI)。我们使用学生的教学前和教学后IRT估计能力之间的差异作为学习增益的衡量标准。这一分析提供了比以前的出版物更深入的见解,既LSCI作为一种工具,并在介绍天文学课程的教学和学习的有效性。我们的IRT分析支持经典的测试理论的研究结果,使用LSCI与这一人群。特别是,我们发现,学生在课堂上使用主动学习策略至少25%的时间有平均IRT估计的学习收益,大约是1个logit大于学生在课堂上花更少的时间在主动学习策略。我们还发现,教师谁想要他们的班级实现平均$Δθ= 1$ logit的能力的提高,必须花费至少25%的课堂时间在积极的学习策略。然而,我们的分析也有力地说明了对学生学习缺乏洞察力,这是通过观察学习增益的单一指标(如平均$Δθ$)来揭示的。教育工作者和研究人员还应该检查学生的能力分布前和后的教学,以了解有多少学生实际上实现了他们的能力的提高,以及是否大多数学生已经转移到后的能力显着高于全国平均水平。
2017-10-25 astro-ph.GA physics.ed-ph
Online administration of a reasoning inventory in development
我们正在开发一种新的基于研究的评估(RBA),专注于物理环境中的定量推理-而不是概念理解。由于2019冠状病毒病疫情,我们于2020年春季迅速将澳洲储备银行的管理转移至网上。我们提出了我们的经验与在线,unproctored管理的RBA在发展中的大招生,微积分为基础的,介绍物理课程的学生注册。我们描述了我们试图坚持在有限的时间范围内的最佳实践,并提出了一个初步的分析结果,比较结果从网上管理到早期的结果从人,监督管理。我们包括多项选择/多项响应(MCMR)项目的在线管理的讨论,我们使用的仪器作为一种方式来探索学生推理的多个方面。我们的初步比较表明,RBA的在线和纸质管理之间的差异很小,与其他研究人员以前的工作一致。
2020-07-16 physics.ed-ph
The Impact of Learning Assistants on Inequities in Physics Student Outcomes
本研究探讨如何学习助理(LA)和相关的课程功能与学生学习的不公平性在大学物理入门课程。本研究以16所LA联盟成员院校的67个班级的2,868名物理专业学生为被试,采用概念量表进行前后测。概念量表包括力概念量表、力和运动概念评估以及电和磁的概念调查。我们的分析包括一个多元线性回归模型,检查学生(如性别和种族)和课程水平变量(如存在的LA和概念量表使用)对学生的学习成果(科恩的d效应大小)在整个课堂环境的影响。研究发现,学习助理的存在可以消除或逆转传统的学生之间的学习差距,从占主导地位的和非占主导地位的人口。学生表现的显着差异也发现在整个概念量表。
2017-01-06 physics.ed-ph
Student understanding of time in special relativity: simultaneity and reference frames
本文报告了一项关于学生对狭义相对论中时间概念理解的调查。一系列的研究任务进行了讨论,说明,一步一步,如何学生推理的基本概念的相对性进行了探讨。结果表明,经过标准化教学,所有学术水平的学生都有严重的困难与同时性的相对性和观察者的作用,在惯性参考系。证据表明,许多学生构建了一个概念框架中的绝对一致性和同时性的相对性和谐共存的想法。
2002-07-26 physics.ed-ph
A Pedagogic Approach To Visualization In Special Relativity
狭义相对论通常被视为一个概念上很难的话题,这反过来又很难有效地教授。这项工作的重点是可视化作为一种工具,在中学或大学水平的教学狭义相对论的作用。运用Vergnaud的概念场理论分析了狭义相对论学习过程中的概念化过程,从而找出了这一过程中的“断点”。可视化作为一种教学工具,然后提出纠正这些断点,并在一般情况下支持的概念化过程。这里的主要焦点是洛伦兹-菲茨杰拉德收缩与由于光速有限而导致的光学畸变相结合,最终导致三维中的彭罗斯-特雷尔旋转效应。Python用于创建一系列图像和动画,展示由自发光棒制成的不同物体,以不同的相对论速度被“观察者”看到,教学上可以处理前面提到的断点。
2018-05-22 physics.ed-ph
On the Abuse and Use of Relativistic Mass
本文讨论了速度相关质量的概念,即相对论质量,发现它与狭义相对论的几何表述不一致。这并不是一个新的结果;然而,许多人继续使用这个概念,有些人甚至试图将它作为狭义相对论的基础。有人认为,经常持有的观点,公式的相对论与不相对论质量是等价的是不正确的。作为一个启发式的装置,对第一次学习者的初步研究表明,当概念被引入时,误解可能会发展。为了衡量使用相对论质量的范围和性质,对相对论文献进行了调查。对这个概念的不同的、有时自相矛盾的使用表明,在相对论的表述上缺乏明确的共识。由于几何学是相对论的所有现代表述的核心,因此再次敦促人们放弃在各个层次上使用这个概念。
2005-10-21 physics.ed-ph
Teaching Einsteinian Physics at Schools: Part 1, Models and Analogies for Relativity
爱因斯坦第一项目旨在通过在早期引入现代爱因斯坦的空间和时间,重力和量子概念来改变学校科学教学的范式。尽管这些概念对现代科学和技术至关重要,但学校很少向学生教授这些概念。实施爱因斯坦第一课程的关键是开发适当的模型和类比。本文是三篇论文系列的第一部分。它提出了我们的方法的概念基础,基于简单的物理模型和类比,其次是用于教授广义和狭义相对论概念的模型和类比的详细描述。两篇随附的论文讨论了量子物理学的教学(第2部分)和研究成果(第3部分)。
2017-07-27 physics.ed-ph
The challenge of changing deeply-held student beliefs about the relativity of simultaneity
以往的研究表明,经过标准化教学后,各个学术水平的学生往往会构建一个概念框架,在这个框架中,绝对一致性和一致性的同时性的相对性并存。本文介绍了教学材料的发展和评估,旨在提高学生的狭义相对论的时间概念的理解,同时性的相对性,和惯性参考系中的观察员的作用。从前测和后测的结果来展示的课程,帮助学生加深他们对这些主题的理解的效果。从录音采访和课堂互动的摘录有助于说明激烈的认知冲突,学生遇到的,因为他们被引导面对他们的深层持有的信念与狭义相对论的结果的不相容性。
2002-07-19 physics.ed-ph
Student experiences of virtual reality - a case study in learning special relativity
我们提出了一个学生学习通过使用虚拟现实的研究。一个软件包被用来向学生介绍狭义相对论的概念,在一个类似游戏的环境中,用户体验以近光速旅行的影响。从这个新的角度来看,空间和时间与日常生活中所经历的有很大的不同。这项研究探讨了学生如何在这种环境下工作,以及这些学生如何在狭义相对论的学习中使用这种经验。已采取混合方法的办法来评价在两所大学分别实施一揽子计划的结果。学生们发现模拟是一个积极的学习经验,并描述了其使用后的主题领域不那么抽象。此外,学生们更有能力正确回答与狭义相对论有关的概念问题,在期末考试中观察到了一个小但可衡量的进步。
2009-11-02 physics.ed-ph