项目反应数据库(Item Response Warehouse)介绍

学术   2024-09-24 10:01   北京  

01

数据库介绍

项目反应数据库(Item Response Warehouse, IRW)由斯坦福大学Ben Domingue教授团队创建,旨在为心理测量研究提供丰富的实证数据基础。数据库官网为https://datapages.github.io/irw/ ,目前数据库中已收录373个项目反应数据集,数据来源非常广泛,包括教育测量、心理测评、人格测试等领域。在这篇推送中,我们将详细介绍如何使用该数据库,希望能够帮助心理测量研究者更方便地获取实证数据进行模型测试、假设检验等研究。


02

数据形式
IRW中的数据以长格式储存,即每个被试(id)对每个项目(item)的反应(resp)会被储存为一行:
 
除了反应内容(如,正确/错误 – 标记为1/0; 五点量表中的选择标记为1-5或0-4等),许多数据集中还包含了其他信息,如反应时间(rt),测量日期(date),评分者打分(rater),Q-matrix负载(qmatrix__*),是否受到干预(treatment)等。


03

用途
该数据库为心理测量研究提供了大量的测试数据,它可以帮助研究者探索单数据集所不能检验的研究问题,获得更多的信息。例如,可以利用该数据库探索条目作答中反应正确率和反应时长的平衡,相关研究发表于Journal of Educational and Behavioral Statistics;此外,Domingue等(2024)通过对多个数据的分析,发现3PL模型相比于2PL模型在实际数据中通常并不能带来模型预测能力的提升,相关研究发表在Psychometrika中。更多的基于IRW的研究内容可以参考https://datapages.github.io/irw/research.html。此外,当新的模型被提出并需要实证研究的检验时,IRW也能作为很好的资源帮助研究者方便地获取数据,未来研究者也可以进一步探索使用该数据库进行研究的方向。


04

如何调用数据

1. 获取并设定一个API token

在https://redivis.com/workspace/settings/ 页面中选择Tokens - generate new token即可获得



图中文字下部分灰色区域会出现你生成的token,将其复制下来即可使用。具体设定细节也可以参考该网页:https://apidocs.redivis.com/rest-api/authorization


在获取token后可以直接在R或Python代码中设定环境变量以使用它:

R code

Sys.setenv(REDIVIS_API_TOKEN="YOUR_TOKEN")


Python code

export REDIVIS_API_TOKEN=YOUR_TOKEN

2. 调用数据

R code

# first install redivis package: devtools::install_github("redivis/redivis-r", ref="main")# individual dataset
dataset <- redivis::user("datapages")$dataset("item_response_warehouse")
df <- dataset$table("4thgrade_math_sirt")$to_tibble()# metadata
project <- redivis::user("mikabr")$project("irw")
metadata <- project$table("metadata_output")$to_tibble()


Python Code

import redivis# individual dataset
dataset = redivis.user('datapages').dataset('item_response_warehouse')
df = dataset.table('4thgrade_math_sirt').to_pandas_dataframe()

# metadata
project = redivis.user('mikabr').project('irw')
metadata = project.table('metadata_output').to_pandas_dataframe()


05

如何引用
如果你在文章中需要引用该数据库,可以引用该预印本:
Domingue B, Kanopka K, Braginsky M, Zhang L, Caffrey-Maffei L, Kapoor R, Liu Y, Zhang S, Frank M. (2023). The Item Response Warehouse (IRW), Version 4.0. PsyArXiv(https://osf.io/preprints/psyarxiv/7bd54).

希望该IRW能够帮助心理测量研究者们方便快捷地获取数据,如果大家对该数据库有任何反馈、建议、或者希望作出贡献,非常欢迎联系itemresponsewarehouse@stanford.edu


作者:小张

排版:代新宇


(视频课为各期课程直播全程录屏,报名前可联系邮箱hpa201904@163.com核对确认!)

重磅 | 20万字英文学术写作文库笔记正式发布
(赞赏90元,公众号后台发送支付截图+接收邮箱即可)



荷兰心理统计联盟
心理学与管理学研究者的共享学习平台:分享统计方法、软件操作、研究经验、写作发表,及就业求职资料!
 最新文章