Methodological quality of studies on the measurement properties of neck pain and disability questionnaires: a systematic review

Objective

The aim of this study was to obtain an overview of the methodological quality of studies on the measurement properties of neck pain and disability questionnaires and to describe how well various aspects of the design and statistical analyses of studies on measurement properties are performed.

Methods

A systematic review was performed of published studies on the measurement properties of neck pain and disability questionnaires. Two reviewers independently rated the quality of the studies using the COnsensus-based Standards for the selection of health Measurement INstruments (COSMIN) checklist. This checklist was developed in an international Delphi consensus study.

Results

A total of 47 articles were included on the measurement properties of 8 different questionnaires. The methodological quality of the included studies was adequate on some aspects (often, adequate statistical analyses are used for assessing reliability, measurement error, and construct validity) but can be improved on other aspects. The most important methodological aspects that need to be improved are as follows: assessing unidimensionality in internal consistency analysis, stable patients and similar test conditions in studies on reliability and measurement error, and more emphasis on the relevance and comprehensiveness of the items in content validity studies. Furthermore, it is recommended that studies on construct validity and responsiveness should be based on predefined hypotheses and that better statistical methods should be used in responsiveness studies.

Conclusion

Considering the importance of adequate measurement properties, it is concluded that, in the field of measuring neck pain and disability, there is room for improvement in the methodological quality of studies measurement properties.     

中文版个人糖尿病问卷的信效度研究

目的 翻译并评价中文版个人糖尿病问卷(the personal diabetes questionnaire,PDQ)的信效度.方法 通过系统的前译、回译、文化调试等,引入、修订英文版PDQ;然后对某三甲医院210例糖尿病患者进行问卷调查,评价中文版PDQ信效度.结果 中文版PDQ内在一致性系数为0.831,重测信度为0.801;全部条目的S-CVI/Ave为0.938,各条目CVI为0.800～1.000;问卷各维度与患者糖化血红蛋白(HbAlc)和体重指数(BMI)之间平行效度良好.结论 中文版PDQ信度和效度良好,适用于我国医疗背景下糖尿病自我管理教育效果的测量与评价.     

中文版工作受限情况调查问卷的研制

目的 引进和翻译工作受限情况调查问卷,并对问卷的信度和效度进行检验,探索其在国内的适用性.方法 采用便利抽样方法对300名三级甲等医院的护士进行调查,运用内部一致性信度、重测信度、分半信度、结构效度、校标效度对问卷进行评价.结果 问卷时间管理维度、体力要求维度、脑力从际交往维度、产出要求维度和总问卷的Cronbachα系数分别为0.882、0.864、0.913、0.839和0.922;重测信度为0.857、0.837、0.871、0.803和0.893.探索性因子分析表明,提取的4个因子累计方差贡献率为61.293％;用SF-36做校标,中文版工作受限情况调查问卷得分与SF-36(short form 36 health survey questionnaire)量表的精神健康维度、生理功能维度的Pearson相关系数为-0.24和-0.33.结论 中文版工作受限情况调查问卷的信度和效度良好,可用于测量员工的健康相关工作效率低下情况.     

中国人癌症疼痛评估工具效度与信度的分析

目的 探讨香港钟慧仪博士研制适合中国文化背景的多层面的疼痛评估表,《中国人癌症疼痛评估工具》（Chinese Cancer Pain Assesment tool,CCPAT)的效度与信度。方法 测查319名癌痛患者,其中30名同时用CCPAT和马克盖尔疼痛调查表（The Mcgill Pain Quesionnaire,MPQ) 进行问卷,使用因素分析寻找量度疼痛概念有多少因素;通过集中癌痛组的CCPAT和MPQ有关项目进行相关总分计算测试,确立CCPAT的效度。另抽出30名患者由两名调查员用CCPAT量表同时进行问卷,将CCPAT每一项目作半机率选择,计算其信度系数,然后将其他患者用CCPAT进行问卷,计算其系数的平均值,测试在内部的一致性。结果 测查319名癌痛患者,CCPA与MPQ的变数相连,建立一致的效度,比率信度是0．96,内部一致性系数0．88。结论 验证该癌痛评估工具信度、效度良好。对临床评估癌痛病人的疼痛强度有较好的参考价值。     

中国循证医学／Cochrane中心2006～2008年全国系统评价培训班学员问卷调查结果

目的了解近年来系统评价培训情况,以不断完善中国循证医学／Cochrane中心系统评价培训工作,提高系统评价产出。方法设计量化反馈意见表,收集、整理该中心2006～2008年举办的全国培训班学员反馈意见,作定性与定量分析。结果反馈意见表3年平均回收率为82．6％（138／167）,3年培训总体效果逐年改善。中心先后为北京、上海、四川等21个省（直辖市、自治区）培训系统评价学员167名,其中71．3％（119／167）的学员具有硕士及以上学历。培训前只有10．9％（15／138）的学员选好了系统评价题目,培训后学员普遍认为培训班各专题内容与质量对其有帮助。其中认为对其非常有帮助的专题依次为：Meta分析和系统评价常用统计指标83．7％（113／135）,临床试验选择纳入及数据提取79．4％（108／136）,纳入研究质量评价78．1％（107／137）,资料分析和结果解释72．8％（99／136）等。改进建议主要包括增加上机时间、加强后续指导等。结论3年总体培训效果逐年改善。系统评价已成为研究生完成科研课题的重要研究方法。统计分析、资料选择和数据提取、质量评价和结果解释等是中心培训的优势,也是学员学习的难点。今后培训可适当增加上机时间,加强学员跟踪指导。     

中文版吞咽生命质量量表信度和效度的研究

目的通过对吞咽生命质量量表翻译和编制,进行心理测量学考评,建立适合中国人群使用的吞咽障碍患者生命质量评估专表。 方法参考国内外推荐的量表汉化程序,将英文版吞咽生命质量量表（SWAL-QOL）编译成中文。选取吞咽障碍患者103例为受试者,并采用编译后的中文版SWAL-QOL进行评估。对其测量者间信度、重测信度、同质性信度及内容效度和结构效度进行检测。 结果中文版SWAL-QOL的测量者间信度相关系数范围为0.945～0.990（P<0.01）;重测信度相关系数范围为0.965～0.992（P<0.01）;同质性信度,量表内部一致性指标Cronbachα系数范围为0.708～0.933（P<0.01）;每一个条目与其所在领域的相关系数范围为0.723～0.982（P<0.01）,且每一个条目与其所在维度的相关系数均高于与其他维度的相关系数;在10个维度各个条目的因子分析中提取出10个公因子,累计贡献率为79.029%;10个维度总分的因子分析中提取出2个公因子（吞咽相关生命质量领域和普通生命质量领域）,累计贡献率为54.718%。 结论中文版SWAL-QOL量表具有良好的信度和效度,可以作为一种有效的测量工具对吞咽障碍患者的生命质量进行评估。     

大型外科手术患者主要照护者照护能力问卷的信效度研究

目的研制一套可以科学、客观地测量大型外科手术患者主要照护者照护能力的评价工具。方法以照护能力结构要素为基本框架编制问卷。由专家小组对问卷的内容效度进行评价。对350例大型外科手术患者主要照护者应用问卷进行信效度检验。结果问卷的Cronbachα系数为0.94,折半信度为0.74,内容效度指数为0.89,因子分析提取出5个因子,各条目载荷大于0.6,该5个因子共解释了73.29%的方差,基本证实了其结构效度。结论形成的大型外科手术患者主要照护者照护能力问卷有26个条目组成,具有良好的信度和效度,可应用于护理临床和科研。     

疼痛管理障碍问卷台湾地区版在我国大陆地区癌症患者中应用的信效度评价

目的 评价疼痛管理障碍问卷台湾地区版（BQT）在大陆地区癌症患者中应用的信效度。 方法 选择2015年1-3月在北京市7家医院的363例住院癌症患者进行BQT调查,用Cronbach系数和分半信度检验问卷的信度,用探索性因子分析、内容效度指数分析其效度。 结果 总问卷Cronbach α系数为0.799;经Spearman-Brown公式校正后得到的Equal Length系数为0.770,Guttman分半系数为0.770;11个因子累积贡献率为63.910%;内容效度指数为0.733,均在测量学可接受范围。 结论 BQT具有较好的信效度,可作为大陆地区癌症患者疼痛管理态度的测量工具。     

MOS-SS睡眠量表用于癌痛患者信度和效度的研究

目的:评价中文版MOS-SS睡眠量表(medical outcomes study sleep scale,MOS-SS)在癌痛患者中的信度和效度.方法:60例癌痛患者接受了MOS-SS睡眠量表中文版的测试,其中男性22例,女性38例;患者年龄35～70岁.再选择42例患者1周后进行第2次测试以评估该量表的重测信度.用计算量表的Cronbach'sα系数,各维度测量与重测的相关系数,对其内部一致性信度和重测信度进行分析,然后用因子分析方法评价量表的结构效度.结果:量表中睡眠干扰、睡眠充足度和日间精神状态等维度的Cronbach's α系数分别为0.84、0.88和0.72;各维度的测量与重测相关系数在0.64～0.91之间;因子分析所产生的4个公共因子累计贡献率达81.3％,大多数条目负荷均大于0.6.结论:中文版MOS-SS睡眠量表具有较好的信度和效度,可作为癌痛患者睡眠质量的评估工具.     

广州市重点人群肝吸虫病防治知识调查问卷的信度、效度评价

目的 评价通过德尔菲法形成的"广州市重点人群肝吸虫病防治知识调查问卷"的信度、效度.方法 使用调查问卷对120名广州市肝吸虫病患者、新入职公务员、饮食从业人员进行测试,分层随机抽取其中60例进行重测,计算该问卷的内部一致性、重测信度和结构效度.结果 该问卷Cronbach's系数为0.798,10个指标的Spearman相关系数均＞0.7,P值均＜0.01.对10个指标进行因素分析,产生三个公共因子,它们总共能解释总体方差的60.84%,10个指标因子负荷在0.514～0.841之间,均＞0.40的基本要求.结论 该问卷的信度、效度良好,具有良好的可靠性和有效性,可用于评价广州市肝吸虫病患者、新入职公务员、饮食从业人员肝吸虫病防治知识水平.

Abstract：

Objective To evaluate the reliability and validity on the questionnaire of hepatic distomiasis prevention knowledge for the key crowd in Guangzhou made by Delphi method. Methods The questionnaire of hepatic distomiasis prevention knowledge for the key crowd in Guangzhou was tested in a sample of 120 cases, including liver trematodiasis patient, enters the duty official, the diet jobholders.And the questionnaire was retested randomly in 60 of them after two weeks. By analyzing the results of the questionnaire survey, the reliability and validity were calculated. Results The whole Cronbach's α coefficient of the questionnaire was 0. 798. The correlation coefficient of 10indicators was more than 0. 7, and their P values were all less than 0. 01. Four public factors were produced by factors analyzing of 10 indicators, they could explain 60. 84% of the whole variance. The factor loadings of the 10 indicators were 0. 514 ～0. 841, which were all over 0. 4. Conclusoons The reliability and validity of the questionnaire have reached the demands of standard questionnaire. And it would be practical for hepatic distomiasis health education in hepatic distomiasis patients.     

中国老年人休闲活动调查问卷的编制及信效度检验

目的:初步编制适合中国老年人的休闲活动调查问卷,并进行信效度检验.方法:通过查阅文献确定中国老年人常见的休闲活动类型及维度,并通过专家函询进行初步的条目筛选,通过5名课题组成员和14名老年人对各条目在3个维度的权重评分对比形成共识评分,经过小样本预调查后确定问卷初稿,运用问卷初稿对252名社区老年人进行问卷调查,测定问...     

急性心肌梗死患者知信行评估量表的研制及信效度检验

目的编制并检验急性心肌梗死患者知信行评估量表的信、效度,为评估及评价急性心肌梗死患者知信行状况提供测评工具。方法在查阅文献、专家咨询的基础上编制急性心肌梗死患者知信行评估量表,用方便抽样法对江苏省某三甲医院90名急性心肌梗死患者进行调查,分析该量表的信、效度。结果量表各条目的CVI值为0.85～1.0,整个量表及知、信、行三个分量表全部条目平均CVI值为0.964、0.887、0.967、0.97。对三个分量表进行因子分析,累积解释变异量分别为66.720%、71.405%、64.6%,因子负荷在0.402～0.848,与设计量表的结构基本吻合。各分量表与整个量表总分数间的相关系数为0.771～0.993,且明显高出各分量表的相关系数,这些指标均表明量表结构效度较好。整个量表及三个分量表的Cronbach’sα系数分别为0.959、0.955、0.771、0.761。结论本量表具有较好的稳定性和可靠性,可作为评估或评价急性心肌梗死患者知信行状况较可靠的调查工具。     

两种非语言疼痛评估工具的应用现状分析

目的：通过对两种非语言疼痛评估工具相关研究进行文献分析,为我国非语言疼痛评估工具的选择提供参考。方法运用疼痛评估工具性能评分系统对计算机检索获取的相关文献进行分析。结果共纳入29篇文献,疼痛行为量表( BPS)与重症监护疼痛观察工具( CPOT)平均得分分别为9.20分、9.32分。结论疼痛行为量表( BPS)与重症监护疼痛观察工具( CPOT)逐渐被广泛应用于非语言疼痛患者的疼痛评估,但在不同人群中两者的信效度都存在差异,仍需进一步被验证。     

香港版偏瘫上肢功能测试评定脑卒中患者上肢功能的效度和信度研究

目的探讨香港版偏瘫上肢功能测试(FTHUE-HK)评定脑卒中患者上肢功能的效度和信度。 方法采用FTHUE-HK、Fugl-Meyer量表上肢部分(FMA)和改良巴氏指数(MBI)对42例入选脑卒中患者在1周内进行2次评定,分析其FTHUE-HK、FMA和MBI评定结果,并验证FTHUE-HK的效度;分析2次FTHUE-HK的评定结果,验证FTHUE-HK的重测信度和评估者间信度。 结果2次FTHUE-HK评定结果与FMA总分具有高度相关性（r=0.981、0.982,P<0.01）,且与MBI总分高度相关（r=0.892、0.896,P<0.01）。FTHUE-HK的重测结果和组间结果高度相关,其重测组内相关系数ICC=0.983,组间相关系数ICC=0.985。 结论FTHUE-HK量表评定脑卒中后上肢功能状况具有良好的效度和信度。     

认知障碍疼痛评估量表的编制及其信度和效度的研究

目的 开发认知障碍疼痛评估量表(PACIE)并检验其效度和信度.方法 参考国外的疼痛评估工具,编制认知障碍疼痛评估量表.分别请疼痛、麻醉、护理方面5位专家进行内容效度的评定并修改,由经过统一培训的评定员对认知障碍老年人的疼痛程度进行评估,并临床检验量表的效度和信度.结果 PACIE包括8个条目,内容效度指数为0.978,经因子分析得到2个公因子,累积解释方差的69.008%.2个公因子归为疼痛客观表现因子和疼痛主观表现因子.PACIE总分与NRS得分具有高度相关性,能正确区分认知障碍疼痛患者与认知障碍无疼痛患者.PACIE评定者间组内相关系数为0.954(95%CI为0.812～0.989),量表总分的Cronbach'α为0.851.结论 PACIE具有良好的信度和效度,指标客观,简单有效,可用于认知障碍老年人的疼痛评估.     

中文版库欣综合征患者生活质量问卷的信效度研究

目的评价中文版库欣综合征患者生活质量问卷(Cushing-Qol)的信度和效度。方法采用中文版库欣综合征患者生活质量问卷(Cushing-Qol)和简明健康调查问卷(SF-36)对79名库欣综合征患者进行问卷调查,应用SPSS 19.0软件对问卷的调查结果统计分析,检验问卷的内部一致性和重测信度以及内容效度、结构效度、效标关联效度。结果中文版Cushing-Qol问卷的内部一致性信度Cronbach’sα系数值为0.890,重测信度(2周后)为0.881,各条目的重测信度均大于0.7,折半信度为0.866;该问卷的内容效度指数CVI为0.95,探索性因子分析结果显示问卷为单维度,中文版Cushing-Qol问卷与SF-36量表的相关系数为0.732,表明两者呈强相关。结论中文版Cushing-Qol问卷具有较好的信度和效度,可作为库欣综合征患者生活质量评估的可靠工具应用于临床实践和相关研究中。     

体检人群幽门螺杆菌感染知信行问卷的构建及信效度检验

目的 编制体检人群幽门螺杆菌感染知信行问卷,并进行信效度验证。方法 本研究为横断面调查。依据知信行理论框架,通过回顾性文献研究、质性访谈、课题组讨论等方法自行设计体检人群幽门螺杆菌感染知信行问卷初稿,通过专家咨询法（Delphi法）对问卷的结构和条目进行咨询修订;2021年5—6月对华东疗养院体检中心的186名体检人员进行调查,经问卷信效度调整和验证,形成\"体检人群幽门螺杆菌感染知信行问卷\"终稿。结果 形成的体检人群幽门螺杆菌感染知信行问卷包含3个维度、28个条目,累计方差贡献率为56.271%。问卷I-CVI为0.75~1.00,S-CVI为0.94。问卷知识、态度、行为维度Cronbach α系数分别为0.862、0.901、0.798。问卷总体Cronbach α系数为0.890,折半信度为0.698。问卷的重测信度为0.919,各维度重测信度为0.924、0.917、0.845。结论 体检人群幽门螺杆菌感染知信行问卷具有良好的信效度,可用于体检人群幽门螺杆菌感染知信行水平的测定。     

Development and validation of the Nurse’s Workplace Mental Health Questionnaire

ObjectivesThis study aimed to develop and validate the Nurse’s Workplace Mental Health Questionnaire (NWMHQ).MethodsThe questionnaire was developed based on the two continua model of mental illness and health proposed by Keyes. The initial questionnaire was generated through literature review, two rounds of Delphi expert consultation, followed by a pilot survey. Finally, the reliability and validity of the questionnaire were validated through an online survey of 2,815 registered nurses selected from the public hospitals in 11 provinces from June to July 2020.ResultsThe item-content validity index (I-CVI) of the questionnaire ranged from 0.750 to 1.000 and the average scale-level content validity index (S-CVI/Ave) was 0.906. Cronbach’s α coefficient was 0.948 and test-retest reliability was 0.850. The self-rating depression scale score was negatively related to the NWMHQ score (r = −0.664, P < 0.01). The exploratory factor analysis (EFA) yielded six factors (emotional status, psychological security, positive relationship, resilience, self-efficacy, and subjective well-being), consisting of 32 items. The cumulative variance contribution rate was 65.58%. Confirmatory factor analysis (CFA) showed an acceptable fit.ConclusionThe NWMHQ developed in this study showed good reliability and validity. This questionnaire may help assess the mental health status of nurses and help nursing managers to develop appropriate targeted psychological interventions.     

中文版成人血友病活动能力评估量表的信度和效度研究

目的 检验成人血友病活动能力评估量表(HAL)汉化后的信度和效度。 方法 对原始问卷进行翻译、回译、校对后最终形成HAL中文版,将中文版HAL及中文版关节炎生活质量测量量表2-短卷（AIMS-SF）通过直接发放问卷或邮件形式交由华中科技大学同济医学院附属协和医院血友病诊疗中心登记治疗的成人血友病患者完成填写,共发放150例问卷,搜集到98例有效问卷,应用SPSS 20.0版统计软件对数据进行处理与分析,对问卷内部一致性信度、分半信度、内容效度、结构效度、聚集效度进行检验。 结果 问卷总量表及各维度的Cronbach′s α系数均在0.7以上;总量表的分半信度r=0.970,各维度分半信度均大于0.7;各维度得分与总分及各维度条目得分与该维度得分的Pearson相关系数均大于0.6;问卷各维度间相关系数小于各维度与总量表间的相关系数;HAL总分和AIMS2-SF总分及AIMS2-SF“躯体”维度得分相关性均较好（分别为r=0.640,P<0.01;r=0.576,P<0.01）。 结论 中文版HAL具有良好的信度和效度。     

Triangulation for the assessment of clinical nursing skills: A review of theory, use and methodology

Aim

To review the use and usefulness of the methodological strategy of triangulation in the assessment of skill in nursing curricula.

Design

Systematic search of the literature relevant to the definition and assessment of skill, reliability and validity of assessment methods and triangulation of assessment strategies.

Data sources

One hundred and twenty papers from nursing, medical, educational and social scientific databases, relevant websites and relevant books were reviewed. Forty papers were included based on their relevance to the theory and methodology of clinical skills assessment of health care professionals, particularly nurses. Papers concerning vocational skills assessment and the assessment of skill in school children were excluded.

Results

There is a current imperative within the field of health care professional education to assess clinical skills and to quantify this assessment. However, clinical skill, as it relates to cognition, is poorly defined concept and may be viewed as a quality of the practitioner and, as such, is difficult to quantify. Very many methods of assessing clinical skill have been documented and there are inherent issues in ensuring both reliability and validity of these assessment strategies for clinical skill. This has led commentators to suggest that the process of triangulation should be employed.

Conclusions

The paper fundamentally questions whether the concept of triangulation can be applied to skills assessment without dependable measures of reliability and validity of the tools of assessment and concludes that the process of applying multiple modes of assessment should not be confused with the process of triangulation.