Development and Preliminary Sources of Validity Evidence of a Basic Invasive Mechanical Ventilation Knowledge Test

Invasive mechanical ventilation is the ventilatory support technique used in critically ill patients with some type of respiratory failure. The aim of this study was to develop and present sources of validity evidence of a test to assess basic concepts of invasive mechanical ventilation knowledge among physical therapy students. This cross-sectional methodological study of construction and analysis of the sources of validity evidence of a test assessing basic invasive mechanical ventilation knowledge was divided into face and content validation of the test with participation of five expert judges. In order to verify the test usability, a pilot study was carried out with 51 physiotherapy graduation students. In the pilot study, item difficulty index mean and standard deviation, item discrimination index and point-biserial correlation coefficient were 0.46 (SD=0.18), 0.41 (SD= 0.17) and 0.36 (SD=0.16), respectively. In this paper, the basic invasive mechanical ventilation knowledge test preliminary psychometric characteristics were described and showed good preliminary sources of validity evidence through the analysis of face and content validity. Furthermore, the results support the conduct and submission of the test to a refinement in the purpose of exploring the sources of validity evidence through of item internal consistency using Cronbach's Alpha Coefficient and Factor Analysis to obtain stronger sources of validity evidence, so it can be used for evaluation or research. Keywords: Psychometrics. Education. Physical Therapists. Artificial Respiration. Resumo A ventilação mecânica invasiva é a técnica de suporte ventilatório utilizada em pacientes críticos com algum tipo de insuficiência respiratória. O objetivo deste estudo foi desenvolver e apresentar fontes de evidências de validade de um teste para avaliar conceitos básicos de conhecimento sobre ventilação mecânica invasiva entre estudantes de fisioterapia. Este estudo metodológico transversal de construção e análise das fontes de evidências de validade de um teste que avalia o conhecimento básico sobre ventilação mecânica invasiva foi dividido em validação de face e conteúdo do teste com a participação de cinco juízes especialistas. Para verificar a usabilidade do teste, foi realizado um estudo piloto com 51 estudantes de fisioterapia. No estudo piloto, a média e o desvio padrão do índice de dificuldade do item, o índice de discriminação do item e o coeficiente de correlação ponto-bisserial foram 0,46 (DP=0,18), 0,41 (DP=0,17) e 0,36 (DP=0,16), respectivamente. Neste artigo, as características psicométricas preliminares do teste de conhecimento básico sobre ventilação mecânica invasiva foram descritas e mostraram boas fontes preliminares de evidências de validade por meio da análise da validade de face e conteúdo. Além disso, os resultados apoiam a condução e submissão do teste a um refinamento no propósito de explorar as fontes de evidências de validade por meio da consistência interna dos itens usando o Coeficiente Alfa de Cronbach e a Análise Fatorial para obter fontes mais fortes de evidências de validade, para que possa ser usado para avaliação ou pesquisa. Palavras-chave: Psicometria; Fisioterapeutas; Respiração Artificial.