Summary

Sistema de teste adaptativo computadorizado de avaliação funcional do curso

Published: January 07, 2019
doi:

Summary

Aqui, apresentamos um protocolo para desenvolver o sistema de teste adaptativo informatizado da avaliação funcional do curso (CAT-FAS). Os CAT-FAS simultaneamente podem avaliar quatro funções (duas funções motoras [extremidades superiores e inferiores], controle postural e atividades básicas de vida diária) com suficiente confiabilidade e eficiência administrativa.

Abstract

O sistema informatizado de teste adaptativo da avaliação funcional do curso (CAT-FAS) simultaneamente pode avaliar quatro funções (funções motoras das extremidades superiores e inferiores, controle postural e atividades básicas de vida diária) com suficiente confiabilidade e eficiência administrativa. CAT, um método de medição moderno, visa proporcionar uma estimativa confiável do nível da o examinando função rapidamente. CAT administra apenas alguns itens cujas dificuldades item coincidir com o nível do examinando uma função e, assim, os itens administrados de gato podem fornecer informações suficientes para estimar confiavelmente a nível do examinando de função em um curto espaço de tempo. Os CAT-FAS foi desenvolvido através de quatro etapas: (1) determinar o item de banco, (2) determinar as regras de parada, (3) Validando os CAT-FAS e (4) estabelecer uma plataforma de administração on-line. Os resultados deste estudo indicam que o CAT-FAS tem suficiente eficiência administrativa (número médio de itens = 8,5) e confiabilidade (grupo nível de confiabilidade de Rasch: 0,88 – 0.93; nível de indivíduo Rasch confiabilidade: ≥70% dos pacientes tinham confiabilidade Rasch escore ≥ 0.90) para avaliar simultaneamente quatro funções em pacientes com acidente vascular cerebral. Além disso, porque os gato-FAS é um teste baseado em computador, os CAT-FAS tem três vantagens adicionais: o cálculo automático de partituras, o imediato de armazenamento de dados e a fácil exportação de dados. Estas vantagens do CAT-FAS será benéficas para gerenciamento de dados para clínicos e investigadores.

Introduction

Disfunções das extremidades superiores e inferiores (UE e LE), controle postural e atividades básicas de vida diária (BADL) são grandes sequelas de acidente vascular cerebral1,2,3. A avaliação dessas quatro funções em pacientes com AVC é fundamental para os clínicos avaliar os níveis dos pacientes de disfunções, definir planos e objetivos do tratamento e monitorar as trajetórias longitudinais dessas funções.

A avaliação de Fugl-Meyer (FM),4 a escala de Avaliação Postural para acidente vascular cerebral pacientes (PASS),5 e o índice de Barthel (BI)6 têm boas propriedades psicométricas para avaliar as funções motoras, controle postural e BADL, UE/LE respectivamente, em pacientes com AVC7,8,9. No entanto, o total de 72 itens a partir destas três medidas impede a viabilidade de avaliar todas as três medidas dentro de uma sessão terapêutica limitada no tempo. Um método mais eficiente de teste é garantido. Testes adaptativos computadorizado (CAT) são um método de medição moderno. Em comparação com métodos convencionais de medição, CAT fornece uma estimativa mais confiável do nível da o examinando função em muito menos tempo10,11,12. Em métodos de medição convencional, cada examinando recebe a mesma forma de teste (ou item define), em que muitos itens são muito difíceis ou muito fácil para o examinando. Esses itens fornecem informações limitadas para estimar o nível da o examinando função e consomem tempo para examinandos. Em contraste, no CAT, cada examinando Obtém um conjunto de item costurado, em que o nível de dificuldade dos itens selecionados cumpre a função de nível do examinando. Porque estes itens são adaptados para esse determinado examinando, CAT pode fornecer uma estimativa mais confiável do nível da o examinando função com menos itens e, assim, em muito menos tempo. As etapas de desenvolvimento de CAT são mostradas em arquivo complementar 1: Apêndice 1.

Porque CAT promete avaliações confiáveis e eficientes, os CAT-FAS foi desenvolvido para melhorar a eficiência administrativa das três medidas anteriormente utilizadas (FM, PASS e BI)13. Este trabalho descreve o desenvolvimento e administração do CAT-FAS. Este protocolo fornece informações para pesquisadores desenvolver seus gatos e potenciais utilizadores do CAT-FAS para administrá-lo. Também abordamos os pontos fortes e fracos do CAT-FAS.

Protocol

Este protocolo de estudo foi aprovado por um Conselho de revisão institucional local, e todos os pacientes deram consentimento informado. 1. desenvolvimento do CAT-FAS Recuperar o secundário e dados criptografados de FAS estudar14 para realizar simulações (complementar arquivo 1: anexo 2).Nota: No estudo, um total de 301 pacientes foram recrutados froma ala de reabilitação de um centro médico e avaliados em 14 d após início do cur…

Representative Results

Os resultados da simulação mostraram que os conjuntos de 10 candidatos de impedir regras tinham suficiente confiabilidade média de Rasch (0.86 – 0,95) e variou de eficiência administrativa (o número médio de itens = 6,4-17,5). Considerando o trade-off entre a confiabilidade e a eficiência administrativa, o conjunto de LRI < 0,010 foi selecionado como o conjunto ideal de parar as regras para as CAT-FAS por causa de sua confiabilidade suficiente de Rasch média (0,88…

Discussion

Os resultados aqui apresentados mostraram que o CAT-FAS administrada cerca de 10% dos itens nos testes originais (o número médio de itens usados em CAT-FAS: 8.5 itens vs os testes originais: 72 itens). Estes resultados indicam que o CAT-FAS tem boa eficiência administrativa. Os resultados foram em consonância com estudos anteriores, que relataram que um gato administrada apenas cerca de 10 itens ou menos para avaliar a função social, o equilíbrio ou atividades da vida diária em pacientes com AVC<sup clas…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Este estudo foi suportado por bolsas de investigação do Ministério da ciência e tecnologia (105-2314-B-002-015-MY3).

Materials

Computer Any Compatible with software listed below
MATLAB software The MathWorks Inc. http://www.mathworks.com/products/matlab/ Numerical computing software, which is used in the Protocol Section 1 (Step 1.3)
Java Development Kit Oracle https://www.oracle.com/java/ Programming language, which is used in the Protocol Section 1 (Step 1.5)

References

  1. Kim, S. S., Lee, H. J., You, Y. Y. Effects of ankle strengthening exercises combined with motor imagery training on the timed up and go test score and weight bearing ratio in stroke patients. Journal of Physical Therapy Science. 27 (7), 2303-2305 (2015).
  2. Langhorne, P., Coupar, F., Pollock, A. Motor recovery after stroke: A systematic review. Lancet Neurology. 8 (8), 741-754 (2009).
  3. Lum, P. S., Burgar, C. G., Shor, P. C., Majmundar, M., Van der Loos, M. Robot-assisted movement training compared with conventional therapy techniques for the rehabilitation of upper-limb motor function after stroke. Archives of Physical Medicine and Rehabilitation. 83 (7), 952-959 (2002).
  4. Fugl-Meyer, A. R., Jaasko, L., Leyman, I., Olsson, S., Steglind, S. The post-stroke hemiplegic patient 1: A method for evaluation of physical performance. Scandinavian Journal of Rehabilitation Medicine. 7 (1), 13-31 (1975).
  5. Benaim, C., Perennou, D. A., Villy, J., Rousseaux, M., Pelissier, J. Y. Validation of a standardized assessment of postural control in stroke patients: The Postural Assessment Scale for Stroke Patients (PASS). Stroke. 30 (9), 1862-1868 (1999).
  6. Mahoney, F. I., Barthel, D. W. Functional Evaluation: The Barthel Index. Maryland State Medical Journal. 14, 61-65 (1965).
  7. Duffy, L., Gajree, S., Langhorne, P., Stott, D. J., Quinn, T. J. Reliability (inter-rater agreement) of the Barthel Index for assessment of stroke survivors: Systematic review and meta-analysis. Stroke. 44 (2), 462-468 (2013).
  8. Lin, J. H., Hsueh, I. P., Sheu, C. F., Hsieh, C. L. Psychometric properties of the sensory scale of the Fugl-Meyer Assessment in stroke patients. Clinical Rehabilitation. 18 (4), 391-397 (2004).
  9. Mao, H. F., Hsueh, I. P., Tang, P. F., Sheu, C. F., Hsieh, C. L. Analysis and comparison of the psychometric properties of three balance measures for stroke patients. Stroke. 33 (4), 1022-1027 (2002).
  10. Hsueh, I. P., et al. Development of a computerized adaptive test for assessing balance function in patients with stroke. Physical Therapy. 90 (9), 1336-1344 (2010).
  11. Hsueh, I. P., Chen, J. H., Wang, C. H., Hou, W. H., Hsieh, C. L. Development of a computerized adaptive test for assessing activities of daily living in outpatients with stroke. Physical Therapy. 93 (5), 681-693 (2013).
  12. Wong, A. W., Heinemann, A. W., Miskovic, A., Semik, P., Snyder, T. M. Feasibility of computerized adaptive testing for collection of patient-reported outcomes after inpatient rehabilitation. Archives of Physical Medicine and Rehabilitation. 95 (5), 882-891 (2014).
  13. Lin, G. H., Huang, Y. J., Lee, S. C., Huang, S. L., Hsieh, C. L. Development of a computerized adaptive testing system of the Functional Assessment of Stroke. Archives of Physical Medicine and Rehabilitation. 99 (4), 676-683 (2017).
  14. Wang, Y. L., Lin, G. H., Yi-Jing, H., Chen, M. H., Hsieh, C. L. Refining three measures to construct an efficient Functional Assessment of Stroke. Stroke. 48 (6), 1630-1635 (2017).
  15. Adams, R. J., Wilson, M., Wang, W. C. The multidimensional random coefficients multinomial logit model. Applied Psychological Measurement. 21 (1), 1-23 (1997).
  16. Masters, G. N. A Rasch model for partial credit scoring. Psychometrika. 47 (2), 149-174 (1982).
  17. Wang, W. C., Chen, P. H. Implementation and measurement efficiency of multidimensional computerized adaptive testing. Applied Psychological Measurement. 28 (5), 295-316 (2004).
  18. Mulder, J., Van der Linden, W. J. Multidimensional adaptive testing with optimal design criteria for item selection. Psychometrika. 74 (2), 273-296 (2009).
  19. Segall, D. O. General ability measurement: An application of multidimensional item response theory. Psychometrika. 66 (1), 79-97 (2001).
  20. Lee, S. C., et al. Development of a social functioning assessment using computerized adaptive testing for patients with stroke. Archives of Physical Medicine and Rehabilitation. 99 (2), 306-313 (2018).
  21. Paap, M. C. S., et al. Measuring patient-reported outcomes adaptively: Multidimensionality matters!. Applied Psychological Measurement. 42 (5), 327-342 (2018).
  22. Paap, M. C. S., Kroeze, K. A., Terwee, C. B., van der Palen, J., Veldkamp, B. P. Item usage in a multidimensional computerized adaptive test (MCAT) measuring health-related quality of life. Quality of Life Research. 26 (11), 2909-2918 (2017).

Play Video

Cite This Article
Lin, G., Huang, Y., Chou, Y., Chiang, H., Hsieh, C. Computerized Adaptive Testing System of Functional Assessment of Stroke. J. Vis. Exp. (143), e58137, doi:10.3791/58137 (2019).

View Video