Investigação académica · Desenvolvimento de instrumentos · Psicometria
Desenvolvimento completo de uma escala de literacia em saúde
Não existia nenhum instrumento validado em língua russa para medir a literacia em saúde em crianças em idade escolar. Com a Universidade da Cidade de Moscovo, construímos um em cinco etapas. Atuei como consultora de investigação psicométrica: aconselhei sobre como construir a escala, geri o processo e fiz a análise dos dados e os resultados.
O estudo
Um modelo, depois uma medida.
O modelo conceptual resultou de uma revisão das formas internacionais de medir a literacia em saúde em adolescentes. Foram analisados mais de 50 instrumentos publicados.
O que o instrumento abrange
Três secções funcionais — autonomia, motivação e prática — em quatro temas: higiene, rotina diária, alimentação e atividade física. Ao contrário da maioria dos instrumentos comparáveis, mede também a motivação para cuidar da saúde.
O meu contributo
Fui a consultora de investigação psicométrica. Aconselhei sobre como construir e validar a escala, geri o processo de desenvolvimento, fiz a análise de dados em R e preparei os resultados. Convidámos outros especialistas da área a trabalhar o conteúdo dos itens. Sou a segunda autora do artigo de 2023, com Elena Nekhorosheva e Daria Kasatkina.
Construção
Mais curta, e mais fiável.
Cada piloto eliminou itens fracos e reformulou os pouco claros, com especialistas a rever todas as rondas. Onze escalas preliminares passaram a nove.
Redução de itens
Número de itens em cada fase
Fiabilidade
Alfa de Cronbach de cada escala no instrumento final
Autonomia
Motivação
Prática
Estrutura
Testar a estrutura, fator a fator.
Cada secção foi testada isoladamente e depois em conjunto. O ajustamento foi bom para a autonomia, aceitável para a prática e abaixo dos limiares habituais para a motivação, o que o artigo reporta abertamente.
Análise fatorial confirmatória
O modelo de medição: 54 itens, nove escalas, três secções
Autonomia
Motivação
Prática
Segunda coluna: saturação do fator na sua secção. As escalas de motivação correlacionam-se: amotivação com extrínseca 0,65, extrínseca com intrínseca 0,18, amotivação com intrínseca −0,90. A autonomia e a prática correlacionam-se 0,79.
Níveis
Das pontuações a algo que um professor consegue ler.
As pontuações são a média de seis itens, de 0 a 3. Os padrões de resposta foram agrupados em cinco níveis, com base no conteúdo das respostas e na frequência de cada resposta na amostra.
Estudo final, 1 095 alunos
Proporção de alunos em cada nível, por escala
Lidas em conjunto, as escalas mostram lacunas. Nesta amostra, 63% dos alunos estavam num nível alto ou muito alto nas crenças sobre uma vida saudável, mas 24% estavam nesse nível na prática. O instrumento foi construído para mostrar este tipo de lacuna, e não apenas uma pontuação total.
Num estudo de formação
A mesma escala, usada antes e depois de um programa.
A escala foi também usada num estudo de formação em escolas: cerca de 500 alunos do 5.º ao 10.º ano de escolas de Moscovo, testados duas vezes, com um grupo experimental e um grupo de controlo.
O que os números mostram
No segundo teste, o grupo experimental obteve pontuações mais altas do que o grupo de controlo no acesso à informação, na compreensão e na avaliação crítica. No grupo experimental, nenhuma escala mudou de forma significativa entre os dois testes. No grupo de controlo, as pontuações de confiança, prática, amotivação e motivação extrínseca desceram.
Porque não é prova
Os grupos já diferiam no primeiro teste, e as diferenças nessas três escalas eram então tão grandes ou maiores. Só 228 dos 500 alunos puderam ser emparelhados nos dois testes. Os dados descrevem os grupos; não mostram que o programa tenha causado as diferenças.
Grupo experimental menos grupo de controlo
Diferença na pontuação média em cada teste
Limites
O que a evidência não mostra.
Dito logo à partida, para que o instrumento seja usado para aquilo para que foi construído.
- O instrumento baseia-se em autorrelato escrito, pelo que não consegue medir de forma objetiva o que as crianças conseguem encontrar, compreender ou fazer, e não é adequado a crianças mais novas.
- A secção de motivação ajusta-se aos dados abaixo dos limiares habituais, e os níveis foram definidos em parte a partir da distribuição das respostas desta amostra, e não de normas nacionais.
- A comparação do estudo de formação é descritiva, com grupos desiguais no início e uma grande perda de casos.
Publicação: Nekhorosheva, E. V., Enchikova, E. S., & Kasatkina, D. A. (2023). Multidimensional Health Literacy Scale: Development and Psychometric Properties (Razrabotka i validizatsiya metodiki mnogomernoy otsenki gramotnosti v voprosakh zdorov’ya). Educational Studies Moscow, 1, 126–160. Original em russo. doi.org/10.17323/1814-9545-2023-1-126-160
Onde se situa no método: Etapa 02 · Construir e validar · Etapa 03 · Recolher os dados · Etapa 04 · Analisar