Psicometria e construção de testes
Introduzido| English | Significado |
|---|---|
| construct validity/ˈkɒnstrʌkt væˈlɪdɪti/ | validade de construto |
| standard error of measurement/ˈstændəd ˈerə ɒv ˈmeʒəmənt/ | erro padrão da medida |
Uma decisão antes de uma resposta
- Uma escala pode ser perfeitamente consistente e ainda assim medir a coisa errada.
- Seu objetivo: Distinguir tipos de confiabilidade pelo delineamento que os produziu.
Nome a confiabilidade pelo delineamento
- A confiabilidade é consistência, e seu tipo é nomeado pelo delineamento que a produziu: o mesmo teste duas vezes fornece confiabilidade teste-reteste; duas formas semelhantes fornecem confiabilidade de formas paralelas; consistência em uma única sessão (metade-metade, alfa de Cronbach) é consistência interna; acordo entre avaliadores é confiabilidade interavaliador.
- A fórmula Spearman-Brown r_full=2r/(1+r) reescala a correlação da metade do teste para o comprimento total: r=.80 torna-se cerca de .89.
Odd and even halves of a test correlate r=.80. After Spearman-Brown correction, the estimated full-test reliability is about:
Difficulty 1/5 · 100 coins + a small bonus on first completion today
r_full=2r/(1+r)=1.6/1.8≈.89.
Separe os tipos de validade
- A validade é evidência para a interpretação proposta, não do teste em si: a validade de conteúdo pergunta se os itens cobrem o domínio; a validade de critério relaciona escores a um desfecho, simultaneamente ou preditivamente; a validade de construto reúne evidências convergentes e discriminantes de que o escore acompanha o traço pretendido.
- A confiabilidade limita a validade, mas nunca a estabelece: uma escala consistente pode sistematicamente medir outra coisa.
Evidence that a score tracks the intended trait rather than a different one is primarily:
Difficulty 1/5 · 100 coins + a small bonus on first completion today
Construct validity rests on convergent and discriminant evidence; the others are reliability or sampling properties.
Padronize os escores
- Escores padrão reexpressam escores brutos contra um grupo normativo: z=(X−média)/DP, T=50+10z, e QI de desvio Wechsler=100+15z. Um z de +2 resulta em QI 130 e aproximadamente no percentil 98.
- O erro padrão de medição SEM=DP×sqrt(1−r) converte a confiabilidade em uma faixa de escores: DP=15 com r=.91 resulta em SEM=15×sqrt(.09)=4.5.
Dois testes de vocabulário semelhantes aplicados uma semana apartados com r=.90 mostram confiabilidade de formas paralelas, não teste-reteste, porque a forma mudou. Com DP=15 e confiabilidade .91, SEM=4.5 pontos. Um z de +2 corresponde a QI 130. Uma correlação metade-metade de .80 corrige para 2×.80/1.80≈.89 no comprimento total.
A Wechsler score of 130 corresponds to z=____.
Difficulty 1/5 · 100 coins + a small bonus on first completion today
130=100+15z gives z=2.
Analise os itens
- A análise de itens verifica cada item: a dificuldade p é a proporção de respostas corretas, e a discriminação é a correlação item-total.
- Itens que quase todos ou ninguém acertam carregam pouca informação; discriminação negativa sinaliza um item provavelmente mal gabaritado ou enganoso.
Chamar uma correlação de duas formas diferentes de confiabilidade teste-reteste, ou citar alta confiabilidade como se fosse evidência de validade.
Qual resposta se encaixa neste caso?
Distinguir tipos de confiabilidade pelo delineamento que os gerou
A highly reliable test must be valid for its stated purpose.
Difficulty 1/5 · 100 coins + a small bonus on first completion today
Consistency does not establish that the intended interpretation is correct.
Mantenha as distinções
- erro padrão de medição — A dispersão esperada dos escores observados em torno do escore verdadeiro, DP×sqrt(1−r).
- validade de construto — Evidências convergentes e discriminantes de que um escore reflete o traço pretendido.
- Distinguir tipos de confiabilidade pelo delineamento que os produziu.
- Separe evidências de validade de conteúdo, critério e construto.
- Calcule escores padronizados e o erro padrão da medição.
Match each term with its precise meaning in this lesson.
Difficulty 2/5 · 140 coins + a small bonus on first completion today
Keep the distinctions stated in the teaching example.
Put this lesson’s reasoning or event sequence in order.
Difficulty 3/5 · 200 coins + a small bonus on first completion today
The order follows the stated process; check each stage before the next.