Construcao_de_testes

Prévia do material em texto

Itens	
  textuais
Construção	
  de	
  medidas	
  psicológicas
Prof.	
  Dr.	
  Carlos	
  Henrique	
  Nunes
Universidade	
  Federal	
  de	
  Santa	
  Catarina
1
Procedimentos	
  teóricos
Fase Método Passo Produto
2
O	
  sistema
3
Propriedades	
  /	
  atributos
• Na	
  física:	
  massa,	
  comprimento,	
  cor,	
  temperatura,	
  etc.
• estrutura	
  psicológica	
  →	
  atributos	
  como	
  processos	
  cognitivos,	
  emocionais,	
  
motores,	
  perceptuais,	
  etc
• inteligência	
  como	
  sistema:	
  raciocínio	
  verbal,	
  numérico,	
  espacial,	
  etc.
• qualquer	
  sistema	
  →	
  número	
  ilimitado	
  de	
  propriedades
• a	
  grande	
  dificuldade	
  é	
  passar	
  do	
  objeto	
  psicológico	
  →	
  redução	
  dos	
  aspectos	
  
que	
  se	
  quer	
  estudar	
  →	
  construir	
  um	
  instrumento	
  psicológico
• verificar	
  a	
  capacidade	
  de	
  avaliação	
  quantitativa	
  dessas	
  propriedades
• na	
  criação	
  de	
  uma	
  medida,	
  é	
  essencial	
  a	
  verificação	
  na	
  literatura	
  das	
  
propriedades	
  reconhecidas	
  como	
  relevantes	
  ao	
  construto	
  →	
  não	
  é	
  oriundo	
  
apenas	
  de	
  um	
  esforço	
  individual	
  do	
  pesquisador
4
Níveis	
  de	
  sistemas	
  e	
  propriedades
θ
Inteligência
Geral
Manifestações de
Edução de 
relações
Edução de 
correlatos
θ
Raciocínio 
verbal
Manifestações 
da capacidade 
de reter e 
associar 
significados de 
termos.
Extensão e nível 
associativo
θ
Personalidade
Big-5
Manifestações 
cognitivas, 
emocionais e 
comportamentais 
de ESRNA
θ
Altivez
Manifestações das 
percepções dos 
indivíduos sobre 
suas capacidades 
e qualidades
Am
pl
os
Es
pe
cí
fic
os
Exemplos
5
Dimensionalidade
• dimensionalidade:	
  estrutura	
  interna	
  do	
  construto	
  →	
  é	
  apenas	
  uma	
  
grande	
  dimensão	
  ou	
  pode	
  ser	
  compreendida	
  como	
  tendo	
  subdivisões?
• a	
  resposta	
  vem	
  da	
  teoria	
  ou	
  de	
  estudos	
  empíricos	
  sobre	
  o	
  assunto
• análise	
  fatorial	
  é	
  importante	
  para	
  essa	
  definição:	
  conjuntos	
  de	
  itens	
  
com	
  padrões	
  de	
  respostas	
  bem	
  definidos	
  (correlacionados)
• exemplo:	
  Bem	
  estar	
  subjetivo	
  →	
  pode	
  ser	
  desmembrado	
  em	
  três	
  
componentes:	
  afeto	
  positivo,	
  negativo	
  e	
  satisfação	
  de	
  vida
• esta	
  é	
  a	
  fase	
  mais	
  sensível	
  do	
  estudo:	
  em	
  construtos	
  novos,	
  não	
  há	
  
consenso	
  sobre	
  como	
  são	
  compostos
• teorias	
  incompletas	
  ou	
  inconsistentes	
  levam	
  à	
  construção	
  de	
  
instrumentos	
  ruins
6
Dimensionalidade
7
Dimensionalidade
8
Definições
9
Operacionalização	
  do	
  construto
Fontes	
  de	
  itens
• literatura
• peritos
• categorias	
  comportamentais:	
  definidas	
  pelas	
  definições	
  
operacionais
Exemplos	
  das	
  escalas	
  de	
  personalidade:	
  marcadores	
  de	
  traço,	
  
DSM-­‐IV,	
  literatura	
  sobre	
  construtos	
  associados,	
  outros	
  
instrumentos
10
Critérios	
  para	
  construção	
  de	
  itens
• Comportamental:	
  representar	
  um	
  comportamento,	
  
não	
  uma	
  abstração	
  à	
  ação	
  clara	
  e	
  precisa;
• Simplicidade:	
  representar	
  uma	
  única	
  idéia;	
  não	
  
confundir	
  o	
  respondente;
• Clareza:	
  compreensível	
  até	
  para	
  o	
  estrato	
  mais	
  baixo	
  da	
  
população	
  alvo	
  à	
  frases	
  curtas,	
  s/	
  dupla	
  negação,	
  s/	
  
gírias	
  è	
  o	
  importante	
  é	
  ser	
  claro;
• Relevância:	
  consistente	
  com	
  o	
  traço	
  →	
  pertinência,	
  
saturação,	
  unidimensionalidade;
11
Critérios	
  para	
  construção	
  de	
  itens
• Variedade:	
  a.	
  da	
  linguagem	
  (evitar	
  a	
  monotonia);	
  b.	
  do	
  
sentido	
  dos	
  itens	
  (frases	
  positivas	
  e	
  negativas)
• Modalidade:	
  itens	
  não	
  devem	
  ser	
  extremos:	
  
“infinitamente	
  inteligente”;	
  
• Tipicidade:	
  linguagem	
  compatível	
  com	
  o	
  atributo:	
  
“sentir	
  o	
  peso	
  da	
  idade”,	
  "a	
  consciência	
  pesada"
• Credibilidade:	
  não	
  pode	
  parecer	
  ridículo,	
  
despropositado	
  ou	
  infantil	
  (cuidado	
  com	
  itens	
  clínicos)
12
Sobre	
  o	
  teste
• Amplitude:	
  os	
  itens	
  devem	
  cobrir	
  toda	
  a	
  extensão	
  
do	
  construto
• Equilíbrio:	
  proporções	
  adequadas	
  no	
  contínuo
• Número	
  de	
  itens:	
  	
  um	
  construto	
  independente	
  e	
  
homogêneo	
  deve	
  ter	
  no	
  mínimo	
  20	
  itens
13
Análise	
  teórica	
  dos	
  itens
14
Outros	
  aspectos	
  relevantes
• instruções:	
  devem	
  ser	
  claras,	
  precisas	
  e	
  factíveis
• instruções:	
  devem	
  ser	
  claras	
  e	
  objetivas;	
  informar	
  em	
  linhas	
  gerais	
  sobre	
  o	
  que	
  é	
  o	
  
teste;	
  dar	
  exemplos	
  de	
  como	
  se	
  responde	
  aos	
  itens	
  
• sistemática:	
  individual	
  ou	
  coletiva;	
  auto-­‐relato,	
  execução,	
  etc.
• formato:	
  
• múltipla	
  escolha:	
  problemas	
  →	
  a	
  desejabilidade	
  social	
  deve	
  ser	
  a	
  mesma	
  entre	
  
as	
  alternativas;	
  o	
  número	
  de	
  questões	
  multiplica-­‐se!
• 	
  resposta	
  forçada:	
  possibilidade	
  de	
  chute	
  à	
  20%	
  em	
  5	
  alternativas	
  è	
  quanto	
  
mais	
  opções,	
  mais	
  difícil	
  de	
  construir
• Likert	
  →	
  o	
  número	
  de	
  opções	
  não	
  influencia;	
  formas	
  diferentes	
  de	
  
apresentação:	
  ancoradas	
  nas	
  extremidades,	
  também	
  no	
  meio	
  ou	
  em	
  todas
15
Exemplo
16
Exemplo
17
Análise	
  dos	
  itens	
  por	
  TCT
Escalas	
  likert	
  (planilha	
  consistência	
  interna.xls)
• Correlação	
  item-­‐total
• Distribuição	
  das	
  respostas,	
  média
Itens	
  dicotômicos	
  (planilha	
  dicotomicos.xls)
• Índice	
  de	
  discriminação	
  (bisserial)
• Facilidade
  
rpbis =
Mp - Mq
St
pq
18