Manual de Psicometria: Técnicas e Instrumentos de Avaliação

TEREZA CRISTINA ERTHAL MANUAL DE PSICOMETRIA 8ª edição ZAHAR MANUAL DE PSICOMETRIA PORTUGUESE EDITION Tereza Cristina Erthal MANUAL DE Psicometria 8ª edição ZAHAR 3 TÉCNICAS E INSTRUMENTOS DE AVALIAÇÃO A avaliação é a atribuição de qualidade aos valores numéricos obtidos através da medida Envolve sempre um julgamento de valor A avaliação de indivíduos sem a utilização de técnicas e instrumentos adequados é praticamente impossível quando se pretende avaliar seu comportamento em sua globalidade ou seja em seus domínios cognitivo afetivo e psicomotor Por técnicas de avaliação entendese o método de se obterem as informações desejadas O instrumento de avaliação é o recurso usado para esse fim Ambos devem ser escolhidos cuidadosamente levandose em conta cada caso e cada situação Basicamente existem três técnicas de coleta de informações de acordo com Mediano 1976 observação inquirição e testagem conforme quadro abaixo É o ponto de partida para qualquer estudo científico sendo utilizada como forma de estabelecer ou validar os conhecimentos adquiridos A simples constatação de um fato exatamente como se apresenta ao indivíduo é uma observação Esta porém é uma observação vulgar o meio que o indivíduo tem para adquirir informações a fim de obter maior controle sobre si mesmo e sobre o seu mundo Para que tenha um caráter científico é necessário que se explicitam hipóteses e que a observação seja suscetível à repetição Em linhas gerais tratase de uma técnica que tem por objetivo colher o maior número de informações nas áreas cognitiva afetiva e psicomotora embora a primeira apre sente maiores dificuldades Existem dois tipos de observação científica observação assistemática e observação sistemática A primeira é aquela que se realiza sem qualquer planejamento prévio Sua utilidade reside no fato de existirem comportamentos que só podem ser observados de forma ocasional pois são de difícil controle Podese citar como exemplo o comportamento das pessoas em relação à morte de um ente querido A condição necessária para que se possa efetuar tal observação é atenção absoluta o que Rudio 1983 chama de permanente estado de prontidão A casualidade é sua principal característica e ela só deve ser usada para o caso de estudos exploratórios O segundo tipo é uma observação mais controlada com propósitos previamente determinados Exige planejamento o campo de observação deve ser delimitado e requer a utilização de instrumentos adequados para o seu registro possibilitando o acesso a um nível de sensibilidade que poderia passar despercebido pelo observador O instrumento de observação constituiu uma forma de codificar a informação facilitando a comunicação dos dados e aumentando seu valor heurístico Sua utilização adequada impede o risco de observações puramente subjetivas Os instrumentos de observação mais conhecidos são os registros de comportamento e as escalas de classifica ção Uma vez determinados os indivíduos a situação padronizada e os comportamentos que devem ser observados podese utilizar um registro escrito de um ou mais acontecimentos significativos em relação a determinada hipótese de trabalho Esse registro deve ser realizado sem a intromissão de opiniões ou julgamentos para que não haja o perigo da distorção dos dados Caso o observador deseje expressálas deve fazêlo no final de sua observação em um item à parte Como a observação da conduta se efetua em condições naturais é conhecida pelo nome de anedotário Podem ser registros contínuos em que são lançados todos os comportamentos apresentados por um indivíduo durante um período de tempo ou registros mais quantitativos como os seguintes 1 de evento em que cada ocorrência do comportamento medido gera uma marca 2 de tempo em que se computa o tempo total despendido pelo indivíduo em uma atividade 3 de amostragem de tempo em que se registra o comportamento de um indivíduo em cada ocasião observada de hora em hora por exemplo e 4 de produto em que se computam as consequências de determinada ação como o número de cigarros fumados ou de peças produzidas 312 Escala de Classificação ou Avaliação A escala de avaliação é um dispositivo através do qual se ordenam numa mesma escala aspectos qualitativos dos indivíduos de modo a que esses aspectos possam ter um correspondente numérico O objetivo dessa ordenação é manter com a maior exatidão um intervalo relativamente fixo na graduação das categorias Diante disso deve o avaliador posicionar o objeto julgado na categoria mais aproximada Obtémse assim com este instrumento padronizado uma avaliação qualitativa mais precisa sobre um objeto qualquer A escala de avaliação é um instrumento simples e muito usado na mensuração psicológica Os psicólogos organizacionais utilizamna quando pretendem fazer a avaliação de desempenho dos empregados selecionados pelos seus testes os psicólogos educacionais quando avaliam o rendimento dos alunos os psicólogos clínicos por sua vez empregamna quando querem avaliar o progresso obtido por seus clientes e relacionálo com o êxito de sua técnica Por essa razão daremos maiores informações sobre o assunto a O sistema gráfico é o mais utilizado A avaliação de indivíduos será efetuada em uma série de diferentes traços ou características que aparecem representados em um gráfico A linha significa a amplitude do traço cabendo ao avaliador registrar uma marca no ponto em que julga situarse o observado com respeito àquela característica Traço habilidade manual Ex b A escala de avaliação de múltiplas etapas é a avaliação para cada traço de uma série de categorias contínuas Pode ser uma escala de números ou de adjetivos Exemplo de escala numérica Traço apresentação em público 1 o mais desagradável 2 extremamente desagradável 3 moderadamente desagradável 4 ligeiramente desagradável 5 indiferente 6 ligeiramente agradável 7 moderadamente agradável 8 extremamente agradável 9 o mais agradável sóveis para a tendência a incluir o menor número de traços não há muitas variáveis diferentes para as quais seria importante obter avaliações e ocorre o efeito de halo termo que se refere a um erro cometido nas avaliações dos traços a partir da primeira impressão que o indivíduo avaliado causa no avaliador Esse e outros erros serão mais bem explicados adiante Cada traço por sua vez será subdividido em categorias dimensão da característica medida supondose uma constância de intervalos entre elas O número de categorias varia em média de 15 a 11 Não se deve esquecer que todos os traços de uma mesma escala devem ter o mesmo número de categorias Por vezes incluemse categorias extremas aparentemente desnecessárias Há no entanto razões para incluílas pois essas categorias servem de âncoras capazes de diminuir uma tendência geral dos juízes a evitar categorias extremas deslocando sua avaliação para o centro da escala Esse tipo de correção é chamada efeito de âncora Considerandose que na escala de avaliação o instrumento avaliado é o ser humano e que este é passível de interferir com sua tendenciosidade devese estar atento para que seus erros se reduzam na medida do possível Entre os vários tipos de erros temos o erro de benevolência o erro de severidade o erro de tendência central o efeito ou erro de halo o erro lógico o erro de contraste e o erro de proximidade O erro de benevolência ocorre quando os juízes avaliam os sujeitos acima do que realmente são Normalmente aparece quando já existe um conhecimento prévio dos indivíduos a serem avaliados O erro de severidade ao contrário do anterior ocorre quando o juiz ciente de que o erro de benevolência possa interferir na sua avaliação age de forma contrária acaba sendo severo demais com os sujeitos em questão Quando no entanto os avaliadores não conhecem muito bem os indivíduos tendem a lhes dar uma avaliação central isto é uma avaliação média em relação a todos os traços Esse é o erro de tendência central O efeito de halo ocorre quando os avaliadores se deixem levar pela impressão geral que lhes provoca o indivíduo Se a impressão é boa a avaliação tende a ser positiva muitas vezes incorrendo no erro de benevolência Se é negativa no erro de severidade Em outras ocasiões os avaliadores acreditam que dois traços de um indivíduo possuem uma relação Por julgarem estar logicamente relacionados dão a mesma avaliação a ambos Nesse caso caem no erro do tipo lógico O erro de proximidade é muitas vezes confundido com o erro lógico O avaliador percebe uma relação entre os traços mas dessa vez uma relação hierárquica A avaliação é dada com base num contínuo de intensidade Traços mais próximos apresentam avaliações próximas mas não iguais O erro de contraste é consequência do fato de o avaliador colocarse como ponto de referência para avaliar outras pessoas Avalia os sujeitos de modo exatamente oposto ao que faria com relação a si próprio Para se saber até que ponto esses erros influenciam a avaliação existem procedimentos estatísticos que permitem uma aproximação do valor real de cada avaliação Guilford 1954 elaborou alguns passos para se concretizar isso A seguir daremos um exemplo para que o leitor acompanhe de perto esse processo 3123 Avaliação das Escalas de Avaliação Considerandose A avaliação feita VR valor real da avaliação E erros de avaliação temse que A VR E VR A E 2 Médias dos avaliados por juiz EBa 725 570 155 5 Média das avaliações dos indivíduos no mesmo traço 6 Médias corrigidas por juiz e traço para EB e ECC 313 Sistematização da Observação Lista de perguntas usada para obter informações sobre opiniões e atitudes dos indivíduos Existem três tipos de questionários inventário escala de atitudes e levantamento de opinião tários de personalidade lista de verificação de problemas inventário de traços e de ajustamento O inventário de interesse de Angelini e Angelini é um exemplo do primeiro tipo isto é avalia os interesses profissionais do testando As atitudes aparecem aos pares cada par dentro de um quadrado onde o indivíduo deverá marcar a atividade que mais gostaria de realizar fazendo um círculo ao redor da letra que a acompanha Pode gostar igualmente das duas e fazer um círculo em torno delas ou pode não gostar de nenhuma delas devendo marcar um x na letra correspondente A lista de verificação de problemas apenas identifica os problemas do indivíduo para uma orientação individual Exemplo Mooney Problem Check List De modo geral os inventários apresentam as desvantagens de possuírem itens ambíguos isto é itens que os indivíduos respondem apoiados em seus sentimentos gerais ou autoconceito levam à tendenciosidade e à fraude por usarem respostas como sim não concordo etc e não indagam sobre respostas que dizem respeito a situações bemdefinidas Um bom rapport a utilização de chaves de correção e o método de escolha forçada são alguns meios de que se pode dispor para minimizar tais dificuldades primindo aspectos diversos sejam eles favoráveis ou desfavoráveis São apresentados em folhas separadas a juízes que as distribuem em pilhas geralmente 1 7 9 ou 11 classificandoas desde as mais desfavoráveis colocadas na pilha 1 até as que exprimem juízos mais favoráveis colocadas nas últimas pilhas 7 9 ou 11 É anotada a categoria em que cada juiz classifica cada afirmação A distribuição das afirmações em pilhas constituiu o processo de construção da escala Determinandose o número de vezes em que uma afirmação é colocada na pilha podese estabelecer a média de avaliação efetuada Fazse também uma avaliação da consciência dos julgamentos em cada afirmação Eliminamse as avaliações espalhadas em várias categorias considerandose apenas aquelas em que há um peso considerável de avaliação em uma categoria ou em um número limitado de categorias Uma vez construída dãose a cada indivíduo as pilhas que contêm tais afirmações e pedeselhe que marque aquelas com que concorda ou que acha estarem certas Ex Atitudes dos alunos em relação à sua escola Afirmação Valor da escala 1 Nunca consegui descobrir meu papel no meu grupo escolar 972 2 Nunca tive oportunidade de usar minha experiência durante as aulas 833 3 Em geral sou tratado com respeito 406 4 Sintome integrado ao colégio 318 5 Penso que se deve ensinar todos os alunos utilizandose os melhores métodos de ensino 167 A atitude dos alunos em relação à sua escola será avaliada pelo valor médio das afirmações que eles assinaram Se um aluno assinalasse as afirmações 1 2 e 3 o resultado seria X 927 833 406 2211 3 737 Se a escala fosse de 10 10 o mais favorável e 0 o mais desfavorável uma atitude de 737 estaria mais próxima do lado favorável Na escala do tipo Likert dáse aos sujeitos uma posição e eles devem expressar sua posição sobre a declaração que ela contém Para cada declaração os sujeitos são solicitados a indicar sua atitude em relação a ela e o grau em que são afetados colocando 3 se concordarem fortemente 2 se concordarem moderadamente e 1 se houver apenas uma ligeira concordância O afeto nega ativo é expresso por 1 indicando ligeira concordância 2 discordância moderada e 3 forte discordância Nesse método não há necessidade de juízes na classificação das informações A consistência interna é o único critério para a seleção dos itens A soma dos resultados das respostas escolhidas constituiu a medida de um indivíduo em relação ao conteúdo da escala Ex Escala de atitude em relação ao ensino pago nas universidades Pedese aos sujeitos que assinalem suas respostas segundo a intensidade de sua concordância ou discordância Devem escrever 1 2 3 4 ou 5 ao lado de cada afirmação conforme indicado 1 Concordo plenamente 2 Concordo em parte 3 Não tenho opinião a respeito 4 Discordo em parte 5 Discordo totalmente O pagamento obrigatório proporciona melhores condições de ensino O ensino obrigatoriamente pago é uma violação dos direitos das pessoas nãoprivilegiadas Com o ensino pago o aluno valoriza mais os estudos Há maior organização nas universidades ou escolas onde o ensino é pago A gratuidade do ensino oferece condições para que os alunos se aprimorem mais E assim por diante As escalas de atitude não são instrumentos perfeitos para o registro de sentimentos em relação a alguma coisa mas sem dúvida alguma são melhores do que relatórios elaborados por terceiros sobre a atitude de um indivíduo 3213 Levantamento de Opinião É o uso de um questionário que indaga apenas informações específicas sobre determinado assunto Costuma ser apresentado sob a forma de questão única em que os resultados finais vêm expressos em porcentagens de pessoas que dão cada tipo de resposta Cabe a cada indivíduo marcar com um x a resposta que achar conveniente representada por um sim ou não Ex Qual a sua opinião sobre o seu trabalho 1 Você o conhece bem Sim Não 2 Ele o mantém muito ocupado Sim Não 3 É de muita responsabilidade Sim Não E assim por diante Esse tipo de instrumento é muito útil em empresas quando se quer economizar tempo para obter informações mais simples Em geral é usado anteriormente à entrevista pois facilita a delimitação do tema que deve ser enfocado na mesma 322 Entrevista Tratase mais de um processo de obtenção de informação do que propriamente de um instrumento pois o inquiridor é aquele que ao mesmo tempo efetua o processo e o avalia A entrevista é realizada objetivando diferentes fins Pode ser destinada à pesquisa à psicoterapia ao aconselhamento e ao exame psicológico em geral Existem três formas de realizála Uma delas é a entrevista estruturada também chamada de direta ou sistemática A segunda é a nãoestruturada nãodiretiva ou ainda nãosistemática E a terceira é uma mistura das duas anteriores sendo por isso chamada de entrevista mista a ENTREVISTA NÃOESTRUTURADA As perguntas são de caráter geral objetivando colher o maior número de informações livres sobre o indivíduo A nãodiretividade encoraja o sujeito a se expressar de modo como deseja e os comentários feitos são utilizados pelo entrevistador como forma de avaliar sua opinião e atitude em relação a alguma coisa Apesar de não ter uma ordenação rígida existe um objetivo específico a ser atingido A entrevista nãoestruturada está limitada aos fins que se pretende atingir Dessa forma cabe ao entrevistador intervir quando necessário no sentido de reconduzir o sujeito ao assunto que mais interessa Você pode falar mais sobre esse assunto Ex No caso de uma entrevista clínica Que traz você aqui Com essa pergunta o indivíduo se expressará abertamente sobre o que estiver querendo falar e na direção desejada No caso de uma entrevista de empresa Gostaria que você me falasse um pouco sobre sua experiência profissional até o presente momento b ENTREVISTA ESTRUTURADA É realizada com base em uma série de perguntas que o entrevistador faz Em geral essas perguntas são elabora das anteriormente e as respostas podem variar desde um simples sim ou não até respostas mais elaboradas É algo parecido com um questionário aplicado oralmente que estejam sendo desligados da empresa A diferença entre esta e a primeira é que nesta a personagem principal é a empresa empregadora enquanto na primeira é o indivíduo como pessoa Os dados de significação sintomática são caracterizados por comportamentos que podem estar ligados de alguma forma quer no passado quer no presente à problemática do sujeito Ex instabilidade emocional e criação constante de neologismos obtêm informações acerca do domínio cognitivo afetivo e psicomotor apesar de ser mais útil para a coleta de dados na área cognitiva São dois os tipos de testes 331 Testes NãoPadronizados ou Construídos pelo Professor São instrumentos de que o professor se utiliza para medir a aprendizagem obtida pelos alunos em determinado curso Sabendose que a medida do desempenho escolar é fundamental para uma educação eficiente mediante objetivos preestabelecidos podese mensurar o desempenho escolar a fim de verificar se tais objetivos foram alcançados Nesse caso os testes facilitam as observações que o professor realiza permitindo fazer uma apreciação exata e definitiva São considerados nãopadronizados porque não obedecem às regras específicas na sua fase de construção instruções padronizadas normas de interpretação análise de itens etc 332 Testes Padronizados São instrumentos construídos por especialistas que se utilizam de dados previamente experimentados em grupos normativos A aplicação deve ser realizada de modo rigoroso para que não haja interferência de variáveis no processo São necessárias normas de aplicação de correção e de interpretação fixadas num manual Esses instrumentos são geralmente comercializados