Notícias da avaliação

· Cursos promovidos pelo ISC em 2007 são bem avaliados pelos participantes (Matéria publicada no União em 22/04/2008)

· Anop: exemplo do funcionamento da avaliação educacional (Matéria publicada no União em 11/08/2008)

· ISC realiza pesquisa com os programas de formação 2006 e 2007 (Matéria publicada no União em 19/08/2008)

O que é IMPACT?

Em 1997, foi implantado no Instituto Serzedello Corrêa, por meio de convênio entre o TCU e a Universidade de Brasília - UnB, um modelo integrado de avaliação de Treinamento e Desenvolvimento denominado Impact. A autora desse projeto foi a professora Gardênia Abbad, que, nomeada pela FUB, foi a executora do convênio. Entre outras responsabilidades, Abbad assumiu, na época, a supervisão técnica da implantação do sistema, da coleta, da análise e interpretação dos dados, além da elaboração de relatórios descritivos das avaliações dos cursos constantes dos cronogramas de atividades do ISC (Abbad, 1999:105). Desse trabalho resultou a tese de doutorado da referida professora, defendida em 1999.
 
O objetivo do projeto era propor e testar um modelo teórico de investigação do relacionamento entre variáveis organizacionais, individuais, instrucionais e impacto do treinamento no trabalho. Este modelo é caracterizado pela investigação do poder preditivo de variáveis como características da clientela, qualidade do treinamento e suporte organizacional sobre os três níveis de avaliação de treinamento: reação, aprendizagem e impacto do treinamento no trabalho. Após a coleta de dados para o doutoramento, o ISC entendeu a importância desse trabalho e resolveu dar continuidade a esse modelo de avaliação de T&D.

O citado convênio findou no 1º semestre/98 e a transferência da tecnologia de avaliação pesquisada pela UnB para o Instituto ocorreu no 2º semestre do mesmo ano. Desde então, o ISC passou a avaliar todas as suas ações educacionais, adaptando a pesquisa acadêmica realizada pela UnB às peculiaridades do Tribunal. Atualmente trabalhamos apenas com os níveis reação e impacto.

IMPACT - Modelo Integrado de Avaliação do Impacto no Trabalho

O treinamento e desenvolvimento de pessoas são caracterizados pelo esforço despendido pelas organizações para propiciar oportunidades de aprendizagem aos seus integrantes, visando constante melhoria no desempenho profissional do servidor. Dentro dessa visão, o Impact – Avaliação do Impacto do Treinamento no Trabalho – foi criado para produzir informações sistemáticas que viabilizem a aferição do nível de eficácia dos treinamentos oferecidos, obtendo resultados mais objetivos, estruturados e quantificáveis.

A avaliação de reação tem o objetivo de aferir a opinião e/ou satisfação dos participantes sobre os diversos aspectos da ação educacional e ocorre ao final do treinamento. Tanto os alunos quanto os instrutores respondem o questionário de Avaliação de Reação ao treinamento, que são aplicados por um avaliador no último dia do curso.

A avaliação de impacto tem como objetivo verificar a utilização, no trabalho, pelos participantes, das competências desenvolvidas na ação educacional. Para isso, a avaliação de impacto, geralmente, compreende duas etapas: 1) o pré-teste, aplicado antes da ação educacional, e 2) o pós-teste, aplicado alguns meses após a ação educacional.

Tabulação dos dados
Após coletados, os dados são inseridos no programa estatístico SPSS. As observações realizadas pelos servidores no instrumento são tratadas como dados qualitativos, que são de grande importância no tratamento e leitura dos dados de forma geral.

A avaliação quantitativa do questionário de Reação baseia-se na análise do resultado estatístico obtido mediante o cálculo da média e do desvio padrão de cada variável avaliada. Os conceitos são atribuídos segundo os intervalos das médias e ocorre da seguinte forma: “Ótimo” de 4,50 a 5,00; “Bom” de 3,70 a 4,49; “Regular” de 3,00 a 3,69; “Ruim” de 2,00 a 2,99; “Péssimo” de 1,00 a 1,99.  

Os conceitos "Ótimo" e "Bom" significam que a disciplina teve boa aceitação por parte da turma, não necessitando, no momento, de maiores aprimoramentos. Os conceitos "Regular", "Ruim" e "Péssimo" sinalizam que é imprescindível aprimorar aspectos do curso.

Tanto os participantes como o instrutor recebem, por e-mail, os resultados da avaliação.

Contato
E-mail: isc_impact@tcu.gov.br
Telefone: (61) 3316-5861

Documentos e textos de referência

· Um Modelo de Avaliaçao do Impacto do Treinamento no Trabalho – IMPACT (Tese de doutorado da professora Gardênia Abbad)