Falando um pouco de história quando os negócios globais começaram a crescer nas décadas de 1970 e 1980, as organizações internacionais rapidamente perceberam que a comunicação seria o gargalo limitante do crescimento. As empresas precisavam de uma solução e padronização para idiomas. Como a economia dos Estados Unidos era a maior do mundo na época, tornou-se um padrão de fato que os negócios seriam feitos em inglês sempre que possível. As empresas se esforçaram para fornecer treinamento em inglês e inglês para fins específicos (ESP) para sua equipe global. Não apenas as comunicações comerciais externas eram um problema, mas até os departamentos globais internos lutavam para se comunicar uns com os outros. Não havia tempo de "melhores práticas". Portanto, os programas corporativos internos de treinamento de inglês se desenvolveram em grande parte por necessidade e não por ciência. A variedade de programas de treinamento de inglês corporativo é quase tão extensa quanto a lista de organizações internacionais. A maioria dos programas corporativos de treinamento de idiomas não tem formulários fixos. Cada organização determina seu programa considerando vários fatores, como: política da empresa, objetivos exclusivos do treinamento e limitações financeiras. Além disso, embora as empresas tenham evoluído significativamente nos últimos trinta a quarenta anos, os programas de treinamento de idiomas progrediram muito menos. Principais indicadores para um programa de treinamento de inglês Para programas globais de treinamento de inglês, deve haver 3 métricas principais: Qualidade - a qualidade começa com consistência. Garantir que toda a sua organização obtenha o alto padrão equivalente de ensino de inglês o tempo todo. Escalabilidade - O gerenciamento de processos e sistemas constrói uma base sólida para o treinamento de inglês, mas os programas devem ser adaptáveis e responsivos às constantes mudanças no local de trabalho, no ambiente e nas melhores práticas. Mensurabilidade - Identificar KPIs importantes para o seu programa de inglês, como custo total de propriedade, benefício, capacidade e envolvimento, o ajudará a orientar o desenvolvimento e a melhoria do seu programa.
Avaliando um programa de treinamento de inglês corporativo A avaliação é uma parte importante da garantia da qualidade, mensurabilidade e melhoria. As avaliações podem ajudar: - Identifique o que está funcionando e o que não está. - Determine os resultados e eficiências do projeto. - Melhore a equipe e os professores. - Adicione à base de conhecimento existente. - Identifique práticas ruins ou não escaláveis. - Infundir novos métodos e pedagogia. Os dados e métodos necessários para avaliar a eficácia dos programas de treinamento de inglês corporativo devem ser informados por métodos científicos bem estabelecidos que evoluíram na ciência da psicologia e do comportamento, bem como no treinamento e na pedagogia. O uso eficaz de dados para a melhoria do programa pressupõe que as empresas tenham implementado um sistema de avaliação interno (ou externo). A coleta de dados precisos e relevantes para programas de treinamento de inglês é freqüentemente esquecida ou negligenciada. Embora novas práticas tenham surgido por meio de pesquisas científicas, muitos programas corporativos de inglês permanecem inalterados. À medida que o mundo ganha conhecimento, os padrões e práticas educacionais continuam mudando, os indivíduos continuam a evoluir e sua capacidade de aprendizagem se desvia. Um dos métodos de avaliação mais validados vem de Daniel Stufflebeam denominado CIPP e teve origem na década de 1960. Desde então, ele foi atualizado (até 2007), mas o modelo não mudou muito - contexto, entradas, processo e produto (CIPP). - Contexto - O que devemos fazer? - Entradas - como devemos fazer isso? - Processo - Estamos fazendo conforme planejado? - Produto - o programa funcionou? Medindo os resultados reais e comparando-os com os resultados esperados, os tomadores de decisão são mais capazes de decidir se o programa de treinamento de inglês deve ser continuado, modificado ou abandonado por completo. Avaliação é o processo de determinar até que ponto os objetivos são alcançados. Preocupa-se não apenas com a avaliação das realizações, mas também com as melhorias. Existem duas maneiras de fazer avaliação, incluindo avaliação formativa e somativa. A avaliação formativa é a informação que será usada para melhorar a instrução, o projeto e o processo e garante que todos os aspectos de um programa ou projeto têm probabilidade de produzir sucesso (Ebel & Frisbie, 1991). É conduzido para monitorar os processos instrucionais e o progresso da aprendizagem para fornecer feedback contínuo que identifica os erros de aprendizagem (Gronlund, 1985). A avaliação somativa garante se os processos necessários foram realizados e os objetivos estão sendo alcançados. A avaliação somativa e formativa ocorre sempre que um exercício de avaliação é realizado. (Journal of Education and Education Development, Vol 5. No 1. 2018)
Usando o CIPP para avaliação do programa de inglês corporativo O modelo de Stufflebeam inclui a avaliação formativa e a avaliação somativa. O Modelo de Avaliação CIPP começa com a Avaliação do Contexto, que estabelece os objetivos do programa. Nesta fase, os beneficiários e suas necessidades também são identificados, juntamente com os recursos potenciais disponíveis e os problemas potenciais que precisarão ser superados. Nesta fase, os antecedentes do programa deverão ser avaliados e quaisquer fatores sociais, econômicos, políticos, geográficos e culturais dentro do ambiente imediato devem ser levados em consideração. Avaliação de contexto (C): fornece informações para o desenvolvimento e avaliação da missão, visão, valores, metas e objetivos, e prioridades A. Objetivos (1) definir as características do ambiente (2) determinar metas gerais e objetivos específicos (3) identificar e diagnosticar os problemas ou barreiras que podem inibir o alcance das metas e objetivos B. Tarefas (1) definir o ambiente, tanto real quanto desejo (2) definir necessidades não atendidas e oportunidades não utilizadas (3) diagnosticar problemas ou barreiras C. Métodos (1) análise conceitual para definir os limites da população a ser atendida (2) estudos empíricos para definir necessidades não atendidas e oportunidades não utilizadas (3) julgamento de especialistas e clientes sobre barreiras e problemas (4) julgamento de especialistas e clientes sobre as metas e objetivos desejados No próximo estágio do Modelo de Avaliação CIPP, a Avaliação de Entradas abrange os planos / planejamento do programa. As partes interessadas precisarão ser engajadas e estratégias adequadas de execução do programa identificadas. Estratégias concorrentes ou conflitantes também podem ser identificadas. Um orçamento precisará ser alocado e devidamente repartido. Para garantir uma cobertura suficiente do programa de treinamento, a pesquisa também pode ter que ser realizada. Avaliação de entrada (I): fornece informações para o desenvolvimento de projetos de programa por meio da avaliação de bancos de dados, interesses de partes interessadas internas e externas, WOTS up? (Fraquezas, oportunidades, pontos fortes e ameaças).
A. Objetivos (1) projetar um programa (intervenção) para atender aos objetivos (2) determinar os recursos necessários para entregar o programa (3) determinar se a equipe e os recursos disponíveis são adequados para implementar o programa
B. Tarefas (1) desenvolver um plano para um programa por meio do exame de várias estratégias de intervenção (a) examinar estratégias para alcançar o plano - requisitos de tempo - requisitos de financiamento e físicos - aceitabilidade para grupos de clientes - potencial para cumprir os objetivos - barreiras potenciais (b) examinar as capacidades e recursos do pessoal - experiência para fazer várias estratégias - financiamento e recursos físicos - barreiras potenciais (2) desenvolver um plano de implementação do programa que considere tempo, recursos e barreiras para superar Na etapa de Avaliação de Processo do Modelo de Avaliação CIPP, as ações efetivas são avaliadas. Isso pode ser cíclico, repetido ao longo da fase de desenvolvimento ou durante a implementação / execução do programa de treinamento. Os controles para monitorar o progresso deverão estar em vigor, bem como um sistema de feedback dos alunos e das partes interessadas, e vice-versa. Avaliação do processo (P): desenvolver avaliação contínua da implementação das principais estratégias por meio de vários programas táticos para aceitar, refinar ou corrigir o desenho do programa (ou seja, avaliação de recrutamento, orientação, transição e retenção de alunos do primeiro ano). A - Propostas (1) fornecer aos tomadores de decisão as informações necessárias para determinar se o programa precisa ser aceito, alterado ou encerrado. B. Tarefas (1) identificar discrepâncias entre a implementação real e o design pretendido (2) identificar defeitos no projeto ou plano de implementação C. Métodos (1) um membro da equipe atua como avaliador (2) a referida pessoa monitora e mantém os dados sobre as condições de configuração, os elementos do programa à medida que ocorrem (3) a referida pessoa dá feedback sobre as discrepâncias e defeitos para os tomadores de decisão Finalmente, o estágio de Avaliação do Produto do Modelo de Avaliação CIPP mede os resultados. O impacto / alcance do programa de treinamento e sua eficácia no cumprimento dos objetivos. A transportabilidade procura determinar se o programa de treinamento pode ser transferido, adaptado ou usado em um ambiente diferente. A sustentabilidade é outro aspecto a ser medido, levando em consideração a durabilidade e a durabilidade dos benefícios. Ajustes no programa de treinamento também podem precisar ser realizados neste estágio.
Avaliação do produto (P): avaliação do resultado do programa para decidir aceitar, alterar ou encerrar o programa, usando critérios diretamente relacionados às metas e objetivos (ou seja, colocar os resultados desejados do aluno em forma de pergunta e pré e pós-pesquisa ) Faça um loop de volta aos objetivos originais na Avaliação de Contexto (C) para ver se e como eles seriam alterados ou modificados com base nos dados. A. Proposta (1) fornecer aos tomadores de decisão as informações necessárias para determinar se o programa precisa ser aceito, alterado ou encerrado. B. Tarefas (1) desenvolver a avaliação do programa C. Métodos (1) métodos tradicionais de pesquisa, múltiplas medidas de objetivos e outros métodos Para obter mais referências e informações, gostaria de compartilhar esta lista de verificação de Daniel Stufflebeam para a aplicação do modelo CIPP informando: “Esta lista de verificação foi projetada para ajudar os avaliadores a avaliar programas com objetivos relativamente de longo prazo. A primeira função principal da lista de verificação é ajudar os avaliadores a gerar relatórios de avaliação oportunos que ajudem os grupos a planejar, realizar, institucionalizar e / ou disseminar serviços eficazes para os beneficiários-alvo. A outra função principal da lista de verificação é ajudar os avaliadores a revisar e avaliar a história de um programa e emitir um relatório de avaliação somativa sobre seu mérito, valor, probidade e importância, e as lições aprendidas. ” “Esta lista de verificação tem 10 componentes. O primeiro - acordos contratuais para orientar a avaliação - é seguido pelos componentes de avaliação de contexto, entrada, processo, impacto, eficácia, sustentabilidade e transportabilidade. Os 2 últimos são a metaavaliação e o relatório de síntese final. A contratação para a avaliação é feita no início da avaliação e, em seguida, atualizada conforme necessário. Os 7 componentes do CIPP podem ser empregados seletivamente e em diferentes sequências e muitas vezes simultaneamente, dependendo das necessidades de avaliações particulares ... “O conceito de avaliação subjacente ao Modelo CIPP e esta lista de verificação é que as avaliações devem avaliar e relatar o [mérito, valor, probidade e importância de uma entidade] e também apresentar as lições aprendidas ... O tema principal do modelo é que o propósito mais importante da avaliação é não para provar, mas para melhorar. “A comunicação oportuna dos resultados da avaliação relevantes ao cliente e ao público-alvo é outro tema-chave desta lista de verificação ... Após [um] workshop de feedback, os avaliadores devem finalizar os relatórios de avaliação, revisar o plano de avaliação e cronograma conforme apropriado, e transmitir ao cliente e a outros destinatários designados os relatórios finalizados e quaisquer planos e cronogramas de avaliação revisados. ” Além de orientar o trabalho do avaliador, a lista de verificação dá conselhos para clientes de avaliação. Para cada um dos 10 componentes de avaliação, a lista de verificação fornece pontos de verificação à esquerda para avaliadores e pontos de verificação à direita para clientes de avaliação.
