EnglishPortugueseSpanish
EnglishPortugueseSpanish

A primeira avaliação de fala automatizada totalmente adaptável

Temos o prazer de anunciar o lançamento da versão totalmente adaptável pergunta por pergunta de nossa avaliação em inglês! A avaliação de fala automatizada da Emmersion tem fornecido um valor imenso para organizações em todo o mundo, reduzindo o tempo e o custo de uma triagem de idioma eficaz e precisa. Adicionar adaptabilidade pergunta a pergunta aumenta muito seu valor para as organizações de várias maneiras e até abre possibilidades interessantes que vão além da avaliação. 

O que é uma avaliação adaptativa? 

A avaliação adaptativa, muitas vezes referida como Teste Adaptativo Computadorizado ou CAT, é um processo no qual cada questão da avaliação é determinada dinamicamente com base no desempenho do candidato na questão anterior. Em vez de a pergunta e a sequência de perguntas serem predeterminadas e fixas, as perguntas são retiradas de um grande banco de perguntas calibrado. O objetivo básico é escolher uma pergunta mais fácil se o participante do teste errou a questão anterior, e uma pergunta mais difícil se o candidato acertou. Isso ajuda a garantir que as perguntas feitas sejam as mais relevantes e informativas.

Os benefícios da avaliação adaptativa 

Em primeiro lugar e mais importante para os resultados financeiros das organizações, adicionar adaptatividade reduz o tempo de administração para a avaliação, aumentando sua qualidade. Você leu certo! Com a adaptabilidade, uma experiência de teste mais curta pode coincidir com um aumento na precisão. Cada pergunta é pontuada imediatamente e, no contexto dos milhões de pontos de dados que já coletamos, o sistema determina qual pergunta será a mais apropriada para o nível do candidato. Cada pergunta é projetada para fornecer as informações mais avaliativas possíveis, tornando o processo geral muito mais eficiente e economizando um tempo precioso. Em seguida, a experiência do usuário para os participantes do teste é drasticamente aprimorada por meio da adaptabilidade.

 Em avaliações de formato fixo, os participantes do teste são confrontados com questões de uma ampla gama de dificuldade, a fim de coletar dados suficientes para identificar o nível de habilidade dos participantes do teste. Para alunos avançados, muitas das perguntas são muito simples, tornando a experiência enfadonha e potencialmente causando excesso de confiança. Para alunos novatos, muitas das perguntas são muito difíceis, tornando a experiência desmotivadora e causando dúvidas em suas habilidades. A adaptabilidade fornece a experiência do usuário semelhante ao conto de fadas Cachinhos Dourados - não muito difícil ou muito fácil, mas é ideal para seu nível. Essa experiência os deixa sentindo-se realizados e confiantes de que representaram bem suas habilidades.

Finalmente, a utilização de um mecanismo de avaliação adaptativo reduz significativamente a possibilidade de trapaça. Como a seleção das perguntas é completamente dinâmica, não há como o candidato a se preparar para as perguntas com antecedência. Em um nível mais macro, adicionar adaptatividade permite um processo automatizado simplificado de calibração de novas perguntas. À medida que mais avaliações são feitas, mais perguntas novas são calibradas e adicionadas ao banco de perguntas e perguntas mais antigas são retiradas. Manter o banco de perguntas atualizado cria outra camada importante que impede os participantes de antecipar ou se preparar para as perguntas. Isso também torna os retestes significativamente mais eficazes para organizações que precisam testar um único candidato várias vezes.

Os desafios de criar uma avaliação adaptativa de fala 

A tecnologia para avaliações adaptativas por computador já existe há décadas. A avaliação de leitura adaptativa WebCAPE da Emmersion foi originalmente criada há mais de 20 anos. Embora a tecnologia e as práticas psicométricas tenham melhorado a avaliação adaptativa significativamente ao longo dos anos, adicionar adaptabilidade a uma avaliação automatizada da fala até agora era um território desconhecido. A maioria das avaliações adaptativas são de múltipla escolha, o que significa que há uma resposta certa e uma ou mais respostas erradas. 

A dificuldade com as avaliações orais automatizadas é que não existe uma única resposta certa ou errada. Em vez disso, cada resposta contém centenas de pontos de dados e o sistema fornece uma pontuação de precisão em um espectro. Um sistema adaptativo não apenas decide se uma resposta é certa ou errada, mas se é certa ou errada para determinar a próxima pergunta. Este processo é imensamente mais complicado, exigindo muito mais calibração e ajuste fino do que uma avaliação adaptativa de múltipla escolha tradicional. Na Emmersion, gostamos de fazer coisas difíceis!

Adaptabilidade Desbloqueia o Futuro da Personalização 

Adicionar adaptatividade como uma tecnologia fundamental para a avaliação em inglês abre várias oportunidades revolucionárias de personalização, tanto na avaliação quanto no processo de aprendizagem.

Emmersion AI Adaptive Assessment Engine 

Sejamos honestos - embora as avaliações sejam extremamente importantes, elas são um meio para um fim. Ninguém fica animado com a perspectiva de fazer ou revisar uma avaliação. O que todos realmente se preocupam são as pontuações de avaliação que são produzidas a partir da avaliação. As organizações usam essas pontuações para tomar decisões vitais, como contratar um candidato ou como colocá-lo corretamente em um programa de remediação ou aprendizado. Os participantes do teste encontram valor nessas pontuações por terem uma imagem clara de suas habilidades e de como podem melhorar. Para isso, estamos constantemente procurando maneiras de melhorar a precisão, a confiabilidade e a velocidade com que entregamos os dados de pontuação aos nossos usuários. 

Em vez de construir um conjunto de avaliações individuais, estamos construindo um mecanismo de avaliação adaptável para fornecer aos nossos clientes os dados precisos de que precisam para tomar decisões críticas. Acima, descrevemos o benefício de introduzir adaptatividade na própria avaliação oral. Ter vários módulos de avaliação adaptativa permite a possibilidade de um mecanismo de avaliação adaptativa. Os clientes começam definindo os dados de pontuação de que precisam em termos de habilidades e nível de detalhe. O sistema então reúne a experiência de avaliação mais eficiente com base nessas necessidades. As perguntas são adaptadas para extrair especificamente os dados necessários para fornecer as pontuações relevantes, mantendo a experiência de avaliação direcionada e eficiente.

Nos casos em que vários módulos de avaliação são necessários, cada módulo se baseia no módulo anterior de forma adaptativa para aproveitar todas as informações possíveis para manter a experiência curta e poderosa. Eventualmente, o sistema pode até mesmo fazer determinações no local para incluir ou excluir um módulo de avaliação com base no desempenho dos módulos anteriores.

O papel da avaliação adaptativa na aprendizagem personalizada 

Isso é especialmente útil nos casos em que os clientes desejam avaliar uma habilidade para todos os candidatos, mas avaliam uma habilidade secundária apenas para aqueles que atendem a um ponto de corte de nível de habilidade para a primeira habilidade. Esse mecanismo de avaliação adaptável aproveita a IA e a tecnologia de aprendizado de máquina para personalizar a experiência de avaliação e fornecer dados de pontuação precisos e imediatos para os tomadores de decisão. Não é nenhum segredo que a tutoria individual é muito superior à instrução em grupo na produção de melhores resultados de aprendizagem. Tutores eficazes são capazes de personalizar a experiência de aprendizagem, envolvendo-se em avaliação contínua, fornecendo um ciclo de feedback imediato e adaptando rapidamente a instrução para atender às necessidades do aluno. Os provedores de aprendizagem online não conseguiram criar experiências de aprendizagem totalmente personalizadas porque carecem das ferramentas de avaliação automatizadas necessárias. 

Combinar o Emmersion AI Adaptive Assessment Engine com conteúdo de aprendizagem online modular pode resultar em um sistema de aprendizagem online que pode começar a alcançar os benefícios de tutores humanos. A adaptatividade fornece espaço para a transição para questões de diagnóstico para determinar as lacunas de aprendizagem individuais, pois permite que o sistema de avaliação determine uma pontuação mais precisa imediatamente. Como o sistema de avaliação produz dados de avaliação que revelam lacunas de aprendizagem específicas, um sistema de aprendizagem adaptável pode aproveitar esses dados para construir caminhos de aprendizagem personalizados e modulares.

Os alunos terão melhores resultados porque a instrução é adaptada ao seu nível de habilidade individual e direcionada para suas lacunas de aprendizagem específicas. Dessa forma, a introdução de um mecanismo de avaliação adaptativo para o mercado de aprendizagem de línguas online pode aproximar a vantagem da tutoria individual em um modelo acessível e escalonável.