Criando questionários: Melhores Práticas – Indústria de eLearning

Os testes estão no centro da avaliação

Melhores práticas para redação de perguntas ao criar questionários:

1. Todas as perguntas cobrem o domínio uniformemente.
2. Cada pergunta mede um único ponto de conhecimento importante.
3. Sem armadilhas ou perguntas excessivamente complexas, e sem respostas que diferem em detalhes menores.
4. Uma pergunta binária contém duas proposições: uma correta, uma incorreta. Limite as perguntas binárias que deixam muito espaço para o acaso (50%) e, portanto, fornecem menos informações para o mesmo tempo.
5. Idealmente, aponte para quatro ou cinco opções de resposta para cada pergunta.
6. A natureza da pergunta determina o tipo escolhido. É bom variar tipos de perguntas, mas não há necessidade de forçar uma pergunta a um tipo específico.
7. Não hesite em criar variações da mesma pergunta, especialmente nos casos em que os testes são criados por seleção aleatória de um banco de perguntas, pois isso adiciona diversidade ao esforço mínimo de escrita.
8. Planeje um mínimo de 20 perguntas por teste, de preferência 30, se possível, idealmente em torno de 40.

• Dica
  Ao criar um questionário, uma maneira de abordar questões binárias é combinar duas perguntas binárias sobre o mesmo tema para criar uma pergunta de múltipla escolha com quatro opções de resposta (duas verdadeiras, duas falsas).

Dicas para escrever a declaração de pergunta

1. Prefira uma forma interrogativa a uma forma afirmativa no caso de uma pergunta binária com uma única opção para evitar escrever uma afirmação falsa.
2. Vocabulário simples e preciso.
3. Não muito tempo, exceto no caso de textos preenchidos em branco.
4. Evite negativas duplas (por exemplo, não é impossível …)
5. Não hesite em inserir ilustrações, mesmo que sejam apenas decorativas; Eles tornarão a declaração mais agradável.
6. Como escrever as respostas e distratores do questionário:
   1. Respostas propostas consistentes entre si.
   2. Mesmo tipo de formulação (grupos substantivos, frases)
   3. O mesmo nível de detalhe (geralmente as respostas corretas são mais precisas)
7. Alvo erros ou confusões comuns, se possível.
8. Perguntas binárias são úteis para aprender a destacar o conhecimento essencial, uma afirmação (por exemplo, folhagem decídua é folhagem: que cai/que não cai). Como mencionado anteriormente, eles não são muito discriminadores e devem ser usados ​​com moderação.
9. Verdadeiro/falso
   Por padrão, as respostas “verdadeiras” e “falsas” são pré-preenchidas, mas podem ser modificadas (nunca/sempre ou duas proposições)
10. Texto (palavras (s) escrito livremente pelo aluno para responder à pergunta)
    Várias proposições podem ser aceitas separando -as com uma vírgula. A primeira proposição será apresentada como a resposta correta. Não é necessário propor variantes com letras maiúsculas. As proposições devem ser curtas e inequívocas. Evite pedir várias palavras. Isso também se aplica ao texto em branco.
11. Numérico (número (s) fornecido livremente pelo aluno)
    Dependendo do caso, o valor exato deve ser fornecido ou as faixas de valor podem ser aceitas.
12. Correspondência
    De preferência imagens presentes na coluna esquerda para facilitar a arrastar e soltar (idealmente pelo menos quatro proposições)
13. Lista suspensa
    Permite o texto preencher a queima com proposições predefinidas, limitando as opções.
14. Pergunta grátis
    Permite a conclusão de um questionário, reduzindo a aleatoriedade, mas requer correção handbook.

Melhores práticas para escrever explicações

1. A explicação pode detalhar por que uma determinada resposta está correta e outra está incorreta. É lido no contexto da pergunta e pode se referir à pergunta.
2. Não mencione a ordem da resposta na explicação (por exemplo: a resposta 2 está incorreta porque …), pois as respostas podem ser misturadas no teste.
3. Conselhos sobre regras ou lembretes do curso.
4. A regra ou memorando deve ser legível e compreensível sem ter a pergunta em vista.
5. Prefira mídias como folhas que permitam mutualizar memorandos e facilitar a manutenção (correção na folha e não em cada pergunta)
6. A mesma observação da explicação: não mencione a declaração ou as respostas, pois a pergunta não será mais exibida quando a regra for apresentada no espaço de revisão personalizado.

Práticas recomendadas para domínios e tags

Se possível, decide uma lista de critérios para categorizar perguntas; Tags e domínios refinam a interpretação de uma pontuação de teste.

Como escolher perguntas para criar um questionário eficaz

A seleção de perguntas para um questionário depende de seu objetivo. Se o questionário for um questionário de auto-treinamento, a seleção de perguntas pode ser feita aleatoriamente, adaptando-se ao histórico do usuário.

É aconselhável multiplicar questões que abordam o mesmo conceito essencial ao tentar oferecer diferentes tipos de perguntas para validar melhor o conceito. Se o questionário é um certificante avaliação Questionário, é importante:

1. Defina os objetivos da avaliação com antecedência.
2. Escolha perguntas alinhadas com os objetivos (evite perguntas especializadas se segmentar iniciantes). Escolha perguntas sem armadilhas; Não dê a impressão de que pode haver armadilhas.
3. Mantenha a mesma estrutura das perguntas para permitir que o aluno não se debrenda sobre o processo de pergunta, mas para se concentrar no conhecimento subjacente. No entanto, deve -se notar que diferentes tipos de perguntas não são igualmente discriminadores; Por exemplo, perguntas que envolvem a entrada fornecem mais informações do que perguntas binárias.
4. Respeite a proporção de perguntas sobre os objetivos proporcionalmente à cobertura disponível.
5. Opcionalmente, termine com algumas perguntas de resposta livre para correção handbook, que complementam bem a avaliação automatizada.

Se houver uma estrutura de competência, é muito útil ter um inventário de perguntas que validam competências ou habilidades específicas. Este ponto é consistente com a prática recomendada geral que diz que cada pergunta mede um único ponto de conhecimento importante. Observe que este inventário é fácil de estabelecer se as perguntas são estruturadas usando os domínios ou tags da plataforma. O número de perguntas a serem incluídas no questionário determina a confiabilidade de um teste ou avaliação e depende de vários critérios.

Teste e validar o questionário

Depois de criar o questionário, é necessário validá -lo com vários especialistas, porque alguns podem propor questões excessivamente técnicas, enquanto outros podem sugerir perguntas que são muito simples. Um ponto essencial na implantação das avaliações é a calibração, ou seja, determinando a pontuação a ser alcançada, a pontuação satisfatória. Este é um exercício que geralmente é esquecido. O limite de sucesso não deve ser estabelecido em relação ao desempenho (por exemplo, os 30% inferiores das pontuações falham); O teste não deve implicar sistematicamente uma proporção de falhas nos participantes.

Depois de escrever 40 perguntas sobre um certo tema, ninguém pode afirmar com precisão que o nível esperado é de 80% de respostas corretas. O limiar de sucesso é definido a priori e não a posteriori. Obviamente, pode -se declarar arbitrariamente esse objetivo, mas mais tarde pode -se descobrir que participantes totalmente competentes não atingem a pontuação necessária.

Em suma, é imperativo calibrar o teste. É suficiente (e necessário) tomá -lo por cinco participantes cujo nível é considerado satisfatório. Por outro lado, é comum se concentrar demais na taxa de sucesso das perguntas. É bom para uma avaliação incluir perguntas fáceis (com uma taxa de sucesso acima de 80%) e questões difíceis (taxa de sucesso abaixo de 20%). Portanto, antes da certificação, é necessário validar o teste com uma população de referência para:

1. Permita suggestions novamente, o que não é sistemático, pois durante a fase de escrita, mas deve ajudar a controlar a precisão e a redação das perguntas em um contexto de certificação.
2. Obtenha estatísticas iniciais que ajudam a selecionar melhor as perguntas.
3. Calibre o nível mínimo necessário para o teste.
4. Condições para levar o questionário.

Inclua uma fase de treinamento

Ao criar um questionário, é importante questionar as condições para tomá -lo: por exemplo, a integração de uma fase de treinamento é relevante? Sim, é uma das nossas recomendações, tanto como uma ferramenta de aprendizado quanto para a segurança dos participantes. No remaining da fase de treinamento, o participante deve poder dizer: “Agora sei que tenho o nível esperado; estou pronto para receber a certificação”.

Especificidades de certificação

As condições para fazer o teste são importantes porque alguns têm repercussões nos resultados:

1. Para certificação, você pode escolher o modo “Página única”, no qual o usuário vê todas as perguntas e pode respondê -las na ordem que lhes convém e pode voltar a uma resposta anterior até a validação remaining.
2. Ordem aleatória para apresentar perguntas e respostas.
3. Nenhuma ponderação (pontuações diferenciadas por pergunta), a menos que o tipo de pergunta seja estatisticamente mais fácil (por exemplo, pergunta binária com uma taxa de sucesso de 50% para adivinhação aleatória, mas vimos que esse tipo de pergunta deve ser limitado)
4. Classificação parcial (100-50%) se as perguntas propostas forem perguntas de múltipla escolha com mais de duas respostas corretas.
5. Controle de tempo para todo o teste, em vez de um cronômetro por pergunta.
6. Consequências que validam certas habilidades ou que sugerem passar para outra avaliação se os resultados forem insuficientes ou incompletos.

Para criar um questionário de qualidade, é essencial determinar também o nível de dificuldade de cada pergunta.