Loading

Alison's New App is now available on iOS and Android! Download Now

Study Reminders
Support
Text Version

Set your study reminders

We will email you at these times to remind you to study.
  • Monday

    -

    7am

    +

    Tuesday

    -

    7am

    +

    Wednesday

    -

    7am

    +

    Thursday

    -

    7am

    +

    Friday

    -

    7am

    +

    Saturday

    -

    7am

    +

    Sunday

    -

    7am

    +

Ok então na última aula temos discutido sobre essa análise de itens, índice discriminativo, valor de facilitação e essa eficácia dos distratores. Portanto, em resumo o valor de facilitação de um item objetivo não passa de um valor de facilitação FV não passa de um R por N, isso significa que em valor de facilitação se o cada e cada questões estiver ficando marcas únicas, então ele é total de marcos R dividido por N. So RN no número cuja pontuação direito e número total de respectivamente.

Então, suponhamos que eu tenha tomado um valor de facilitação de teste é o quão fácil é o teste, sendo assim número de resposta correta dada pelo grupo superior + número de resposta correta dividida por dado pelo grupo inferior dividido pelo número total, ok e nós o explicamos de maneira simples dando um exemplo. E eu vou compartilhar com esse ppt que há um algum exemplo já está feito, para que você possa passar por ele e verificar suas coisas que se ela está correta ou não e você pode passar por isso.

A próxima é que se você vir um valor de facilitação para aquele item de teste não objetivo como esse se a questão dos papéis de pergunta carrega uma marca diferente como essa alguma questão transporta 5 marcas, alguma questão carrega 10 marcas, alguma questão carrega 20 marcas como essa forma então também o valor de facilitação é o total de marcas obtidas pelo grupo superior + total obtido pelo grupo inferior dividido pelo total de pontos de interrogação de todo esse conjunto de questões, ok.

Isso significa que suponhamos que haja 10 perguntas e cada questão seja de 5 marcos, então, as marcas totais são 10 minutos em 5 50 minutos questões, ok. E para se multiplicar pelo tamanho total do grupo, ok então é aqui que se dá fórmula. Similarmente, índice discriminativo a resposta correta dada pelo grupo superior menos resposta correta dada pelo grupo inferior dividido pelo N, N é o tamanho do grupo, ok.
Agora essa faixa desejável onde índice discriminativo é de 0,3 a 0,65 para o item de teste objetivo e valor de facilitação você sabe que você obtem o valor de facilitação. Então, se o valor da facilitação tinha valor 0, qual é o significado? O valor de facilitação 0 significa ninguém de que ninguém pode responder a essa pergunta. Assim, as marcas totais obtidas pelo grupo superior 0, marca total obtida pelo grupo inferior 0 dividido pelo tamanho do grupo é de 0.
Portanto, isso significa se um item de teste tem um valor de facilitação 0 que indique este item de teste não é adequado para fazer o teste porque ou este item pode ser retirado de tal forma que ele está fora do sílabo do aluno ou pode ser não atingível mas não pode ser feito dentro deste sistema de exame, portanto, é essa a indicação. Por isso, o valor de facilitação 0 não tem qualquer significado.
Agora se eu fazer uma avaliação summativa sem referência suponha que eu faça um exame de JEE, se um item de teste tem valor de facilitação 1 que significa que todo mundo pode dar a resposta do item de teste, sem uso de usar aquele item de teste como um exame de não referência. Isso não indica que quem é o bom aluno que é o mau aluno. Portanto, o valor de facilitação de 0 1 pode variar, agora se for 0 item de teste não é digno, se for 1 então também testar item é mesmo que ele seja fechado para 1 também não digno.
Então é um quando você projeta um papel de pergunta baseado em seu teste, que suponhamos que eu queira projetar um papel de pergunta para exame de semestre, então ele é critério baseado em critérios. Isso significa que eu já defini o meu resultado do curso e já disse aos alunos que você tem que alcançar esse resultado eu tenho que apenas testar se você consegue o resultado ou não, como faço? Eu projeto um papel de questão baseado nos critérios que é definido pelo meu resultado do curso.
Se um aluno der essa resposta correta, então ele alcançar o resultado, se ele não fizer então ele não alcançou o resultado, ok.

Similarmente efetividade da distração, muito importante muito importante porque muitas pessoas estão projetando o papel de pergunta de múltipla escolha e se você ver deixe-nos dar o exemplo, suponha que você em nível de viveiro de crianças haja exame Olympiad ou algum outro exame suponha que você dê uma pergunta como que um número de três dígitos multiplique pelo número de três dígitos, seu objetivo é que o aluno saiba multiplicar um número de três dígitos por um número de três dígitos.
Agora se você projeta um papel de pergunta como esse 225 último dígito é 5 e novamente o último algarismo é 5 de outro o número. Assim, o número de multiplicação também tem um último algarismo 5, agora fora de quatro escolha se você apenas uma escolha que está fora o último dígito é 5, então o aluno sem fazer a multiplicação de três dígitos eles podem dar a resposta.
Por isso, na verdade objetivo era eu querer testar se eles são capazes de multiplicar número de três dígitos por um número de três dígitos não é testado. Portanto, eficácia dos demais distratores não são relevantes, ok.
Então, isso significa que a eficácia do destrator é muito importante e eu você sabe que como calcular a eficácia dos distratores. E também os distratores são o equívoco válido desse papel de questão.
Por isso, não deve ser como aquele destrator arbitrário não ajuda você a testar os alunos se eles têm atingir a habilidade ou não atingem a habilidade, ok. Agora eu, portanto, a outra parte que é chamada de adivinhação, em papel de pergunta de múltipla escolha eu posso projetar o papel de pergunta para a marcação negativa que significa que estou desestimulando a adivinhação, marcação negativa significa que estou desestimulando o adivinhação, disse ao aluno se você não sabe a resposta não responda sem adivinhação.
Mas suponha que em qualquer muitos casos devemos permitir adivinhar, ok. Então com base no requisito se você pode permitir adivinhar ou você pode não permitir adivinhação. Se você permitir o adivinhação, então como é que você corrige esse fatores de adivinhação? Pode haver lá que pode haver algum palpite é feito para que você consiga o número correto pelo adivinhador.

Por isso, há uma solução simples para correção do adivinhação que descrevi e esta é uma maneira, você pode fazer outro caminho também. Por isso, meu método é que o que eu estou dizendo que suponho que eu faça um teste para 40 marcos pergunta 40 item de teste e 40 marcas. Um aluno conseguiu 34 marcos, eu quero corrigir o fator adivinhação. Talvez o aluno não adivinhe por em geral eu assumo que o aluno adivinhe, então se ele obteve 34 marcos então quais seriam as marcas corretas que é sem adivinhar?
Ok. Agora eu tenho uma escolha de quatro a cada item de teste tem quatro opções A, B, C, D, ok então se eu adivinhar se eu digo que minha resposta correta são distribuídas aleatoriamente sobre as 40 perguntas significa que eu não devo projetar um papel de pergunta onde todos os A são resposta correta. Não devo projetar um papel de questão em que todos os B são resposta correta, onde a resposta correta se distribui aleatoriamente sobre aquele papel de 40 questão, 40 pergunta então alguma pergunta tenha uma resposta correta, alguma B, alguma C, alguma D, ok.
Agora se um aluno obteve 34 que significa, ele cometeu erro em 6 item de teste de 40. Então, se ele cometeu erro em 6 item de teste, qual é o significado? Que se eu tiver uma escolha de quatro, fora de três escolhas erradas eu posso obter uma escolha correta. Fora de três escolhas erradas que é uma possibilidade que eu possa obter uma escolha correta se eu marcar adivinhando, ok.
Por isso, se houver uma resposta de seis erradas, isso significa que a cada três respostas erradas a cada três errado há uma possibilidade de que o aluno obtenha uma resposta correta. Assim, as marcas reais serão 34 menos 2 porque 2 6 é resposta errada, então 2 é o fator adivinhação 2 marcas é obtendo pelo palpite, ok. Portanto, 32 marcas são as marcas corretas sem adivinhar, ok. Então qual é a fórmula geral?
Resposta certa o placar não é nada mais que a direita menos resposta errada resposta certa resposta errada menos resposta errada, ok resposta errada então pontuação eu consegui tão 40 so 40 é o total de marcas. Ele escreve 34 desculpe total marca menos resposta errada é a pontuação do aluno, ok.
Então, se eu digo qual é o quanto ele é que ele está errado? Errado significa quantas marcas ele tem cometido erro.

Assim, isso significa que o total de marcos menos o total de marcas que ele obteve significa resposta certa é igual ao total de marca o número que ele pode estar errado. Então, se eu disser sem adivinhar qual deve ser o número dele? Por isso, pontuação será direita resposta certa pontuar o que ele receber menos errado pontuar quantos número ele recebe por número errado dividido pelo número de escolha menos 1.
Então, se dizer 40 é minha pontuação total, então ele recebe 34, ele conseguiu 34 agora quantos errados? 6 marcas estão erradas divididas por quantas opções? 4 menos 1 é igual a 34 menos 6 por 3 é igual a 34 menos 2 é igual a 32. Portanto, pontuação certa menos pontuação errada dividida por escolha menos 1 número de escolha menos 1, ok. Esse é o fator adivinhação, ok.
Portanto, se um papel de 40 pontos de interrogação é projetado, se alguém conseguir 34 isso significa que ele deve realmente obter 32. Você pode permitir adivinhar, você pode não permitir adivinhar que depende de sua escolha mas se você permitir adivinhar você pode corrigir o fator de adivinhação, ok.

O próximo é que, sim agora eu sei a análise do item mas sim análise de item só válido eu posso fazer análise de item se eu suponho que faça o exame hoje e depois fiz a análise de itens deste exame. Por isso, quando eu projetar o próximo papel de questão, se esse tipo de análise de item for feito para milhares de perguntas, então provavelmente projetar um papel de pergunta será muito fácil para mim.
Pois se eu marquei cada análise de itens após a análise de itens for marcada a pontuação, a cada papel de questão lá valor de facilitação, há índice discriminativo e efetividade mesmo o destrator de eficácia de múltipla escolha todos são armazenados no meu banco de perguntas. Agora se eu quiser projetar um papel de questão deixe-nos ser discriminativo deve ser eu preciso de um item de teste cujo discriminativo deve ser para assim para isso, eu posso pegar eu preciso de um item de teste cujo valor de facilitação é assim e este, eu posso pegar, ok.
Mas, quando você faz uma avaliação summativa para o exame de semestre, o exame baseado em critérios não há nada com aquele valor de facilitação e índice discriminativo porque eu quero que meu na minha classe todo aluno deve ganhar 100 até 100 porque se todos forem atingir essa habilidade. Por isso, meu papel de questão é apenas para testar se eles são alcançados o resultado pretendido ou não.
Regra do polegar é que não forneça um item de teste que já é discutido na classe. Se você fornecer um item de teste que já é discutido na classe, então não é essa habilidade, não passa de um nível lembrador. Suponhamos que você tenha ensinado um design de algo e você dê o mesmo design no sistema de exame, na verdade você está testando a memória dos alunos, não se os alunos são capazes de projetar essas coisas ou não.
Por isso, não forneça um conjunto de papel de pergunta cujos itens de teste serão novos mas utilizando o mesmo conceito. Então isso significa que eu não deveria fornecer um item de teste para testar a competência das duas aluna que eu já resolvi. Porque se eu já resolvi o mesmo item de teste, então o aluno será só lembrar e entregar assim se você ver a história questionar papel do nosso nível de secundário maior tipo do desta vez que o shahenshah veio, da próxima vez assim Babar virá, todo mundo sabe que da próxima vez eu tenho que escrever o Babar.
Então todo mundo só abafar a Babar veio no centro de exames e exame hall e dar isso. Por isso, não é você deve testar o conceito do aluno, ok. Aí eu vou para a validade da avaliação, suponhamos que eu projete uma avaliação é essa avaliação é válida?
Isso significa que podemos confiar no grau? validade de avaliação válida significa que suponhamos que eu forneça um x grau a um aluno, posso confiar que sua habilidade é equivalente a x grau ou se eu levar hoje um teste mais ou menos vamos obter o x grau, essa é a validade. Então validade significa que uma vez que eu atribuo uma nota ao aluno eu avalio os alunos, a minha avaliação é válida?
Se eu digo que isso é correto, este é o conjunto de habilidades dos alunos e sim os alunos adquitam aquele conjunto de habilidades que é importante, a validade do conjunto de habilidades. Então, como você projeta a validade? Como você testa a validade? Suponhamos que essa metade da inferência sacada do curso se aproprie, significativa, útil. Suponhamos que eu tenha ensinado na máquina de classe AC design algum tipo de design de máquina AC dada especificação, essa complexidade de design de máquina AC que ensinei.
Agora em papel de pergunta resolvi um problema na aula e dou o mesmo papel na prova. Então um aluno recebe x grau, ele é validado o seu teste é validado? lugar nenhum. Na próxima vez se eu testar com um outro conjunto de design, ele pode não ser capaz de responder. Por isso, meu teste não é validado, não estou dizendo que exame processado desse é outro processo. Eu estou dizendo que o aluno está honestamente dando o exame mas o meu papel de pergunta é tal que meu teste é falho à validade.
Por isso, deve ser apropriado, significativo, útil. Isso significa supor que eu tenha ensinado um cálculo diferencial do sujeito da matemática e eu ensinei a resolução de equação diferencial de segunda ordem na classe. Agora eu projeto um papel de pergunta para resolver a equação diferencial da terceira ordem, nenhuma do aluno pode dar a resposta, então minha validade de teste não está lá. Da mesma forma isso não é apropriado, agora suponhamos que um engenheiro do BE eu tenha ensinado um assunto que deveria ser análise, síntese, nível de aplicação e avaliação e todo o meu papel de pergunta é escrever uma nota curta, definir isso, explicar isso, desenhar a figura, então qual é a validade deste teste?
O aluno pode obter o x mas não conhece a aplicação do assunto, não tem a habilidade em maior aplicação de nível cognitivo, avaliação, síntese e nível de análise desejado para um engenheiro do BE. Então isso significa que se eu projetar um papel de questão que é apenas o nível de conhecimento e abrangência e eu ensinei que esse curso é destinado para aquele curso de Engenharia do BE que fez com que a diretriz da NBA coisas inteiras seja desperdiçada.
Porque o aluno que tem as marcas ex ele só conhece a definição e a derivação. Por isso, escrever uma nota curta em um papel de questão de engenharia não é uma escolha válida, ok. Assim, a validade não estará lá, por isso sua pergunta deve ser apropriada, significativa, descrevo-me com significado mais adiante também. Você não deve projetar o papel de questão de tal forma que não é nenhum significado dessa questão, ele deve ser significativo significa que deve indicar o resultado de critérios do seu curso então ele deve ser útil.
Não deveria ter ensinado a entropia de definição apenas em caso de engenheiro do BE. Se eu perguntar em avaliação summativa qual é a definição de entropia? Isso não é aquele exame de engenheiro do BE, que pode ser ITI ou assim. Por isso, tem que ser útil para aquele grupo de alunos, tão útil deve estar lá. Assim, a validade pode ser inferida a partir da inferência diferente se você diz que o conteúdo faz o item de teste de amostra adequadamente representa o domínio do conteúdo.

Há um outro cenário está aí, se você vir muitas universidades ou muitas faculdades ou muitas instituições tem seu sistema que, de 8, responda a qualquer cinco. Se eu me lembro em exame de matemática de maior sistema de exame secundário há uma combinação de permutação syllabus então há uma chamada expansão da série Taylor todos estão lá na sílaba, mas começando seu professor disse sem tocar na combinação de permutação e na série Taylor é possível obter as 100 marcas.
Por quê? Porque o papel de pergunta é projetado para fora de 8 você tem que responder a qualquer 5. Então isso significa que se 8 representam a cobertura de 100 da sílaba, então 5 representam 5 por cobertura de 8 da sílaba. Isso significa quase 30 da sílaba que eu não conheço. Ainda assim eu pontuo 100 marcos.
Isso significa que a validade do papel de questão se foi. Então se você disser ok sua marca de passe é de 35. Então 70 syllabus 35 eu sei, isso significa que eventualmente eu sei apenas 21 do syllabus aproximadamente e eu passei no exame, qual é a validade desse teste?
Agora para mim porque eu não sei nada sobre o assunto mas eu passo o exame. Por isso, o exame diz que não configura a validade. Então o item de teste de amostra representa adequadamente o domínio do conteúdo? Isso significa que sim eu posso dar qualquer 5 você pode responder qualquer 5 em cada 8 sem problema.
Mas qualquer 5 que você escolher, você tem que cobrir 100 do sílabo. Isso significa que eu tenho que projetar o papel de questão de tal forma que qualquer aluno de 5 pode escolher você tem que cobrir que 100 do syllabus ou 100 dos critérios.
Isso significa que isso são critérios relacionados. Não deve ser apenas fazer um teste deve ser critério relacionado, eu quero testar esses critérios então este item de teste. Eu quero testar esse critério, este item de teste. Por isso, deve ser critério baseado. Como que se eu disser que meu objetivo é aplicar, projetar, avaliar, síntese e eu projetar um papel de questão descreva isso, defina isso, explique isso, escreva uma nota curta, então nenhum dos critérios do meu curso é compatível com este sistema de exame.
Então, isso significa que a validade desse exame se deu. Em seguida, construir relacionada com o que são características fisiológicas características disso está lá. Capacidade de raciocínio, criatividade eles deveriam ter aplicado seus conhecimentos, não que lembrem e entreguem. Eu deveria fazer um papel de pergunta eles deveriam pensar e aplicar tão conceituação de problema de engenharia em caso de engenheiro da Btech.
Por isso, eles devem pensar que meu papel de pergunta deve aplicar um item de teste que eles têm que pensar, aplicar seus conhecimentos para resolver esse problema. Prove fx igual a fy, eu disse que é pouco um pouco de um tipo de um teste de fx não validado igual a prova de que este igual a este, pode haver a derivação está disponível no livro e ele se lembra e entregait. Qual é o significado desse item de teste? Nada.
Não estou testando a habilidade dele. Então, em vez de fazer isso eu deveria aplicar eu deveria eu deveria projetar um item de teste que eles têm que pensar e que podem eles ter que ansiar ou eles têm que adquirir essas habilidades de nível cognitivo mais alto em vez de apenas lembrar de conhecimento, esse conhecimento não é sabedoria lembrando conhecimento, ok. Portanto, esta é a validade do papel de ensaio.
Então confiabilidade. Novamente suponha que hoje eu faça um teste um aluno obter 100 marcos. Se eu projetar um papel de questão equivalente e eu fazer o teste um mês depois, é que o aluno fica com as 100 marcas não as 100 mesmo que 80 marcos. Se não for, então qual é a fiabilidade do teste? Se for habilidade, suponhamos que eu adquira essa habilidade, habilidade não pode ser esquecível. Então se eu hoje eu faço um teste, amanhã eu faço um teste pré teste pós teste o que eu tomar deve ser confiável sobre o teste.
Por isso, se eu projetar o papel de questão só teste a habilidade, então será teste confiável, ok.

Depois, há outro ponto, suponhamos essa questão. Esta pergunta tirada de um algum livro ou algum exemplo de internet suponhamos que esta seja as perguntas, se você escreve sua pergunta como essa forma e o aluno está totalmente confuso, o que tem que ser feito? Assim, o objetivo do sistema de avaliação é descobrir se o aluno atinge essa habilidade ou não. Objetivo do sistema de avaliação não é confundir o aluno.
Como professor eu sou muito claro eu quero testar esse conjunto de habilidades então meu item de teste deve mencionar claramente aquele conjunto de habilidades, teste desse conjunto de habilidades. Não é que eu dê uma pergunta muito longa e veja o que o cone faz? Qual é o significado? Nada. Suponhamos que eu queira saber se os alunos são saber calcular a densidade, como calcular o volume, como calcular esse tipo de coisa.
Mas se você diz que se eu der esse item de teste eu não posso entender se eles sabem disso, se eles sabem disso eu sei disso ou saibam disso.

Então, em vez de dar isso, se eu projetar a questão como essa forma e fazer a pergunta como essa forma calcular esse princípio para determinar isso, identifique isso então eu sei o que exatamente eu quero do aluno. E a minha declaração de problema deve muito claro o que tem de ser feita. Eu não devo não estar proporcionando este diagrama de blocos Posso fornecer este texto, aluno tem que desenhar este diagrama de blocos e responder um por uma questão.
Assim, todo item de teste é indicado um tipo de habilidade. Mais adiante você pode fazer que suponha que haja uma etapa múltipla de um problema, agora suponha que um aluno não tenha essa habilidade mas o próximo aluno de habilidade tem. Por isso, se você ele não puder fazer esse problema esse problema está ligado a esse problema então o valor de resposta do problema 1 será usado na resposta do problema 2.
E o aluno não sabe a resposta da versão 1, então o meu item de teste deve ser projetado tal qual ok se a sua resposta se o seu assumir que resposta da primeira pergunta está dentro deste intervalo, faça o próximo item. Por isso, posso especificamente identificar qual aluno de habilidade não tem. Portanto, o objetivo do sistema de avaliação é testar se o aluno tem a habilidade ou não, não confundir o aluno e não fornecer as marcas para o aluno.
Se você projetar um papel de questão escreva isso, defina isso, quadrado este, escreva uma nota curta sobre isso, inútil que não significa para a habilidade para a educação em engenharia. Por isso, quando você projeta um papel de pergunta para engenheiro do BE ele deve projetar que o seu curso objetiva conforme os acordos de Washington.
Assim, isso tem que ser testado, ou seja, o projeto de item de teste e análise e avaliação de item de teste e avaliação.
Talvez suponha que você esteja fazendo um que faça uma avaliação para um seminário para um projeto o que está fazendo?
Isso, ok seminário alguém dando um seminário, alguém está sentado lá e dando uma marca.
O aluno não sabe qual professor de área está marcando ele, qual área ele tem uma confiança menor, qual área ele tem uma confiança certa.
Por isso, antes de fazer a apresentação, você define os rubrics. Ok seu estilo de apresentação será esta marca, seu fluxo de conteúdo de slides será esta marca, esta será esta marca assim critérios você define e entrega para o aluno antes de fazer uma avaliação, então pegue a avaliação e forneça as marcas e dê o feedback para os alunos que você não tem essa habilidade esta habilidade, agora essa habilidade que você precisou melhorar, então especificamente você tem que mencionar qual habilidade ele é obrigado a melhorar.
Por isso, a avaliação não tem apenas propósito apenas de fornecer uma marca, ela tem que dizer aos alunos sim você dá o exame mas a sua essa habilidade e essa habilidade não está presente, assim ele vai adquirir essa habilidade. Agora se ele adquirir ou não é responsabilidade estudantil, aprendiz a responsabilidade aprendente será feito. Mas qualquer critério de avaliação deve ser bem definido, critérios para avaliação do projeto de avaliação você tem que definir os critérios ok você tem que fazer isso essas marcas, você tem que fazer isso essas marcas, você tem que fazer isso essas marcas, total essas marcas.
Então eu posso quando eu pegar a avaliação eu posso marcar que isso marca essa habilidade não, essa habilidade tem, essa habilidade tem, então eu posso fornecer as marcas assim em vez de ver a cara dos alunos e eu uso a maior parte do exame de laboratório nós tiramos isso dado uma reportagem e pedimos para o aluno dar um viva e fazer uma pergunta e ver a cara do aluno você colocou uma marca. Isso não avalia o aluno, novamente dá uma marca mas não avalia o aluno.
O aluno não sabe de nada se você ver a maior parte do relatório do laboratório de tempo ser igual a partir de ano após ano. E se você perguntar a eles eles não sabem de nada qual é o problema? Problema é que conforme os acordos de Washington ou o aluno de diretrizes da NBA tem que saber como projetar o experimento, como interpretar os dados, como analisar os dados, como coletar os dados toda habilidade eu tenho que testar toda e habilidade individual e fornecer as marcas.
Aí eu posso dizer que sim meu design de curso é cumprir o sistema de avaliação. Então eu projeto um curso como que eu tenho um sílabo enorme de sílaba está disponível mas nada é ensinado, qual é o uso da síllaba? Nada. Por isso, a sílaba não melhora a qualidade do aluno, por isso posso dizer que projetei a habilidade, definido a habilidade e meu sistema de exame só está ok definir isso, descrever isso, desenhar isso, derivar isso, terminar então não estou testando a habilidade.
Então o sistema de exame não é válido, o sistema de exame não é confiável, os itens de teste não são válidos eles não são confiáveis, não são critérios baseados em todo tipo de coisas estão lá, ok. Então, isso é sobre a técnica de avaliação e avaliação, ok obrigado.