OFICINA DE APROPRIAÇÃO DE RESULTADOS Analista de Instrumento de Avaliação : Tatiane Moraes

Transcrição

1 OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 Analista de Instrumento de Avaliação : Tatiane Moraes

2 SAEMS 2011 Objetivo Analisar e interpretar os resultados do SAEMS para (re)planejamento das ações pedagógicas a serem definidas pelas escolas envolvidas no processo de avaliação.

3 SAEMS 2011 Seção 1: Matriz de Referência

4 SAEMS 2011 Aspectos a serem considerados em uma Matriz Constitui um parâmetro de orientação; Apresenta o objeto da avaliação; Caráter de universalidade; Orientação na elaboração de itens.

5 Quanto SAEMS ao comportamento 2011 mental: - competências e habilidades cognitivas. - modalidades estruturais da inteligência, isto é, ações e operações que utilizamos para estabelecer relações com e entre objetos, pessoas, fenômenos e situações. - operações mentais: identificar, localizar comparar, classificar, ordenar, estabelecer relações, interpretar, analisar, inferir, resolver, dentre outras.

6 SAEMS 2011 É bom ressaltar que as matrizes de referência não englobam todo o currículo escolar. É feito um recorte com base no que é possível aferir por meio do tipo de instrumento de medida utilizado na avaliação e que, ao mesmo tempo, é representativo do que está contemplado nos currículos. Vejamos um exemplo:

7

8 SAEMS 2011 Em Matemática, as competências englobam três níveis. Veja um exemplo em Geometria. 1)Firmar conceitos e reconhecer figuras geométricas planas ou espaciais. Conceituação 2)Mobilizar conceitos e propriedades geométricas para estabelecer relações ou efetuar cálculos envolvendo elementos de uma figura. Manipulação 3) Utilizar conceitos e propriedades geométricas para resolver problemas. Aplicação

9 SAEMS 2011 A Matriz de Matemática está estruturada em quatro temas: Espaço e Forma Grandezas e Medidas ratamento da Informação Números, Operações e Álgebra

10 SAEMS 2011 Aspectos a considerar sobre Descritores Os descritores têm origem na associação entre os conteúdos curriculares e as operações mentais desenvolvidas pelo estudante que se traduzem em certas habilidades. Constituem uma sumária descrição das habilidades esperadas ao final de cada período escolar avaliado Implicam, como fundamento, aspectos conceituais ou teóricos relacionados a diferentes áreas do conhecimento a serem avaliadas.

11 SAEMS 2011 A função dos descritores é, portanto, indicar as habilidades que serão objeto de avaliação, no conjunto de itens que compõe o teste em cada período de escolaridade. Os descritores: -- pretendem indicar quais as habilidades que se espera que os estudantes tenham desenvolvido; --constituem a referência para a elaboração dos itens que devem compor o teste de desempenho. É a matéria-prima para elaboração dos itens.

12 SAEMS 2011 Das Matrizes aos itens dos testes de proficiência

13 SAEMS 2011 O QUE É UM ITEM? É uma questão do teste de larga escala. Avalia uma única habilidade, portanto é unidimensional. Obtém do examinado uma resposta que permita inferências quanto às suas construções mentais.

14 SAEMS 2011 Grau de Dificuldade diz respeito à adequação entre a formulação do item e a capacidade de resposta do estudante. Considerar Discriminação capacidade do item de distinguir estudantes com diferentes níveis de habilidade.

15 SAEMS 2011 O ITEM E SUAS PARTES

16 Recomendações para a elaboração do enunciado SAEMS enfocar uma única situação-problema; - incluir no enunciado figura geométrica, recorte de artigo de jornal ou revista, gráfico, fotografia, tabela ou quadro, que contenha informações necessárias à sua elaboração; - redigir o enunciado de forma direta e afirmativa; - utilizar vocabulário adequado ao nível de escolaridade do estudante; 10

17 Recomendações para a elaboração do enunciado SAEMS excluir qualquer referência discriminatória quanto a etnia, religião, gênero ou orientação sexual; - observar as normas da ABNT na apresentação de textos e figuras; - não utilizar pegadinhas nem dicas ; - não utilizar termos como sempre, nunca, todo, totalmente. 10

18 Recomendações: Instrução para resposta SAEMS 2011 estar diretamente relacionada a um único descritor da Matriz de Referência; formular de maneira positiva; a tarefa desejada em conexão com o problema proposto. 11

19 Lembretes SAEMS 2011 Quanto à Redação Enunciado: deve ser claro, preciso e conciso. Gabarito: exclusivamente um. Distratores: devem ser plausíveis. Suportes: devem conter informações relevantes. 13

20 SAEMS 2011

21 SAEMS 2011

22 SAEMS 2011 ATIVIDADE 1 Dinâmica dos itens. Analisar os itens.

23 SAEMS 2011 ATIVIDADE 2 ESTUDO DA MATRIZ. ANOTAR NA CARTOLINA A HABILIDADE AVALIADA PELO ITEM. RELACIONAR A HABILIDADE A UMA COMPETÊNCIA DA MATRIZ.

24 SAEMS resultado por percentual de acerto por descritor 3º Ano do Ensino Médio 80,0 70,0 60,0 50,0 40,0 Espaço e Forma D02 Espaço e Forma D08 Espaço e Forma D10 Espaço e Forma D11_1EM Espaço e Forma D12 30,0 Espaço e Forma D13 20,0 10,0 0,0 D02 D08 D10 D11_1EM D12 D13 D14 Espaço e Forma D15 D16 D17 D25 D26 D27 Grandezas e Medidas D28 D71 D73 Trat. Da Inform. Espaço e Forma D14 Espaço e Forma D15 Espaço e Forma D16 Espaço e Forma D17 Grandezas e Medidas D25 Grandezas e Medidas D26 Grandezas e Medidas D27 Grandezas e Medidas D28

25 SAEMS resultado por percentual de acerto por descritor 90,0 80,0 70,0 60,0 50,0 40,0 30,0 20,0 10,0 0,0 3º Ano do Ensino Médio D33 D40_1EM D44_1EM D45 D46 D51 D54 D55 D56_1EM D57 D58 D59 D60 D61 D62 D63_1EM D64 D65 D66 D67 D68 Números e Operações / Álgebra e Funções

26 SAEMS resultado por percentual de acerto por descritor 80,0 3º Ano da Alfabetização 70,0 60,0 50,0 40,0 30,0 20,0 10,0 Espaço e Forma D01 Espaço e Forma D03 Espaço e Forma D04 Grandezas e Medidas D20 Grandezas e Medidas D22 Grandezas e Medidas D23 0,0 D01 D03 D04 D20 D22 D23 Espaço e Forma Grandezas e Medidas

27 SAEMS resultado por percentual de acerto por descritor 90,0 3º Ano da Alfabetização 80,0 70,0 60,0 50,0 40,0 30,0 20,0 10,0 0,0 D30 D31 D32 D34 D35 D36 D37 D38 D69 D70 Números e Operações D30 Números e Operações D31 Números e Operações D32 Números e Operações D34 Números e Operações D35 Números e Operações D36 Números e Operações D37 Números e Operações D38 Trat. Infor. D69 Trat. Infor. D70 Números e Operações Trat. Infor.

28 Seção 2: Interpretação pedagógica dos resultados

29 SAEMS 2011 Formas de Apresentação dos Resultados Proficiência média médias comparadas Participação Distribuição do percentual de estudantes por nível de proficiência e padrão de desempenho Evolução do percentual de estudantes por padrão de desempenho Percentual de acerto por descritor Resultados por estudante

30 Resultado SAEMS 3EM

31

32

33 SAEMS 2011 Proficiência é a medida que representa um determinado traço latente (aptidão).

34 SAEMS 2011 Participação ( número de estudantes). ESTADO POLO MUNICÍPIO ESCOLA

35 SAEMS Evolução do percentual 2011 de estudantes por padrão de desempenho

36 Muito Crítico Intermediário: Adequado: Crítico: : Há um Ampliam-se Somam Resolvem salto cognitivo números asproblemas habilidades no racionais campo envolvendo matemáticas Numérico constituídos variação e opelo relativas campo mesmo proporcional Algébrico ao número estudo começa entre das de casas funções. maisa sede duas Os desenvolver. decimais; estudantes grandezas, Osresolvem estudantes porcentagens problemas calculam mais complexas, envolvendo o valor numérico porcentagem, calculam funçãodeafim, ouma valor aplicam reconhecem expressão numérico definição algébrica, alguns uma de logaritmos, função, calculam polígonos, calculam probabilidade, reconhecem volume, o contorno aresolvem identificam equação problemas de ouma termo polígono reta envolvendo dea com partir umaou de PG, asem lei dois calculam angular malha de seus de quadriculada apontos tales medida etc. ou de do um perímetro interpretam ponto edegráficos sua uminclinação, polígono de coluna irregular, calculam por meio reconhecem área datotal leitura de de uma valores gráfico pirâmide, no eixo linha, aplicam vertical localizam o Teorema pontos de no Pitágoras plano cartesiano em figurase espaciais. identificam elementos de figuras tridimensionais. SAEMS 2011

37 Grau de realização das ações educacionais Caracterização do desempenho escolar Políticas públicas voltadas à promoção da equidade Estabelecimento e monitoramento das metas de qualidade educacional Padrões de desempenho estudantil Identificação do percentual de estudantes em risco pedagógico (evasão, reprovação ou abandono)

38 Uso dos Resultados 1. Gestor De Rede: Planejamento e execução de políticas públicas Criação de metas de qualidade e equidade educacionais Implementação de medidas de responsabilização Políticas de incentivos diretos ou indiretos Ações de formação continuada de professores De Escola: Elaboração do projeto da escola Monitoramento da qualidade de ensino Subsídio para avaliação institucional

39 Uso dos Resultados 2. Professor Intervenção pedagógica Elaboração de projetos especiais Foco nos estudantes com dificuldades Ações de reforço escolar Planejamento das ações de sala de aula Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica

40 Uso dos Resultados 3. estudante Acompanhamento individual do desempenho escolar pelos estudantes e seus familiares Informações sobre a qualidade dos serviços educacionais oferecidos

41 Educar é impregnar de sentido o que fazemos a cada instante! Paulo Freire

42 Obrigada!