Dissertações
URI Permanente para esta coleçãohttps://hdl.handle.net/20.500.14135/636
Navegar
18 resultados
Resultados da Busca
Item Um estudo sobre o plano amostral do SAEB(Dissertação, 2020-11-03) Lustosa, Laene Ascenso; Vieira, Marcel de ToledoA presente dissertação foi desenvolvida no âmbito do Mestrado Profissional em Gestão e Avaliação da Educação Pública (PPGP) do Centro de Políticas Públicas e Avaliação da Educação da Universidade Federal de Juiz de Fora (CAEd/UFJF). O caso de gestão estudado discutiu alguns aspectos do processo de coleta de dados do Saeb, mais especificamente no que diz respeito ao plano amostral e à estimação dos resultados, a fim de responder à seguinte pergunta: diante das diversas mudanças nos elementos que orientam o processo de coleta de dados do Sistema Nacional de Avaliação da Educação Básica (Saeb) desde a sua criação, o modelo adotado ainda se mostra adequado? Portanto, foi estabelecido como objetivo desta dissertação avaliar o plano amostral do Saeb e como se dá a estimação dos seus resultados, a fim de identificar oportunidades de melhorias nas metodologias adotadas. Para alcançar esse objetivo, a dissertação apresentou o histórico de reformas educacionais ocorridas internacionalmente e como esse movimento influenciou o surgimento da avaliação em larga escala no mundo, e sua chegada ao Brasil dando origem ao Saeb. Além disso, foi estudado o histórico de evolução do Saeb e seu plano amostral para entender o cálculo e a expansão dos resultados com base no plano amostral atual, a fim de identificar limitações desse processo. A partir daí, foi possível propor estratégias para minimizar os efeitos das limitações identificadas tornando o Saeb mais adequado à avaliação educacional em larga escala no Brasil. Como hipótese, assumiu-se que, depois de passar por diversas modificações, o plano amostral do Saeb precisaria ser estudado e avaliado para entender elementos que poderiam ser atualizados nesse modelo. Para tanto, a metodologia adotada é a revisão bibliográfica e documental, seguida de análise de dados coletados pelo Saeb 2017 com uso de simulação para medir eficiência do plano amostral atual por meio de comparação de resultados estimados a partir de Amostragem com os resultados obtidos na aplicação censitária. A comparação entre diferentes metodologias de estimação de variância para o cálculo do tamanho da amostra mostrou que a metodologia adotada atualmente é eficiente e adequada, mas que há espaço para a promoção de melhorias no plano amostral. Também se assumiu que o Saeb, como avaliação em larga escala, apresenta características e limitações intrínsecas a esse modelo de avaliação. O conhecimento desse contexto conduziu à identificação de oportunidades de melhoria no modelo da avaliação e à elaboração de um plano de ação pautado na implementação de mudanças que possibilitem uma evolução do Saeb. Assim, foram propostas ações voltadas para o aperfeiçoamento do plano amostral, para a ampliação do ciclo de coleta de dados visando ao aprofundamento das informações obtidas e para o fornecimento de mais insumos de contextualização dos resultados da avaliação.Item A política da OCDE para a educação básica: das mesas de reuniões internacionais à carteira escolar(Dissertação, 2019-08-12) Fernandes, Edison Flávio; Silva, Maria Abádia daA presente dissertação vincula-se ao Programa de Pós-Graduação em Educação da Faculdade de Educação da Universidade de Brasília (PPGE/FE/UnB), na linha de pesquisa em Políticas Públicas e Gestão da Educação (POGE) e elege como objeto investigativo a meta 7 e, em específico, a estratégia 7.11 do Plano Nacional de Educação (PNE) 2014-2024, que trazem, como eixos mensuradores de qualidade da educação nacional, a projeção de resultados do Índice de Desenvolvimento da Educação Básica (Ideb) e as proposições do Programa Internacional para Avaliação de Estudantes (Pisa). Elegeu-se como objetivo principal desvelar como o movimento de interesses e forças da Diretoria de Educação e Habilidades da OCDE, subsumido no programa Pisa, interferiu no processo de elaboração do PNE 2014-2024 e, como os objetivos específicos: analisar, na trajetória histórica da OCDE, a posição e os interesses incorporados aos programas, projetos e produção documental afetos à sua política educacional; compreender a concepção de qualidade educacional proposta pela OCDE; e analisar o processo de construção de consenso e os dissensos no tocante à meta sete e à estratégia 7.11 do PNE 2014-2024. As questões investigativas foram: como e por que um indicador internacional foi transformado e aceito como o principal elemento de política pública para mensuração da qualidade da educação básica pública brasileira? Como os atores governamentais, empresariais e segmentos da sociedade civil se posicionaram? Houve embates e contraposições na definição deste critério de qualidade? Que conceito de qualidade de educação a OCDE oferece ao seu parceiro chave Brasil? Metodologicamente, optou-se por triangular a) referências documentais da OCDE que evidenciassem sua posição ideológica na política educacional que dissemina por meio de publicações, relatórios, discursos e demais fontes documentais; b) documentos do Congresso Nacional do Brasil e, em particular, da Comissão de Educação da Câmara sobre a tramitação do PL 8035/2010: notas taquigráficas, atas e documentos digitais diversos; c) documentos das instituições sociais e entidades científicas que compuseram a tramitação do PL que deu gênese ao PNE 2014-2024. Nessa dinâmica, mesmo reconhecendo que os documentos são partes do real e não todo o real, elegeram-se a hegemonia e a ideologia como categorias filosóficas e qualidade e regulação da educação como categorias empíricas emersas durante a leitura, sistematização e elaboração da análise. O estudo conclui que há uma vertente política hegemônica de pensamento neotecnicista e de objetivos corporativos nos embates para definição das metas e estratégias do atual PNE, que, ao valer-se de discursos, posições, jargões, indicadores e ideologias próprios da OCDE, consolidou seu propósito de mensurar a qualidade da educação em termos regulatórios e meritocráticos, consentâneo à perspectiva de formação de capital humano para o mercado defendida pelos reformadores empresariais da educação. Essa vertente política oculta ideologicamente seu ethos de classe, defendendo o princípio da equidade, da oportunidade para todos, do esforço pessoal e da individualização como requisitos chave ao aumento de desempenho escolar e à justiça social no processo de ensino-aprendizagem. Para garantia da qualidade educacional, a ser expressa em números, valem-se da estatística e das avaliações de larga escala, não como elementos subsidiários à investigação de uma qualidade com variáveis socioeconômicas muito mais complexas, mas como expressões definitivas da boa educação e das melhores práticas. O alinhamento de posições ideológicas hegemônicas (responsabilização, meritocracia, premiação e punição) gera impactos diretos na gestão da escolas, na vida dos trabalhadores da educação e na formação dos estudantes.Item Uso de regressão isotônica suavizada na detecção de funcionamento diferencial do item(Dissertação, 2019) Souto, Camila Neves; Gomes, Antônio EduardoA presente dissertação tem como objetivo enriquecer o estudo de Funcionamento Diferencial do Item (DIF, do inglês, Diferencial Item Functioning). Para isso, foi feita revisão bibliográfica de alguns dos métodos já existentes para detecção de itens que apresentam DIF e se propôs um método não paramétrico, que estima as curvas característica dos itens dos dois grupos comparados via regressão isotônica. O método proposto foi comparado com outros métodos já existentes para detecção de itens com DIF, Mantel-Haenzel e Regressão Logística. O estudo foi feito a partir de simulações com 100 replicações para cada configuração do teste. As configurações variam de acordo com a dimensão do DIF, o tipo de DIF - uniforme ou não-uniforme - o tamanho da amostra e a proporção de respondentes em cada grupo. A comparação consistiu em observar, com os resultados das simulações, a proporção de detecção de DIF em itens que de fato apresentavam DIF e a proporção de falso DIFs apontados pelos métodos. Além disso, foi feita uma an_alise do impacto desses itens que apresentam DIF em um teste na estimação da proficiência dos respondentes.Item Resultados do Pisa 2015 e seu uso para a formulação de políticas públicas em educação(Dissertação, 2018-02-26) Alves, Gleidilson Costa; Coelho Junior, Francisco AntonioEsta pesquisa teve como objetivo testar relações preditivas entre variáveis de contexto selecionadas ¿ da família, do aluno e da escola ¿ sobre o desempenho acadêmico dos examinandos em Ciências, Matemática e Leitura, na edição de 2015 do Pisa no Brasil. Visa, ainda, descrever possíveis efeitos tangíveis dos resultados do exame e dos questionários de contexto para a criação de políticas públicas em educação no Brasil, uma vez que se espera que os resultados do Pisa possam ter subsidiado ações governamentais ou políticas públicas na área da educação, no Brasil. A pesquisa está dividida em duas etapas, uma quantitativa e outra qualitativa. Para a etapa quantitativa foram realizadas análises exploratórias/descritivas, análise de correlação e análise de regressão linear múltipla. Para a parte qualitativa foram realizadas entrevistas com os representantes das secretarias da educação junto ao Inep, com o objetivo específico de descrever os efeitos das informações geradas pelo Pisa no processo de formulação de políticas públicas em educação. Os resultados indicam que as informações do Pisa não são utilizadas ou quando muito, são pouco utilizadas. Por outro lado, observou-se o pleno uso de outras avaliações de larga escala internas (estaduais) e/ou externas (como SAEB/Prova Brasil). A maior parte das hipóteses deste estudo foram confirmadas em algum grau, para alguma região do Brasil. Conclui-se que é necessária ação estatal para fomentar maior uso das informações que advém do Pisa para a formulação de ações mais contundentes para sanar parte do problema educacional brasileiro. Sugere-se, para estudos futuros, a investigação do uso de outras variáveis que podem estar impactando o resultado acadêmico dos estudantes e uma investigação detalhada das práticas dos Estados melhor colocadas nos exames de larga escala.Item A validade de construto das questões de língua inglesa do ENEM: um olhar para o conteúdo e a matriz de referência(Dissertação, 2017-11-10) Araújo, Sara Domingos de Sousa; Quevedo-Camargo, GladysEsta pesquisa baseou-se em minhas motivações e inquietações pessoais como pesquisadora-tecnologista em informações e avaliações educacionais do Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (INEP), relacionadas ao meu trabalho com as chamadas avaliações de larga escala e seus processos de elaboração e composição de itens. Este trabalho buscou a verificação da defensibilidade das quinze questões de língua inglesa do Exame Nacional do Ensino Médio (ENEM) entre os anos de 2013 e 2015, por meio da análise de seu conteúdo e da problematização da Matriz de Referência (MR) do Exame. Os questionamentos feitos pelos autores Tumolo e Tomich (2007) no que tange à ideia de itens defensáveis e não defensáveis conduziram a proposta desta pesquisa, permeando seu objetivo geral de analisar a validade de construto das questões de inglês das provas de Linguagem, códigos e suas tecnologias do ENEM 2013-2015. Autores como Alderson (2000), Brown (2003) e Weir (2005), além de pesquisas bibliográficas na área de avaliação fundamentam a base teórica deste trabalho no que diz respeito à composição do construto leitura nas questões de língua inglesa do ENEM. Por meio do método análise documental para a problematização da MR e da utilização do esquema sociocognitivo de Weir (2005) para a validação de conteúdo das referidas questões, foram constatadas a validade de seu construto leitura, pautado na atual matriz de referência (MR), seus documentos oficiais norteadores e nas variáveis descrita ao longo da Fundamentação Teórica desta dissertação. O processo de validação dos itens relacionado à análise das habilidades pertencentes à Competência 2 da MR, que guia o processo de elaboração dos itens de língua inglesa, foi validado por duas especialistas da área de avalição, com larga experiência nessa Matriz. Os resultados das análises indicam que dos quinze itens analisados, catorze foram validados com relação ao conteúdo e apenas um não correspondeu a uma das demandas utilizadas para a análise. Em relação à análise da MR, quatro itens não correspondem ao proposto pelos microdados produzidos pelo INEP. Como conclusão, este estudo apresenta sugestões para aprimoramento desse construto por meio de descritores para as habilidades da MR, com o objetivo de guiar as futuras elaborações das questões de língua inglesa do ENEM.Item Criação de novos indicadores de qualidade na educação superior para compor o conceito preliminar de curso como indicador de qualidade(Dissertação, 2017-03-10) Dourado, Renan Carlos; Reis, Marcelo MenezesDiante da expansão da educação superior no Brasil nos últimos anos, fez-se necessária uma contínua evolução dos instrumentos de avaliação dos cursos de graduação brasileiros. Um sistema avaliativo dinâmico, capaz de analisar os diversos objetivos das instituições de ensino superior emerge juntamente com o avanço da capacidade de coleta de informações cada vez mais relevantes para diagnósticos de lacunas e acompanhamento de metas, em busca de uma educação superior de qualidade. É nesse contexto que o conceito preliminar de curso (CPC) se destaca como principal indicador de regulação e de qualidade dos cursos de graduação brasileiros. Neste trabalho, após uma análise dos componentes do conceito preliminar de curso, são propostos novos componentes à luz da capacidade do censo da educação superior de fornecer informações de alunos e docentes. É demonstrado que esses novos componentes podem ser tratados estatisticamente para compor o CPC assim como os demais componentes já existentes. Além disso, utilizando a análise fatorial, foi possível reduzir seis variáveis sobre docentes em dois fatores, e a partir das cargas fatoriais obtidas, foi possível definir e calcular dois novos indicadores sobre docentes de cursos de graduação. Os resultados obtidos pelos novos componentes e indicadores criados apontam para uma maior caracterização do CPC como indicador de qualidade da Educação Superior.Item Determinantes do sucesso escolar: uma análise multinível a partir dos dados do Pisa 2015(Dissertação, 2017) Brito, Marcus Vinicius Soares de; Takasago, MileneA preocupação com a qualidade do sistema educacional brasileiro tem aumentado significativamente nos últimos anos, principalmente quando nos deparamos com os resultados insatisfatórios dos estudantes brasileiros, no período de 2000 a 2015, em avaliações nacionais e internacionais, como o Sistema de Avaliação da Educação Básica (Saeb) e o Programa Internacional de Avaliação de Estudantes da OCDE (Pisa). Considerando o impacto da educação sobre o progresso econômico de indivíduos e nações, este estudo tem como objetivo a avaliação de fatores que afetam o rendimento escolar no Brasil, principalmente aqueles diretamente impactados por políticas públicas do Governo federal, tendo sido utilizada como ferramenta de análise os modelos multinível aplicados aos dados do Pisa de 2015. Além da identificação dos determinantes, o estudo avalia o ¿efeito escola¿, que é a proporção da variação do desempenho dos alunos não explicada no modelo que é devida ao nível da escola. No modelo sem nenhuma das variáveis explicativas (modelo nulo), este efeito foi de 0,351 para o Brasil, indicando por esta amostra que 35,1% da variabilidade observada no desempenho dos estudantes no Brasil se deve à diferença entre as escolas. No modelo em que foram inseridas as características ligadas ao aluno e sua família, o ¿efeito escola¿ diminuiu para 22,1% e, adicionando duas variáveis representando o ¿efeito dos pares¿, o efeito escola estimado foi de 12,5%. No modelo final proposto, composto pelas variáveis de características do aluno e sua família, pelas de ¿efeito dos pares¿ (características relacionadas à comunidade atendida pela escola) e pelas variáveis inerentes à estrutura da escola, o efeito escola foi de 9,4%. Em relação aos determinantes do desempenho escolar, foi identificado que os fatores associados ao aluno e sua família são de extrema relevância, mas que a diferença devida a recursos oferecidos pela escola também é relevante, o que permite a adoção de políticas públicas educacionais planejadas de forma mais eficiente.Item Uso dos resultados do SAEB/Prova Brasil na formulação de políticas educacionais estaduais.(Dissertação, 2017) Basso, Flávia Viana; Ferreira, Rodrigo RezendeO objetivo da pesquisa foi verificar o uso dos resultados do SAEB/Prova Brasil na formulação de políticas públicas educacionais vigentes nos estados brasileiros. Há um debate relativamente recente na área educacional sobre o uso efetivo dos dados advindos de avaliações para a formulação de políticas educacionais. A identificação do uso dos resultados pode auxiliar gestores e pesquisadores no reconhecimento das potencialidades e dos limites que as avaliações de larga escala trazem para o cenário educacional e, principalmente, para a formulação de políticas públicas. O estudo foi realizado em três etapas metodológicas principais. A primeira etapa consistiu em uma pesquisa documental, na qual foi possível descrever a compilação dos resultados das duas últimas edições do SAEB/Prova Brasil (2013 e 2015), bem como explorar os conteúdos dos planos estaduais de educação atualmente vigentes nas unidades federativas do Brasil. A segunda se referiu à aplicação de um questionário qualitativo-quantitativo, elaborado pela autora, que gerou informações sobre o uso dos dados do SAEB/Prova Brasil em 23 das 27 unidades da federação. Para exploração dos dados dessa etapa, foram utilizadas técnicas de análise estatística descritiva e análise de conteúdo categorial temática a posteriori. Por fim, a terceira etapa consistiu na realização de entrevistas em profundidade com nove Interlocutores Estaduais de Avaliação da Educação Básica, escolhidos por conveniência com base nas informações coletadas na etapa de questionário, seguidas de análise de conteúdo e análise categorial temática a priori, que complementaram informações sobre o uso dos dados do SAEB/Prova Brasil. Os resultados indicaram que, na maioria dos estados, os dados estão sendo utilizados como subsídio para formulação de políticas educacionais, com destaque para o uso do IDEB. As políticas identificadas estão relacionadas ao uso dos dados como instrumento de gestão, que englobam ações de monitoramento e estabelecimento de metas das escolas; ao uso para a formação de professores, que indicam um caráter mais pedagógico do uso desses dados; e ao uso informativo, no qual os resultados são utilizados para informar a situação da qualidade da educação nas escolas estaduais. Em menor escala, os resultados estão sendo utilizados para a produção de materiais pedagógicos, como critério de distribuição de recursos e para políticas de incentivo salarial. Conclui-se que os dados gerados pela avaliação nacional estão sendo, de fato, utilizados na formulação de políticas educacionais. Contudo, é necessário ampliar as informações disponibilizadas para além do desempenho dos alunos e das taxas de rendimento, bem como acrescentar informações sobre o cenário educacional brasileiro.Item Avaliação nacional da alfabetização e provinha Brasil: percepção dos gestores e suas funções(Dissertação, 2015-12-21) Pereira, Patrícia da Silva Onório; Rocha Neto, João Mendes daEste estudo teve como objetivo principal compreender de que forma os resultados das avaliações nacionais de alfabetização ANA e Provinha Brasil contribuem para o diagnóstico da alfabetização no Brasil e são utilizados pelos gestores estaduais de educação. Ambas as avaliações são aplicadas pelo Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (Inep) em diferentes etapas do ciclo de alfabetização do ensino fundamental. A ANA é a mais nova avaliação a compor o escopo do SAEB e deve ser aplicada ao final do 3º ano do ensino fundamental, com vistas a indicar se os alunos estão alfabetizados aos oito anos de idade. Para tanto, realizou-se pesquisa com abordagem qualitativa, a partir da triangulação de métodos baseada na realização de grupo focal, entrevistas semiestruradas e análise documental. A pesquisa revelou que as avaliações proporcionam um retrato da alfabetização dos alunos brasileiros, mas ainda há grande dificuldade por parte de gestores, escolas e professores em utilizar seus resultados. Quanto à possibilidade de integração entre os resultados da ANA e da Provinha Brasil, a análise das matrizes de referência mostrou que isso não é possível de forma direta, já que elas estão em escalas diferentes e entregam diferentes produtos do processo de aprendizagem. Entretanto, para as Unidades da Federação que não dispõem de sistema próprio de avaliação, os resultados das avaliações nacionais são muito importantes, como única fonte de informação. Verificou-se que a influência dos resultados das avaliações na gestão de políticas públicas, como o próprio PNAIC, é incipiente e não há influência direta dos resultados das avaliações, ANA e Provinha Brasil, nas políticas educacionais desenvolvidas pelos Estados pesquisados.Item Gestão da ambiência no Enem: a dimensão oculta nos exames em larga escala(Dissertação, 2015-07-10) Mazzoni Filho, Marcos de Carvalho; Nassar, Silvia ModestoEsta investigação tem como objetivo compreender a gestão da ambiência nos locais de aplicação de exames e avaliações censitários, aplicados nacionalmente, em larga escala. O recorte teórico está baseado em uma revisão integrativa da literatura de temas considerados na gestão ambiental: 1) ambiência; 2) ambiente escolar; 3) gestão e liderança; e 4) avaliação em larga escala. Foram analisados os aspectos de ambiência avaliativa que interferem no desenvolvimento das competências e habilidades de participantes durante a aplicação de testes. O estudo se desenvolveu a partir da capacitação dos Coordenadores do Local de Aplicação (CLA) do Enem 2012, realizada pelo consórcio Cespe/Unb e Fundação Cesgranrio. Foi analisada, também, a capacitação dos coordenadores e os conhecimentos obtidos por eles, mediante a análise de suas respostas aos Instrumentos de Avaliação nºs 1 e 2. Os resultados apontam para a necessidade de se compreender melhor como o ambiente e a ambiência influenciam no desempenho cognitivo dos participantes de avaliações externas censitárias, em nível nacional, e para a gestão ambiental de exames, visando à saúde avaliativa e a uma possível alteração no perfil e na função do CLA, para o de um gestor ambiental, notadamente com preocupação e foco no participante, e visando, ainda, à humanização dos locais de aplicação de exames, avaliações e testes coordenados pela equipe de pesquisadores do Inep.