Search

Almost all quantitative studies in educational assessment, evaluation and educational research are based on incomplete data sets, which have been a problem for years without a single solution. The use of big identifiable data poses new challenges in dealing with missing values. In the first part of this paper, we present the state-of-art of the topic in the Brazilian education scientific literature, and how researchers have dealt with missing data since the turn of the century. Next, we use open access software to analyze real-world data, the 2017 Prova Brasil , for several federation units to document how the naïve assumption of missing completely at random may substantially affect statistical conclusions, researcher interpretations, and subsequent implications for policy and practice. We conclude with straightforward suggestions for any education researcher on applying R routines to conduct the hypotheses test of missing completely at random and, if the null hypothesis is rejected, then how to implement the multiple imputation, which appears to be one of the most appropriate methods for handling missing data., Quase todos os estudos quantitativos em aferição, avaliação e pesquisa educacional são baseados em conjuntos de dados incompletos, que têm sido um problema há anos sem solução única. O uso de grandes dados identificáveis apresenta novos desafios para lidar com valores ausentes. Na primeira parte deste artigo, apresentamos o estado-da-arte do tópico na literatura científica educacional brasileira e como os pesquisadores têm tratado os dados omissos. Em seguida, usamos o software de acesso livre para analisar dados do mundo real, a Prova Brasil 2017, para várias unidades da federação, e documentamos como pressuposto de dados omissos completamente aleatórios pode afetar os resultados estatísticos, as interpretações e implicações subsequentes para políticas e práticas. Concluímos com sugestões diretas para qualquer pesquisador de Educação sobre a aplicação de rotinas R para realizar o teste de hipóteses de dados omissos completamente aleatórios e, se a hipótese nula for rejeitada, como implementar a imputação múltipla, que parece ser um dos métodos mais apropriados para manipular dados ausentes., Casi todos los estudios cuantitativos en evaluación, evaluación e investigación educativa se basan en conjuntos de datos incompletos, que han sido un problema desde hace años sin solución única. El uso de grandes datos identificables presenta nuevos desafíos para manejar los valores ausentes. En la primera parte de este artículo, presentamos el estado del arte del tópico en la literatura científica educativa brasileña y cómo los investigadores han tratado los datos omisos. A continuación, utilizamos el software de acceso libre para analizar datos del mundo real, la Prueba Brasil 2017, para varias unidades de la federación, y documentamos cómo la asunción de datos omisos completamente aleatorios puede afectar los resultados estadísticos, las interpretaciones e implicaciones subsecuentes para políticas y prácticas. Concluimos con sugerencias directas para cualquier investigador de Educación sobre la aplicación de rutinas R para realizar la prueba de hipótesis de datos omisos completamente aleatorios y, si la hipótesis nula es rechazada, cómo implementar la imputación múltiple, que parece ser uno de los métodos más apropiados para manipular datos ausentes., Centro-01-0145-FEDER-000019-C4-Centro de Competências em Cloud Computing and by the Brazilian Coordination for the Improvement of Higher Education Personnel Foundation, through a post-doc fellowship for a research project, which took place at the Faculty of Sciences of the University of Beira Interior, Portugal (Capes-PVE88881.169888/2018-01), and partially supported by the Brazilian National Council for Scientific and Technological Development (CNPq-process 440172 / 2017-9).

Resumo O objetivo do estudo aqui relatado é investigar o impacto de recursos e práticas familiares no desempenho escolar de alunos dos anos iniciais do Ensino Fundamental. Selecionaram-se 299 alunos que participaram do GERES 2005, aos quais se aplicou um questionário com 145 questões. Empregaram-se métodos quantitativos: modelagem de equações estruturais. Dentre os principais resultados, destaca-se que os fatores capital cultural objetivado, capital informacional, práticas de escrita e interação pais e filhos foram impactados pelo nível socioeconômico; as práticas de escrita foram a variável de maior impacto no desempenho em português; e o capital informacional, o fator de maior impacto em matemática. Ocorreu vantagem significativa das escolas privadas no que se refere à proficiência dos alunos; e a matemática se mostrou mais diretamente dependente do tipo de escola Abstract The goal is to investigate the impact of family resources and practices on the school performance of students from elementary schools. We selected 299 students who participated in the GERES 2005. We used a questionnaire with 145 questions. We applied quantitative methods: structural equation modeling. Among the main results, we highlight: four factors - objectified cultural capital, informational capital, family writing practices, and parent-child interaction - were impacted by socioeconomic status; family writing practices were the variable with the biggest impact on Portuguese performance, and informational capital was the factor with the greatest impact on Mathematics; significant advantage of private schools on students’ proficiency; Mathematics was more directly related to school type.

Resumo Explorando o conceito de segmentação, este artigo procura demonstrar como a expansão dos sistemas de ensino argentino e brasileiro se articula a processos de diferenciação da oferta escolar que contribuem para a produção e a reprodução das desigualdades educacionais. Partindo da análise de estatísticas históricas sobre a variação da alfabetização e das matrículas desde o final do século XIX e de documentos que registram as transformações na organização dos sistemas de ensino, o artigo mostra, em primeiro lugar, que, em ambos os sistemas, processos de segmentação se apoiaram e ainda se apoiam mais amplamente na clivagem entre educação pública e privada do que na diferenciação do currículo da escola pública. Além disso, mostra que essa clivagem é bastante recente na Argentina e muito antiga no Brasil, onde antecedeu a própria constituição do sistema nacional de ensino. Finalmente, em terceiro lugar, o artigo registra uma tendência de convergência entre os dois sistemas, já que a educação privada continua a garantir um espaço reservado para a escolarização dos grupos mais privilegiados no Brasil e desempenha com cada vez maior força esse papel na Argentina.

A introdução do Índice de Desenvolvimento da Educação Básica (Ideb) pelo governo federal representou uma mudança significativa na forma como a educação passou a ser acompanhada no Brasil. O Ideb é o indicador de qualidade desenvolvido para avaliar a educação oferecida no país e em cada unidade da federação, município e escola pública. Ele serve também para acompanhar a melhoria da qualidade educacional segundo metas preestabelecidas. Seu uso para essas finalidades tem suscitado debates sobre o tipo de política de responsabilização que o indicador engendra. Argumenta-se, neste artigo, que o Ideb coloca foco em resultados finalísticos, sem considerar as condições que propiciam a obtenção de tais resultados. O trabalho analisa a relação entre o indicador e o contexto escolar, considerando para tal o perfil de seus alunos e as características do estabelecimento de ensino. A análise empírica utiliza dados da Prova Brasil, do Censo Escolar e do próprio Ideb, por meio de modelos de regressão linear múltipla. Os resultados mostram que as escolas que atendem a alunos de menor nível socioeconômico, como esperado, têm piores resultados, mesmo com o controle de outras características. Para essas escolas, é muito mais difícil elevar o valor do indicador. Além disso, as condições de infraestrutura e de complexidade da instituição também guardam relação com o Ideb. Por fim, os resultados indicam que são necessárias políticas de superação dessas limitações e que tais condições não podem ser ignoradas na análise do Ideb.The introduction by the federal government of the Basic Education Development Index (Ideb in the Portuguese acronym for Índice de Desenvolvimento da Educação Básica) represented a significant change in the way in which education is followed in Brazil. Ideb is the quality indicator developed to evaluate the education offered in this country and by each unit of the Federation, municipality, and public school. It also allows following the improvement in the quality of education according to preestablished goals. Its use for these purposes has been fuelling debates about the kind of policy of accountability that the indicator creates. It is argued in this article that Ideb puts focus on end results, without taking into account the conditions that have contributed to obtaining such results. The work analyzes the relations between this indicator and the school context, considering the profile of the pupils and the characteristics of the teaching institution. The empirical study makes use of data from the Prova Brasil, from the School Census and from Ideb itself through models of multiple linear regression. The results show that the schools that cater for pupils of a less privileged socioeconomic background exhibit, as expected, poorer results even when controlled for other features. These schools find it much more difficult to elevate the value of the indicator. Besides, infrastructure conditions and the complexity of the institutions are also correlated with Ideb. Lastly, the results indicate that there is a need for policies to overcome these limitations and that these conditions cannot be ignored in the analysis of the Ideb.

Este estudo mediu o efeito-escola no desempenho acadêmico dos alunos de sete escolas públicas que atendem a comunidades vizinhas relativamente homogêneas do ponto de vista socioeconômico. O efeito-escola foi mensurado através da identificação da parte do progresso dos alunos que pode ser atribuída às escolas. A pesquisa coletou dados longitudinais junto a todas as turmas de 5ª série do Ensino Fundamental no início e no final do ano letivo. Os alunos responderam a testes de Português (leitura) e Matemática e preencheram um questionário sobre suas características demográficas, socioeconômicas e culturais, itens sobre o percurso escolar e hábitos de estudo. Também foram realizadas entrevistas com profissionais das escolas e com familiares dos alunos com o objetivo de contextualizar os resultados obtidos com os instrumentos quantitativos. Os resultados revelam que o efeito-escola se estrutura pela forma como as escolas organizam os alunos em turmas. A formação das turmas por nível de habilidade impacta não apenas o nível de desempenho dos alunos, mas também as diferenças nas taxas de progresso observadas durante o estudo. Os critérios de formação de turmas contribuem para que pequenas diferenças entre os alunos se transformem em grandes diferenças entre os grupos e acirrem a estratificação escolar de uma forma mais ampla.This study measures the school effects on the achievement for fifth grade students of seven public schools, which serve homogeneous, in terms of their socioeconomic status, communities. The school effect is measured through a hierarchical linear model, which allows the separation of the learning of fifth grade students due to their schools practices from other sources of influence. The students included in this study were tested at the beginning and at the end of the school year. They answered a Portuguese language and a Mathematics test and filled a questionnaire with items on their demographic, socioeconomic and cultural characteristics. Additional items in the questionnaire captured the students' studying habits and their academic trajectory. Some parents and school staff were also interviewed in order to help the contextualization of the results, obtained with the achievement tests and questionnaires. The results show that the way the schools allocate students to classes has a large impact on student achievement. Using academic ability to allocate students to different classes impact not only the individual student achievement level, but also their corresponding learning rates. This class composition criterion contributes to transform small initial differences among students in large differences on their academic achievement, increasing therefore the school stratification.

O Saeb - Sistema de Avaliação da Educação Básica - vem acompanhando o desempenho acadêmico dos alunos de educação básica brasileira desde 1990. Seus dados permitem conhecer os sistemas de ensino em sua capacidade de produção de eficácia e de equidade educacional em relação aos diferentes estratos sociais. Este artigo analisa as desigualdades do desempenho escolar entre alunos discriminados por raça, com ênfase no impacto de algumas políticas e práticas escolares na produção de equidade entre esses grupos. Este estudo utilizou, como técnica privilegiada de análise, os modelos de regressão que permitem manter na análise os dois níveis hierárquicos presentes nos dados, isto é, alunos e escolas. Os resultados mostram que (1) há um grande hiato entre alunos brancos e negros e, em menor grau, entre alunos brancos e pardos em relação ao desempenho escolar; e (2) os fatores produtores de eficácia do ensino não têm uma distribuição equânime, pois eles favorecem principalmente o desempenho escolar dos estratos socialmente mais privilegiados, ou seja, alunos brancos, contribuindo, na maioria das situações analisadas, para acirrar e não reduzir a diferença basal entre os grupos raciais. Concluímos este trabalho ponderando que a alteração desse quadro dependerá da implementação de políticas públicas e escolares para produzir um equilíbrio mais justo entre a eficácia e a equidade na educação.The Saeb - Primary Education Evaluation System (Sistema de Avaliação da Educação Básica) has been following the performance of students at primary education in Brazil since 1990. Its results reveal the school systems' ability to produce efficacy, and educational equity with respect to the different social strata. This article analyzes the inequalities in school performance of students classified by race, with emphasis on the impact of some school policies and practices in the production of equity among race groups. The study employed as its main analysis technique regression models that allow keeping in the analysis both hierarchical levels present in the data - students and schools. Results show that (1) there is a wide gap in performance between white and black students, and, to a lesser extent, between white and mixed race students; and (2) the factors producing efficacy in teaching do not have equal distribution, for they favor mainly the school performance of students from the upper social strata, i.e., white students, contributing in most situations analyzed to intensify, and not to reduce, the original differences among race groups. In conclusion, the text argues that changing the present picture will require the implementation of policies for public schools to produce a better balance between efficacy and equity in education.

Este artigo apresenta a metodologia e os resultados do desenvolvimento de um índice de nível socioeconômico das escolas de educação básica do Brasil. Os dados provêm dos questionários contextuais aos quais os alunos respondam nas avaliações educacionais feitas pelo governo federal nesse nível de ensino. Foram consideradas as respostas válidas de 20.806.062 alunos em 21 bases de dados. Para estimar o índice, itens relacionados às dimensões escolaridade e ocupação dos pais do aluno e a renda familiar foram agregados, empregando-se um modelo da Teoria da Resposta ao Item. Os resultados foram validados mostrando-se fidedignos. Correlações com outros índices semelhantes são positivas e altas. A correlação com a renda per capita dos municípios revela que a realidade nacional vista por um indicador econômico e um indicador obtido pelas respostas a um questionário é, no nível macro, a mesma. A avaliação de especialistas em diferentes localidades do país coincide com a retratada pelo indicador. This article presents the methodology and the results of a new index of socioeconomic status of the schools of basic education in Brazil. The data used are from the contextual questionnaires filled by students at the time they answer the cognitive tests of several educational assessments organized by the federal government. Valid responses from 20,806,062 students in 21 databases were considered. In order to estimate the index, items related to the dimensions of education and occupation of student's parents and family income were aggregated using a model of Item Response Theory. The results were validated showing to be quite reliable. Correlations of the index introduced in this paper with similar indices, especially the per capita income of municipalities are positive and high This shows that the reality described by the national economic indicator and an indicator obtained by students responses to a questionnaire in an educational evaluation, at the macro level, are basically the same. The assessment of socioeconomic status of schools as perceive by educational specialists in different localities of the country coincides with the one depicted by the indicator. Este artículo presenta la metodología y los resultados del desarrollo de un índice de nivel socioeconómico de las escuelas de educación básica en Brasil. Los datos proceden de los cuestionarios contextuales que los alumnos contestaron en las evaluaciones educativas que el gobierno federal realizó para este nivel de educación. Se incluyeron en este estudio respuestas válidas de 20.806.062 estudiantes de 21 bases de datos diferentes. Para estimar el índice se agregan los indicadores sobre las dimensiones de escolaridad, ocupación de los padres y los ingresos de la familia de los estudiantes y se utiliza un modelo de la Teoría de Respuesta al Ítem. Los resultados fueron alidados y se pude demostrar que son confiables. Las correlaciones con índices similares son positivas y altas. La correlación con la renta per cápita de los municipios muestra que la realidad vista por un indicador económico nacional y un indicador obtenido mediante respuestas a un cuestionario contextual contestados por estudiantes, en el nivel macro, es la misma. La evaluación de los especialistas en distintas localidades del país coincide con la retratada por el indicador.

Os estudos sobre os fatores contextuais das escolas remontam aos anos 1970 com as pesquisa em Sociologia dos Estabelecimentos Escolares. Estudos recentes demonstram que a composição socioeconômica média do alunado tem influência nos resultados escolares. Este trabalho analisa o efeito de fatores associados à composição do alunado nos resultados em leitura. Os dados são provenientes de uma avaliação em larga escala com alunos de Ensino Médio. Eles foram analisados por meio de modelos hierárquicos de regressão linear. Os resultados confirmam o efeito das variáveis contextuais, e que a composição de um alunado interessado pelos estudos é altamente favorável às escolas.

O Saeb - Sistema de Avaliação da Educação Básica - vem acompanhando o desempenho acadêmico dos alunos de educação básica brasileira desde 1990. Seus dados permitem conhecer os sistemas de ensino em sua capacidade de produção de eficácia e de equidade educacional em relação aos diferentes estratos sociais. Este artigo analisa as desigualdades do desempenho escolar entre alunos discriminados por raça, com ênfase no impacto de algumas políticas e práticas escolares na produção de equidade entre esses grupos. Este estudo utilizou, como técnica privilegiada de análise, os modelos de regressão que permitem manter na análise os dois níveis hierárquicos presentes nos dados, isto é, alunos e escolas. Os resultados mostram que (1) há um grande hiato entre alunos brancos e negros e, em menor grau, entre alunos brancos e pardos em relação ao desempenho escolar; e (2) os fatores produtores de eficácia do ensino não têm uma distribuição equânime, pois eles favorecem principalmente o desempenho escolar dos estratos socialmente mais privilegiados, ou seja, alunos brancos, contribuindo, na maioria das situações analisadas, para acirrar e não reduzir a diferença basal entre os grupos raciais. Concluímos este trabalho ponderando que a alteração desse quadro dependerá da implementação de políticas públicas e escolares para produzir um equilíbrio mais justo entre a eficácia e a equidade na educação. The Saeb - Primary Education Evaluation System (Sistema de Avaliação da Educação Básica) has been following the performance of students at primary education in Brazil since 1990. Its results reveal the school systems' ability to produce efficacy, and educational equity with respect to the different social strata. This article analyzes the inequalities in school performance of students classified by race, with emphasis on the impact of some school policies and practices in the production of equity among race groups. The study employed as its main analysis technique regression models that allow keeping in the analysis both hierarchical levels present in the data - students and schools. Results show that (1) there is a wide gap in performance between white and black students, and, to a lesser extent, between white and mixed race students; and (2) the factors producing efficacy in teaching do not have equal distribution, for they favor mainly the school performance of students from the upper social strata, i.e., white students, contributing in most situations analyzed to intensify, and not to reduce, the original differences among race groups. In conclusion, the text argues that changing the present picture will require the implementation of policies for public schools to produce a better balance between efficacy and equity in education.