RESULTADOS E RELATÓRIOS DO ENADE O que podemos aprender com eles?

(1)

RESULTADOS E RELATÓRIOS

DO ENADE 2014

(2)

 Objetivos:

1. Melhorar a qualidade da educação superior, orientar a expansão

da oferta;

2. Identificar mérito e valor das instituições, áreas, cursos e

programas nas dimensões de ensino, pesquisa, extensão,

gestão e formação;

3. Promover a responsabilidade social das IES, respeitando a

identidade institucional e a autonomia.

Sistema Nacional de Avaliação da Educação Superior - SINAES

Lei nº 10.861 de 2004

(3)

O Sinaes envolve a participação de toda a comunidade educativa, sob a

gestão do INEP, com diretrizes e instrumentos aprovados pela CONAES e

promove o processo de avaliação da qualidade das(os):

 IES

– autoavaliação e avaliação institucional (comissões in loco) para

fins de credenciamento e recredenciamento. Atribui o Conceito

Institucional (CI).

 Cursos de graduação

– avaliação dos cursos de graduação

(comissões in loco) para fins de autorização, reconhecimento e renovação

de reconhecimento. Atribui o Conceito de Curso (CC).

 Estudantes – avaliação de desempenho dos estudantes – ENADE.

 Assegura o processo nacional de avaliação nos termos do art.

9o, VI, VIII e IX da LDB.

(4)

Indicadores de Qualidade da Educação Superior (2015)

Índice Geral de Cursos Avaliados da Instituição (IGC)

O IGC é resultado da média ponderada dos Conceitos Preliminares de Curso (CPC) da graduação no triênio de referência e dos Conceitos da Capes dos programas de pós-graduação

stricto sensu da Instituição de Educação Superior.

O Conceito Preliminar de Curso (CPC)

O CPC consubstancia diferentes variáveis que traduzem resultados da avaliação de desempenho de estudantes, infraestrutura e instalações, recursos didático-pedagógicos e corpo docente.

Conceito ENADE

Calculado para o curso da IES, localizada em um município, considerada uma área de avaliação. A nota do curso inclui o desempenho dos alunos nas provas de formação geral e componente específico.

Conceito de Curso - CC

Resulta da visita in loco no momento de Reconhecimento ou Renovação dos cursos.

(5)

O CONCEITO ENADE

Conforme estabelece a Portaria Normativa nº 40 de 12 de dezembro

de 2007, é um indicador de qualidade da educação superior que

avalia o desempenho dos estudantes a partir dos resultados obtidos

no Enade.

A Nota dos Concluintes no Enade é a média ponderada das notas

padronizadas da respectiva unidade de observação, sendo 25% o

peso da Formação Geral e 75% o peso do Componente Específico da

nota final.

(6)

Características do ENADE

• É componente curricular obrigatório dos cursos de graduação;

• Aplicação trienal a concluintes das áreas e cursos superiores de tecnologia conforme o ciclo do Enade;

• É composto de uma Prova e Questionário Socioeconômico, cujo preenchimento é obrigatório;

• Admite procedimentos amostrais, mas é censitário desde 2009;

• Ingressante é inscrito mas não faz o exame desde 2011 (uso de resultados ENEM);

• É vetada a identificação nominal: resultado individual acessado exclusivamente pelo estudante;

• Regulamentação: feita a cada ano por meio de Portarias de Diretrizes para a prova (por área avaliada), Portarias de Designação de Comissões Assessoras de Área e Portaria Ministerial com normatização do Exame (Portaria Normativa MEC nº 5, 10/3/2016).

(7)

Importância do Enade:

constância da capacidade do

Estado brasileiro avaliar a ES

•

Aprimoramento tecnológico na aplicação dos instrumentos e metodologia de cálculo;

•Produção e disseminação de conhecimento sobre avaliação via aprimoramento de relatórios e estudos sobre os resultados da avaliação;

•Integração de Bases de Dados (de dentro e de fora do INEP): ampliação de medidas de qualidade;

•Avança na promoção de uma cultura avaliativa dos cursos e IES, provocando a

participação e a reflexão dos diversos atores institucionais;

•Cumpre o papel de aferir qualidade e de subsidiar a regulação, apoiando a

política de promover o aperfeiçoamento da ES.

(8)

(9)

Nº de concluintes inscritos – 49 Nº de participantes – 45

Nota Bruta FG – 66,9711 Nota Bruta CE – 59,7467 Nota Bruta Geral – 61,5622

Nota contínua do ENADE – 4,6923

Nota Bruta Org. Did. Pedagógica – 5,3022

Nota Padronizada Org. Did. Pedagógica – 3,2212

Nota Bruta infraestrutura e inst. Físicas – 5,2253

Nota Padronizada e inst. Físicas – 3,6415

Nota Bruta Oport. de ampliação de formação – 5,5435

Nota Padronizada Oport. de ampliação de formação – 4,2864

Concluintes participantes no ENEM – 6

Percentual de concluintes participantes com nota ENEM – 13,3%

Nota bruta IDD – x

Nota Padronizada IDD – 4,6923 Nº de docentes - 43

Nº de matrículas – 257

Nota Bruta Mestres – 0,9070

Nota Padronizada Mestres – 4,2248

Nota Bruta doutores – 0,6512

Nota Padronizada Doutores – 3,7035

Nota Bruta Regime de trabalho – 1,0000

Nota Padronizada Regime de Trabalho – 5,0000 CPC contínuo – 4,3590

CPC faixa – 5

CONCEITO PRELIMINAR DE CURSO – CPC

(10)

CONCEITOS E ÓRGÃOS DE CONTROLE

Controladoria Geral da União

Solicitação de Auditoria: 201601502/01

“1.8.3. adote providências com vistas a identificar as causas e evitar que cursos da

UFRN obtenham baixo conceito nas avaliações do Enade, conforme se verificou nas

edições 2008, 2009, 2010 e 2011 do referido exame”.

Solicitação de Auditoria: 201601502/09

“Do esclarecimento prestado pela Universidade, por meio do Anexo III do Memorando Eletrônico Nº 8/2016 – PROPLAN, DE 13 DE Abril de 2016, depreende-se que, em relação ao desempenho, houve foco em cursos que obtiveram baixo conceito em

anos anteriores e que melhoraram, no entanto, as providências citadas não foram suficientes para evitar que outros cursos obtivessem baixo conceito nas avaliações do Enade e o desempenho geral da UFRN diminuísse, não sendo demonstradas providências efetivas e que englobem toda a instituição no sentido de

impedir que uma parte fique em situação menos favorecida, mas que também não seja afetada a parcela que ainda se mantém como núcleo de excelência, prejudicando como um todo a qualidade de ensino da Universidade”.

(11)

Instrumentos aplicados pelo ENADE (em 2014)

1 - Questionário do Estudante (68 questões): obtém informações socioeconômicas e a

avaliação das IES referentes à infra estrutura e instalações físicas; organização didático-pedagógica e oportunidades de ampliação da formação acadêmica e profissional ) suas condições de formação acadêmica (preenchido na internet).

2 - Prova (40 questões)

1.1 - Formação Geral: 10 questões (8 questões de múltipla escolha; 2 discursivas); 1.2 - Componente Específico da área avaliada: 30 questões (27 questões de múltipla escolha e 3 questões discursivas).

3 - Questionário de percepção sobre a prova (9 questões): aplicado junto com a prova. 4 - Questionário das Licenciaturas (13 questões): aplicado junto com a prova.

5 - Questionário do Coordenador (74 questões): obtém informações de perfil do

coordenador e sua percepção sobre a formação oferecida pelo curso (coletado nos quinze dias subsequentes à prova, via internet).

(12)

ENADE 2014

1. Arquitetura e Urbanismo 2. Engenharia Civil 3. Engenharia Elétrica 4. Engenharia de Computação 5. Engenharia Mecatrônica 6. Engenharia Mecânica 7. Engenharia Química 8. Engenharia de Alimentos 9. Engenharia de Produção 10. Engenharia Ambiental 11. Engenharia Florestal

12. Engenharia (Aquicultura, Biomédica, Petróleo, Telecomunicações, Têxtil e Materiais) Bacharelados e licenciaturas em: Ciência da Computação; Ciências Biológicas; Ciências Sociais; Filosofia; Física (L/B); Geografia; História; Letras Português; Matemática (L/B) e Química (L/B).

Licenciaturas: Artes Visuais; Educação Física; Letras Português e Espanhol, Letras-Português e Inglês, Música e Pedagogia.

(13)

(14)

CURSOS CONCEITO ENADE 2005 2008 2011 2014 Arquitetura e Urbanismo 5 4 5 5 Engenharia Química 4 3 3 3 Engenharia Civil 4 5 4 4 Engenharia Elétrica 3 3 4 3 Engenharia da Computação 3 5 4 4 Engenharia Mecatrônica - - - 5* Engenharia Mecânica 3 3 3 3 Engenharia de Produção 3 2 4 4 Engenharia Ambiental - - - 5 Engenharia de Alimentos - SC 4 3 Engenharia Florestal - - - 3

PANORAMA DOS CURSOS DO CT E EAJ - ENADE

 Engenharia Mecatrônica, foi enquadrado como Controle e automação, obtendo conceito 5, mas não teve CPC;  Engenharia de Software não faz ENADE.

(15)

ENGENHARIAS

Cursos Ano da Avaliação/Conceito ENADE

2005 2008 2011 2014 Aquicultura - - - 3 Biomédica - - - 3 Petróleo - - - 3 Telecomunicações - - - 3 Têxtil SC 1 - 3 Materiais 4 2 3 3

 Todos os cursos de Engenharia que não se enquadram nas Engenharias discriminadas devem ser enquadrados na grande área ‘Engenharia’ conforme determina a portaria normativa do INEP.

 O enquadramento dos cursos é de responsabilidade das instituições de educação Superior-IES.

PANORAMA DOS CURSOS DO CT E EAJ - ENADE

(16)

CONSIDERAÇÕES SOBRE OS CURSOS DO CT E EAJ – ENADE 2014

1. O curso com menor conceito ENADE (faixa contínua) dessa área foi Engenharia

Elétrica - 2,100;

2. Os cursos que tiveram 100% de presença no ENADE 2014 – Engenharia

Ambiental (3,987) e Eng. Mecatrônica (4,126), ambos com conceito 5. Este

último teve o maior conceito faixa contínua da área de Engenharia;

3. O curso com maior percentual de ausência no ENADE 2014 foi Engenharia

Mecânica (34%) e obteve ENADE faixa contínua 2,780 – conceito 3;

4. O grupo das Engenharias teve um percentual de ausência de 15,08% e ENADE faixa contínua de 2,401 – conceito 3;

5. O curso de Arquitetura obteve conceito 5, sendo a maior nota em faixa contínua desse ciclo – 4,692.

(17)

CURSOS CONCEITO CPC 2005 2008 2011 2014 Arquitetura e Urbanismo - 4 4 5 Engenharia Química - 3 3 3 Engenharia Civil - 4 4 4 Engenharia Elétrica - 3 4 3 Engenharia da Computação - 5* SC 4 Engenharia Mecatrônica - - - ? Engenharia Mecânica - 3 SC 4 Engenharia de Produção - 3 4 3 Engenharia Ambiental - - - 4 Engenharia de Alimentos - SC SC** 4 Engenharia Florestal - - - 3

* Inscreveu os estudantes em Tecnologia em Automação Industrial (Tecnólogo) ** Não teve o resultado do CPC divulgado em 2011, solicitar ao INEP.

(18)

ENGENHARIAS

Cursos Ano da Avaliação/Conceito CPC

2005 2008 2011 2014 Aquicultura - - - 3 Biomédica - - - 3 Petróleo - - - 3 Telecomunicações - - - 3 Têxtil - 3 - 3 Materiais - 3 SC 3

PANORAMA DOS CURSOS DO CT E EAJ - CPC

*Os cursos enquadradas na área de Engenharia receberam CPC 3, embora no INEP não apareça o CPC de Aquicultura, Biomédica e Telecomunicações.

(19)

* Esses cursos não receberam avaliação in loco de Reconhecimento ou Renovação tiveram Renovação de Reconhecimento automática.

** Os cursos de Engenharia Mecatrônica, Engenharia da Computação e Engenharia Mecânica receberam visita em 2015 e

tiveram suas portarias de reconhecimento renovadas em dez/2015 para o primeiro e em jul/2016 para os dois últimos.

***Os cursos de Engenharia de Produção e Engenharia Elétrica não tiveram Renovação Automática, portanto poderão ter processo de avaliação aberto.

REGULAÇÃO DOS CURSOS DO CT E EAJ (CC)

CURSOS CONCEITO CPC

2012 2013 2015 2016

Arquitetura e Urbanismo* _ _ RRA _

Sistema da Informação* _ _ RRA _

Engenharia Civil* _ _ RRA _

Engenharia Elétrica*** RRA _ _ _

Engenharia da Computação** _ _ _ 4

Engenharia Mecatrônica** _ _ 4 _

Engenharia Mecânica** _ _ _ 4

Engenharia de Produção*** _ RRA _ _

Engenharia Ambiental* _ _ RRA _

(20)

ENGENHARIAS

Cursos Conceito de Curso

2013 2014 2015 2016 Aquicultura** - - 5 - Biomédica** - - 4 - Petróleo* - - RRA - Telecomunicações** - - 5 - Têxtil*** - 4 - - Materiais** - - - 4

REGULAÇÃO DOS CURSOS DO CT E EAJ – (CC)

* O curso de Engenharia do Petróleo não recebeu avaliação in loco e teve Renovação de Reconhecimento automática.

** Os cursos de Engenharia da Aquicultura, Engenharia Biomédica, Engenharia Telecomunicações e Engenharia Materiais

receberam visita e tiveram suas portarias de renovação/reconhecimento renovadas.

(21)

• Alguém em sua família concluiu um curso superior?

• Quantas horas por semana, aproximadamente, você dedicou aos estudos, excetuando as horas de aula?

• Qual o principal motivo para você ter escolhido este curso?

• Qual a principal razão para você ter escolhido a sua instituição de Educação Superior?

As questões de 01 a 26 – tratam de informações mais gerais, como, estado

civil, etnia, nacionalidade, escolarização dos pais, renda, auxílios e oportunidades acadêmicas até questões de motivação.

Questionário do Estudante

(22)

Considera-se o grau de concordância, segundo a escala que varia de 1 (discordância total) a 6 (concordância total). As opções “Não sei responder” e “Não se aplica” destinam-se à situações de não pertinência ou quando não há condições de avaliar o item.

27. As disciplinas cursadas contribuíram para sua formação integral, como cidadão e profissional.

28. Os conteúdos abordados nas disciplinas do curso favoreceram sua atuação em estágios ou em atividades de iniciação profissional.

30. O curso propiciou experiências de aprendizagem inovadoras.

38. Os planos de ensino apresentados pelos professores contribuíram para o desenvolvimento das atividades acadêmicas e para seus estudos.

41. A coordenação do curso esteve disponível para orientação acadêmica dos estudantes.

64. A biblioteca dispôs das referências bibliográficas que os estudantes necessitaram.

65. A instituição contou com biblioteca virtual ou conferiu acesso a obras disponíveis em acervos virtuais.

Questão 27 a 68 – Organização didático-pedagógica, infraestrutura e oportunidades de ampliação da formação acadêmica e profissional.

(23)

90,6% é o percentual de concordância dos estudantes do curso;

93,3% a média de concordância nacional.

89,3% é o percentual de concordância dos estudantes do curso;

89,8% a média de concordância nacional.

ENGENHARIAS *– ENADE 2014

Questões 38 e 47 referentes à organização didático-pedagógico

Questionário do Estudante

(24)

71,2% percentual de concordância dos estudantes do curso; 76,1% a média nacional.

75,3% grau de concordância dos estudantes do curso; 84,7% a média nacional.

Questionário do Estudante

ENGENHARIAS *– ENADE 2014

Questões 38 e 47 referentes à organização didático-pedagógico

(25)

Questão 44. Foram oferecidas oportunidades para os estudantes participarem de Projetos de iniciação científica e de atividades que estimularam a investigação acadêmica.

75,0% foi o percentual de concordância dos estudantes do curso em relação a questão 44,

enquanto que 87,4% foi a média de concordância nacional.

Questão 46. A instituição ofereceu oportunidades para os estudantes atuarem como representantes em órgãos colegiados.

57,2% foi o percentual de concordância dos estudantes do curso em relação a questão 46,

enquanto que 70,6% foi a média de concordância nacional.

OBS: Para calcular o componente Nota referente às oportunidades de ampliação da formação acadêmica e profissional (NAj), obtém-se, excluindo-se os itens com resposta (Não sei responder/Não se aplica), a média das respostas dos itens 43, 44, 45, 46, 52, 53 e 67 do Questionário do Estudante.

Questionário do Estudante

Engenharia de Alimentos – ENADE 2014

Questões 44 e 46 referentes a oportunidades de ampliação da formação acadêmica e profissional

(26)

RELATÓRIO DE CURSOS – RESULTADO DO QUESTIONÁRIO

Distribuição das respostas às questões do Questionário do Estudante para os concluintes da IES.

(27)

Obtém-se a média das respostas dos itens 27 a 68 do Questionário

para cada estudante i da unidade de observação j.

Em seguida, calcula-se a média das notas do componente geradas

para cada estudante i da unidade de observação j, obtendo-se, assim, a

Nota referente à organização didático-pedagógica e Infra estrutura da

unidade de observação j, em sua forma bruta.

Cálculo da Notas - Questionário do Estudante

OBSERVAÇÕES:

1. os itens com resposta “Não sei responder” e “Não se aplica” são excluídos do cálculo das médias das respostas por estudante e, consequentemente, por unidade de observação.

2. Contribuem na composição do CPC, organização didático-pedagógica (7,5); infraestrutura (5,0) e oportunidades de ampliação da formação acadêmica e profissional (2,5).

(28)

 Formação Geral – ENADE 2014

(29)

Conhecimentos Específicos

(30)

Estatística das questões das Provas

Engenharia Civil – ENADE 2014

(31)

RELATÓRIO DE CURSO – RESULTADOS Eng. de Alimentos – ENADE 2014

(32)

RELATÓRIO DE CURSO – RESULTADOS Eng. Elétrica – ENADE 2011/2014

Concluintes 2011

*57 concluintes inscritos e 49 participantes.

28,6% diferente abordagem do conteúdo

23,8 % desconhecimento do conteúdo

14,3% falta de motivação

26,2% não teve dificuldade

Conceito ENADE contínuo 3,0202 -FAIXA 4

Concluintes 2014

*111 concluintes inscritos e 72 participantes

19,5% desconhecimento do conteúdo

18,2 % falta de motivação 16,9% Não teve dificuldade

Conceito ENADE contínuo 2,100 - FAIXA 3 2011

(33)

RELATÓRIO DE CURSO – RESULTADOS Eng. Elétrica – ENADE 2014

2011

(34)

Concluintes de ARQUITETURA

11,1% desconhecimento de conteúdo

44,4% diferente abordagem do conteúdo

28,9% falta de motivação para fazer a prova

Concluintes de Eng. Civil

18,5% desconhecimento do conteúdo

36,1% diferente abordagem do conteúdo

29;6% falta de motivação para fazer a prova

Concluintes de Eng. Elétrica

12,7% desconhecimento de conteúdo

31,0% diferente abordagem do conteúdo

39,4% falta de motivação para fazer a prova

QUESTIONÁRIO PERCEPÇÃO DA PROVA – ENADE 2014

(Questões de 01 a 09)

(35)

Questão 7 - Você se deparou com alguma dificuldade ao responder à prova. Qual?

Concluintes de Eng. de Alimentos

21,4% falta de motivação

Concluintes de Produção

Concluintes de Ambiental

Concluintes de Eng. Florestal

58,3% desconhecimento do conteúdo

12,5% diferente abordagem do conteúdo

(36)

Concluintes de Eng. de Computação

Concluintes de Eng. Mecatrônica

28,6% diferente abordagem do conteúdo 28,6% falta de motivação

Concluintes de Eng. Mecânica

25,8% desconhecimento do conteúdo 24,7% diferente abordagem do conteúdo

30,1% falta de motivação

Concluintes de Eng. Química

14,5% falta de motivação para fazer a prova

(37)

Questão 7 - Você se deparou com alguma dificuldade ao responder à prova. Qual?

Concluintes de Engenharias* (Aquicultura, Biomédica, Petróleo,

Telecomunicações, Têxtil, Materiais)

37,7% desconhecimento do conteúdo

32,2% diferente abordagem do conteúdo 17,8% falta de motivação

(38)

Como vimos, os relatórios compreendem uma série de informações estatísticas agrupadas por curso, por IES e por área de avaliação participante do Enade.

O que podemos

aprender com os

Relatórios de Cursos?

(39)

 O Relatório de Curso é publicado 01 ano após o Exame e

apresenta os resultados da prova e alguns resultados do

questionário de impressões da prova e do Questionário do

Estudante.

 Os dados relativos aos resultados da prova e a opinião dos

estudantes podem ser úteis para

orientar as ações pedagógicas e

administrativas da Instituição e do curso

.

 Confrontar os conteúdos das provas com as ementas dos

componentes dos cursos, identificando os conteúdos que podem ser

inseridos.

 Agregar os dados e informações dos Relatórios de Curso e

Diretrizes do ENADE às discussões de atualização do Projeto

Pedagógico de Curso.

(40)

EXPERIÊNCIA DE TRABALHO

ANÁLISE DE RESULTADOS

(41)

CURSOS ANO DO PP ANO ESTRUTURA CURRICULAR E. DE ALIMENTOS 2015 2015 E. DE PRODUÇÃO 2008 2011 E. AMBIENTAL 2011 2011 E. FLORESTAL 2008 2015 E. DE AQUICULTURA 2009 2011 ENG. BIOMÉDICA 2013 2013 E. DE PETRÓLEO 2008 2010

Alguns dados dos cursos do CT

(42)

Atualização do PP dos Cursos do CT que fazem Enade

CURSOS ANO DO PP ANO ESTRUTURA CURRICULAR ARQUITETURA 2006 2011 ENGENHARIA CIVIL 2011 2016 E. ELÉTRICA 2006 2011 E. DE COMPUTAÇÃO 2011 2012 E. MECATRÔNICA 2011 2012 E. MECÂNICA 2015 2015 E. QUÍMICA 2008 2009

(43)

E. DE TELECOMUNICAÇÕES 2014 2016.2 E. TÊXTIL 2010 2011 E. DE MATERIAIS 2010 2016 E. BIOMÉDICA 2013 2013 E. DE PETRÓLEO 2008 2010 E. AMBIENTAL 2011 2011 E. DE ALIMENTOS 2015 2015 E. DE PRODUÇÃO 2008 2011

(44)

Situação dos cursos do CT em relação aos projetos de ensino 2014-2016

Tipo do Projeto Quantidade executados Quantidade de discentes envolvidos Monitoria Pamqeg PET Tutoria

PROJETO PIBID Nº BOLSISTAS Interdisciplinar (Qui./Fis/Biol.)

Física

Matemática Química