PROFA. DRA. MARION CREUTZBERG ASSESSORA DE AVALIAÇÃO E REGULAÇÃO DE CURSOS (PROACAD/PUCRS)...

PROFA. DRA. MARION CREUTZBERGA S S E S S O R A D E A V A L I A Ç Ã O E R E G U L A Ç Ã O D E C U R S O S ( P R O A C A D / P U C R S )

C O O R D E N A D O R A D A C O M I S S Ã O P R Ó P R I A D E A V A L I A Ç Ã O ( C PA / P U C R S )

Avaliação institucional e de curso no contexto do SINAES: o papel do

professor

Tópicos

• Professor x Avaliação: por quê?• Avaliação na Educação Superior• SINAES• Indicadores de Qualidade•Resultados de Avaliação de IES e cursos da Rede Sinodal• O que pode fazer o professor?

Professor x Avaliação: por quê?

Estudante

IES / Curso

Professor

“queremos transmitir para os estudantes a importância do reconhecimento da qualidade de ensino e da aprendizagem para o seu futuro profissional”

“precisamos entender os processos avaliativos como formativos para toda a comunidade acadêmica, nos conscientizando e criando uma cultura de avaliação no sentido de qualificarmos cada vez mais a instituição da qual fazemos parte e levamos o nome”

Resultados de

avaliação

Fonte: http://portal.eusoufamecos.net/por-que-e-importante-fazer-o-enade/

Professor: a referência que permanece

O que / quem o estudante considera como agente de motivação para a participação na avaliação?

2010 2011 2012 2013 2014

Professor, reconhecimento e cumplicidade

Recompensa e Professor

Professor

Recompensa

Professore parceria

da instituição

Santos R, Teitelbaum I, 2015.

- Avaliação na Educação Superior- SINAES- Indicadores de Qualidade

Avaliação na Educação Superior

Panorama mundial - avaliações sistemáticas e com abrangência nacional, são relativamente recentes.

(Verhine, 2010; Freitas, 2012; Morosini 2014)

Tendência internacional- regulação e controle das instituições- responsabilização com a qualidade- orientação para escolhas dos estudantes- equivalência de títulos / diplomas

Panorama brasileiro década de 70: pós-graduação – CAPES; 80: primeiras propostas / vinculadas à regulação; 90: Programa de Avaliação Institucional das Universidades Brasileiras /

experiências e propostas de avaliação formativa LDB/96: Exame Nacional de Cursos, Avaliação das Condições de Ensino,

Avaliação de Centros Universitários

2004: SINAESLei nº 10861

Avaliação na Educação Superior

AVALIAÇÃO INSTITUCIONAL

ENADEExame Nacional de

Desempenho de Estudantes

AVALIAÇÃO EXTERNA

AVALIAÇÃO INTERNA

AUTOAVALIAÇÃO INSTITUCIONAL

AVALIAÇÃO CURSOS DE GRADUAÇÃO

SINAES

INDICADORES DE QUALIDADE DA EDUCAÇÃO SUPERIOR

Impactos:- na trajetória dos estudantes, - no curso e na IES

Candidatura do curso / IES a editais Manutenção de processo seletivo e vagas no Curso e na IES Reconhecimento social da área / curso / IES Selos de recomendação de conselhos e associações Acesso a financiamento estudantil (FIES, ProUni) Mundo do trabalho (estágio e inserção profissional) Programas de mobilidade em universidades no exterior Seleção em programas de Pós-Graduação Reconhecimento de diploma no exterior... ????

Indicadores de Qualidade da Educação

Superior

http:

//en

adei

es.in

ep.g

ov.b

r/en

adeI

es/b

oleti

mDe

sem

penh

o

http://enadeies.inep.gov.br/enadeIes/boletimDesempenho/

AVALIAÇÃO INSTITUCIONAL

Avaliação in loco

Credenciamento de IES

Presencial

EAD

Recredenciamento de IES

Presencial

EAD

Índice Geral de CursosIGC

Índice calculado anualmente, com base nos resultados da avaliação dos Cursos

de Graduação (CPC) e de Pós-Graduação (Capes)

Instrumento de Avaliação organizado em 5 Eixos que contemplam as 10 dimensões do SINAES

(Portaria 92, 31/janeiro/2014)

Conceito da InstituiçãoCI

1Missão e PDI

2EnsinoPesquisaExtensão

3Responsabilidade Social

4Comunicação

5Políticas depessoal

6Organização e gestão

7Infraestrutura

8Planejamento e avaliação

9Atendimento aos discentes

10Sustentabilidade financeira

Eixo 1 – Planejamento e avaliação institucional

Eixo 2 – Desenvolvimento institucional

Eixo 3 – Políticas acadêmicas

Eixo 4 – Políticas de gestão

Eixo 5 – Infraestrutura física

Eixos e dimensões de avaliação institucional

355

25 DPMPGPIGC DMG

G=média dos CPCs ponderada pelas matrículas nos cursos de graduação avaliados.

PG=peso da graduação

M=média dos conceitos CAPES ponderada pelas matrículas nos cursos de Mestrado. Limitada a 5.

PM=peso do Mestrado

D=média dos conceitos CAPES ponderada pelas matrículas nos cursos de Doutorado subtraída de “2”.

PM=peso do Doutorado

Índice Geral de Cursos - IGC

Conceito Preliminar de

Curso

AVALIAÇÃO [+Regulação, Supervisão]

CURSOS DE GRADUAÇÃO

Avaliação in loco

Autorização Reconhecimento

Renovação de Reconhecimento[ciclos definidos]

Cursos que não fazem ENADE

Cursos com ENADE

Portaria

CPC inferior a 3

Sem conceito

Avaliação periódica

Índice Geral de Cursos (IGC) da IES + conceitos CAPES

(IES com PG)

+ insumos

Instrumento de Avaliação de Cursos de Graduação presencial e a distância - Junho/2015

Conceito do CursoCC

Autorização ReconhecimentoRenovação de

Reconhecimento

Avaliação in loco

Dimensões avaliadas - Instrumento de avaliação

Organização didático-

pedagógica

Corpo docente Infraestrutura

27 indicadores

21 indicadores20 indicadores

Conceito do CursoCC

Decomposição do CPC

ComponentePesos

antigosPesos atuais

Desempenho dos alunos

• Enade Concluintes 20,0%55,0%

20,0%

35,0%• IDD 35,0%

Opinião dos alunos

• Infraestrutura 7,5%

15,0%

5,0%

• Org. Pedagógica 7,5% 7,5%• Oportunidades de ampliação 0,0% 2,5%

Corpo docente

• Mestrado 7,5%30,0%

7,5%• Doutorado 15,0% 15,0%• Regime de TP ou TI 7,5% 7,5%

Conceito Preliminar de

Curso

Avaliação trienal

2004-2007-2010-2013 SAÚDE, SERVIÇO SOCIAL E AGRÁRIAS

2005-2008-2011-2014 LICENCIATURAS, ENGENHARIAS, ARQUITETURA, INFORMÁTICA

2006-2009-2012-2015 DIREITO, ADMINISTRAÇÃO, CIÊNCIAS CONTÁBEIS, CIÊNCIAS ECONÔMICAS, PSICOLOGIA E COMUNICAÇÃO SOCIAL

ENADE

Componente Específico da Área30 questões27 objetivas/3 discursivas

Respondido on-line

após a prova

9 questõesRespondido ao final da prova,

pelo aluno

Formação Geral10 questões8 objetivas/2 discursivas

68 questões+ 13 (lic)

Preenchimento obrigatório e on-line

O ENADE É COMPONENTE CURRICULAR OBRIGATÓRIO

• Diretrizes Curriculares do Curso X Diretrizes da Prova

• Questões / itens elaborados por professores de cursos

Prova

Questionário do estudante

Questionário do Coordenador

Questionário de percepção sobre a

prova

ENADE

Perfil socioeconômicoMotivações para a escolha da IES e do CursoProjeto Pedagógico do Curso

Dinâmica dos processos de ensino-aprendizagem Infraestrutura e Serviços de Apoio ao Estudante Oportunidades de ampliação de formação

acadêmica e profissional

40 questões

Resultante da diferença entre o desempenho obtido pelos estudantes concluintes da IES no ENADE e o desempenho esperado no momento do ingresso.

% de pais dos ingressantes com ensino superior

Razão entre o nº de concluintes / ingressantes

média das notas dos ingressantes no ENEM

média ponderada das notas dos concluintes no ENADE

Font

e: N

otas

técn

icas

, IN

EP,

201

4

IDD

- Resultados de Avaliação de IES e cursos da Rede Sinodal

Por que analisar resultados?

A análise e uso de resultados da avaliação externa é um dos indicadores da avaliação externa de cursos.

Os resultados do ENADE (a prova, a percepção sobre a prova, o questionário do estudante e o questionário do coordenador) permitem movimentos de autoavaliação dos cursos:- a prova é orientada pelas Diretrizes dos cursos- o questionário do estudante permite ampliar

conhecimento sobre o perfil do aluno- as concepções pedagógicas que orientaram a formulação

dos questionário do estudante e do coordenador estão relacionadas às Diretrizes, aos critérios de qualidade da ES

A discussão e as ações permanentes contribuem para o desenvolvimento da cultura de avaliação como instrumento de gestão.

Por que analisar resultados?

Resultados são públicos!• Desempenho na prova• Percepções sobre a prova• Questionário do estudante• Resultados de todos os índices das IES: IGC, CPC, ENADE de forma geral em planilhas• Resultados de avaliações in loco (CC e CI)• Disponibilização de microdados

Disponíveis em: http://portal.inep.gov.br/enade

Conceitos dos índices

Conceito(1-5)

Conceito contínuo / Faixa(0-500)

1 0,00 a 0,942 0,95 a 1,943 1,95 a 2,944 2,95 a 3,945 3,95 a 5,00

Histórico do IGC – Rede Sinodal

2007 2008 2009 2010 2011 2012 20131.5

2

2.5

3

3.5

4

IGC

SETREM BOM JESUS/IELUSC FAHOR Média Rede Sinodal

16.20%14.63%

7.29%

30.42%

Variação do IGC – 2010 > 2013

Curso IES Enade contínuo

ENADE faixa

Org. Did-Ped Infra Oport. Enem IDD IDD

FaixaMestre

s DoutoresRegime

de trabalh

o

CPC Contínu

oCPC

Faixa CC

AGRONOMIA SETREM 3,37 4 4,09 4,30 3,29 51,76 3,93 4 3,02 0,54 0,98 3,04 4ENFERMAGEM SETREM 50,28 3,00 0,39 3,00 3ENFERMAGEM IELUSC 49,64 2,09 0,50 3,00 3NUTRIÇÃO IELUSC 2,31 3 3,63 3,83 3,47 53,29 2,19 3 1,96 0,38 3,46 2,24 3EDUCAÇÃO FÍSICA (B) IELUSC 50,83 3,94 0,91 2,50 3FONOAUDIOLOGIA IELUSC 3MUSICOTERAPIA EST 5LATICÍNIOS SETREM 4

Resultados dos cursos 2011-2012-2013

2013

2012Curso IES Enade

contínuoENADE faixa


FaixaMestre

s DoutoresRegime

de trabalh

o

CPC Contínu

oCPC

Faixa CC

ADMINISTRAÇÃO IENH 4,44 5 4,58 5,00 53,08 4,42 5 4,14 0,97 1,90 3,75 4 4ADMINISTRAÇÃO SETREM 2,45 3 3,84 4,64 50,80 2,71 3 3,85 0,00 3,08 2,59 3CIÊNCIAS ECONÔMICAS FAHOR 1,94 2 4,55 4,58 52,51 2,56 3 2,17 0,67 2,67 2,43 3 4JORNALISMO IELUSC 3,65 4 4,10 4,28 51,84 4,28 5 3,96 0,93 2,50 3,48 4PSICOLOGIA IENH 52,74 4,52 1,84 2,50 4PSICOLOGIA SETREM 2,60 3 4,71 4,74 53,33 3,35 4 4,00 0,26 3,00 4 4PUBLICIDADE E PROPAGANDA IELUSC 2,79 3 3,80 3,83 52,93 2,88 3 2,05 0,40 1,45 2,46 3DESIGN DE MODA SETREM 4TEOLOGIA EST 5


Curso IES Enade contínuo

ENADE faixa


FaixaMestre

s DoutoresRegime

de trabalh

o

CPC Contínu

oCPC

Faixa CC

PEDAGOGIA (L) ISEI 4,01 5 4,37 5,00 52,13 3,91 4 4,47 1,86 1,32 3,58 4ENGENHARIA DE PRODUÇÃO FAHOR 2,45 3 4,00 5,00 53,70 3,67 4 2,78 0,58 2,88 2,96TECNOLOGIA EM REDES DE COMPUTADORES SETREM 3,05 4 3,33 4,48 51,87 3,70 4 2,63 0,00 2,11 2,85 3 5ENGENHARIA DE PRODUÇÃO SETREM 2,17 3 4,17 5,00 54,27 3,30 4 3,07 0,00 2,33 2,68 4PEDAGOGIA (L) SETREM 2,50 3 5,00 5,00 51,10 2,43 3 4,17 0,00 2,22 2,58 3ENGENHARIA MECÂNICA FAHOR 1,65 2 3,35 2,94 56,95 2,60 3 2,74 0,54 2,50 2,18 3 5COMPUTAÇÃO (B) SETREM 1,41 2 4,38 3,75 54,33 1,85 2 3,67 0,00 2,59 2,01 3

EDUCAÇÃO FÍSICA (L) IELUSC 2,31 3 1,29 4,55 2,63 0,29 1,14 3

MÚSICA – L EST 4

MÚSICA – L ISEI 4

HISTÓRIA – L ISEI 4

REDES DE COMPUTADORES IENH

3


2011

• Desempenho na prova: Administração (IENH 2012 – ENADE 4,44 / 5)

• Desempenho na prova: Ciências Econômicas (FAHOR 2012 – ENADE 1,93 / 2)

• Desempenho na prova: Agronomia (SETREM 2013 – ENADE 3,37 / 4)

• Desempenho na prova: Pedagogia (ISEI 2011 – ENADE 4,01 / 5)

PNE 2014 - 2024

Meta 13: elevar a qualidade da educação superior e ampliar a proporção de mestres e doutores do corpo docente em efetivo exercício no conjunto do sistema de educação superior para 75%, sendo, do total, no mínimo, 35% doutores.

Estratégia

13.8) elevar gradualmente a taxa de conclusão média dos cursos de graduação presenciais nas universidades públicas, de modo a atingir 90% e, nas instituições privadas, 75%, em 2020, e fomentar a melhoria dos resultados de aprendizagem, de modo que, em cinco anos, pelo menos 60% dos estudantes apresentem desempenho positivo igual ou superior a 60% no Exame Nacional de Desempenho de Estudantes - ENADE e, no último ano de vigência, pelo menos 75% dos estudantes obtenham desempenho positivo igual ou superior a 75% nesse exame, em cada área de formação profissional;

• Desempenho na prova: FAHOR 2011

• Desempenho na prova: Pedagogia (ISEI 2011 – ENADE 4,01 / 5)

• Percepção dos alunos sobre a prova: Publicidade e Propaganda (IELUSC 2012 – ENADE 2,79 / 3)

• Respostas ao questionário do estudante: mudança implantada em 2013

Perfil socioeconômicoMotivações para a escolha da IES e do CursoProjeto Pedagógico do Curso

Dinâmica dos processos de ensino-aprendizagem Infraestrutura e Serviços de Apoio ao Estudante Oportunidades de ampliação de formação acadêmica

e profissional

• Respostas ao questionário do estudante: mudança implantada em 2013 Nutrição (IELUSC) + Agronomia (SETREM)

IELUSCSETREM

IELUSCSETREM

• Respostas ao questionário do estudante: mudança implantada em 2013 Nutrição (IELUSC) + Agronomia (SETREM)

ORGANIZAÇÃO DIDÁTICO-PEDAGÓGICA1 ⃝

Discordo Totalmente

2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ Concordo Totalmente

As disciplinas cursadas contribuíram para sua formação integral, como cidadão e profissional.

1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder( ) Não se aplica

Os conteúdos abordados nas disciplinas do curso favoreceram sua atuação em estágios ou em atividades de iniciação profissional.


As metodologias de ensino utilizadas no curso desafiaram você a aprofundar conhecimentos e desenvolver competências reflexivas e críticas.


O curso propiciou experiências de aprendizagem inovadoras. 1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder( ) Não se aplica

O curso contribuiu para o desenvolvimento da sua consciência ética para o exercício profissional.


No curso você teve oportunidade de aprender a trabalhar em equipe. 1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder( ) Não se aplica

O curso possibilitou aumentar sua capacidade de reflexão e argumentação.


O curso promoveu o desenvolvimento da sua capacidade de pensar criticamente, analisar e refletir sobre soluções para problemas da sociedade.


O curso contribuiu para você ampliar sua capacidade de comunicação nas formas oral e escrita.


O curso contribuiu para o desenvolvimento da sua capacidade de aprender e atualizar-se permanentemente.


As relações professor-aluno ao longo do curso estimularam você a estudar e aprender.


Os planos de ensino apresentados pelos professores contribuíram para o desenvolvimento das atividades acadêmicas e para seus estudos. 1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder

( ) Não se aplica

• Respostas ao questionário do estudante

Foram oferecidas oportunidades para os estudantes superarem dificuldades relacionadas ao processo de formação.


A coordenação do curso esteve disponível para orientação acadêmica dos estudantes. 1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder( ) Não se aplica

O curso exigiu de você organização e dedicação frequente aos estudos. 1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder( ) Não se aplica

Foram oferecidas oportunidades para os estudantes participarem de programas, projetos ou atividades de extensão universitária.


Foram oferecidas oportunidades para os estudantes participarem de projetos de iniciação científica e de atividades que estimularam a investigação acadêmica.


O curso ofereceu condições para os estudantes participarem de eventos internos e/ou externos à instituição.


A instituição ofereceu oportunidades para os estudantes atuarem como representantes em órgãos colegiados.


O curso favoreceu a articulação do conhecimento teórico com atividades práticas. 1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder( ) Não se aplica

As atividades práticas foram suficientes para relacionar os conteúdos do curso com a prática, contribuindo para sua formação profissional.


O curso propiciou conhecimentos atualizados e/ou contemporâneos em sua área de formação.


O estágio supervisionado proporcionou experiências diversificadas para a sua formação.


As atividades realizadas durante seu trabalho de conclusão de curso contribuíram para qualificar sua formação profissional


Os estudantes participaram de avaliações periódicas do curso (disciplinas, atuação dos professores, infraestrutura).


As avaliações da aprendizagem realizadas durante o curso foram compatíveis com os conteúdos ou temas trabalhados pelos professores.


Os professores apresentaram disponibilidade para atender os estudantes fora do horário das aulas.


Os professores demonstraram domínio dos conteúdos abordados nas disciplinas.


Os professores utilizaram tecnologias de informação e comunicação (TICs) como estratégia de ensino (projetor multimídia, laboratório de informática, ambiente virtual de aprendizagem).


A instituição dispôs de quantidade suficiente de funcionários para o apoio administrativo e acadêmico.


O curso disponibilizou monitores ou tutores para auxiliar os estudantes. 1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder( ) Não se aplica

As condições de infraestrutura das salas de aula foram adequadas. 1 ⃝ 2 ⃝ 3 ⃝ 4 ⃝ 5 ⃝ 6 ⃝ ( ) Não sei responder( ) Não se aplica

Os equipamentos e materiais disponíveis para as aulas práticas foram adequados para a quantidade de estudantes.


Os ambientes e equipamentos destinados às aulas práticas foram adequados ao curso.


A biblioteca dispôs das referências bibliográficas que os estudantes necessitaram.


A instituição contou com biblioteca virtual ou conferiu acesso a obras disponíveis em acervos virtuais.


Foram oferecidas oportunidades para os estudantes realizarem intercâmbios e/ou estágios no país.


Foram oferecidas oportunidades para os estudantes realizarem intercâmbios e/ou estágios fora do país.


• Impacto do ENEM no conceito IDD e CPC: Jornalismo, 2012

PUCRS

Nota ENADE concluintes: 3,46 (4)Nota bruta ENADE: 52,58Nota dos ingressantes no Enem: 58,39Nota padronizada do IDD: 3,68 (4)CPC: 3,66 (4)

Nota ENADE concluintes: 3,65 (4)Nota bruta ENADE: 54,20Nota dos ingressantes no Enem: 51,33Nota padronizada do IDD: 4,28 (5)CPC: 3,48 (4)

IELUSC PUCRS

IELUSC

- Papel dos docentes

Conhecimento do processo

Conhecer os documentos institucionais e de curso

Plano de Desenvolvimento Institucional (PDI) Projeto Pedagógico Institucional (PPI) Projeto Pedagógico de Curso (PPC) Relatório de Autoavaliação Institucional Formulário Eletrônico

Conhecimento dos resultados da IES / do Curso / da Área

Disponíveis em: http://portal.inep.gov.br/enade

análise da prova do ENADE e demais instrumentos participação das discussões de reorientação de projeto

pedagógico / estratégias de ensino com base nos resultados revisão das disciplinas de sua responsabilidade

www.pucrs.br/edipucrs

participação das atividades relativas à avaliação na IES e no curso

Participar das avaliações e ações conduzidas pela CPA inclusão da discussão sobre avaliação – externa e interna

na sala de aula estímulo e o apoio aos estudantes para a participação nas

avaliações internas e externas realização de uma boa prova, promovendo trocas e

diálogos dentro e fora da sala de aula – ressaltando a importância dessa avaliação e os benefícios agregados

auxílio no preenchimento do questionário do estudante

“precisamos entender os processos avaliativos como formativos para toda a comunidade acadêmica, nos conscientizando e criando uma cultura de avaliação no sentido de qualificarmos cada vez mais a instituição da qual fazemos parte e levamos o nome”

Obrigada!

[email protected]

PROFA. DRA. MARION CREUTZBERG ASSESSORA DE AVALIAÇÃO E REGULAÇÃO DE CURSOS (PROACAD/PUCRS)...

Documents

Transcript of PROFA. DRA. MARION CREUTZBERG ASSESSORA DE AVALIAÇÃO E REGULAÇÃO DE CURSOS (PROACAD/PUCRS)...