7/25/2019 Nota Tecnica CPC 17-12-2009

1/13

1

Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira INEPMinistrio da Educao MEC

Clculo do Conceito Preliminar de Curso (CPC)

O Conceito Preliminar de Curso (CPC) calculado para cada curso i avaliado

dentro das reas contempladas na avaliao anual do Enade. Ou seja, a unidade de

observao de interesse o curso i com registro de estudantes inscritos no ENADE

definido por uma instituio de ensino superior (IES) k, por um municpio me por uma

rea de avaliaoj. Segue um exemplo do que pode ser considerado um cursoi: o curso

de Pedagogia, da Universidade Federal de Mato Grosso, oferecido no municpio de

Cuiab.

As reas contempladas na avaliao de 2008 esto descritas no Apndice desta

Nota Tcnica. Note que algumas destas reas possuem subreas. No caso destas reas

que possuem subreas, a definio de curso tambm inclui esta desagregao. Assim, o

curso i definido por uma IES k, um municpio m, uma reaje uma subrea h.

1. Componentes

O CPC combina diversas medidas relativas qualidade do curso: as informaes

de infra-estrutura e instalaes fsicas, recursos didtico-pedaggicos e corpo docente

oferecidas por um curso i; o desempenho obtido pelos estudantes concluintes e

ingressantes no Enade; e os resultados do Indicador da Diferena entre os Desempenhos

Esperado e Observado (IDD). Ao todo so oito componentes, oito medidas de qualidade

do curso i.

Todas as medidas originais referentes a esses componentes so padronizadas e

transformadas em notas entre 0 e 5. O procedimento o seguinte: toma-se a medida

original para cada curso i (por exemplo, a proporo de professores doutores desse

curso), e subtrai-se dela a mdia dessa medida obtida para a rea ja qual este curso

pertence, e divide-se o resultado da subtrao pelo desvio padro dessa medida obtido

para a rea j a qual este curso pertence,como se segue:

7/25/2019 Nota Tecnica CPC 17-12-2009

2/13

2

x

XDP

XXAP

= (1)

em que XAP o afastamento padronizado referente a uma das medidas de interesse X

de um curso i; X o valor observado da medida para o curso i; X a mdia desta

medida na reaj; exDP o desvio padro da medida na rea j.

Aps a padronizao, para que todas as instituies tenham notas variando de 0 a

5, feito o seguinte ajuste: soma-se ao afastamento padronizado de cada cursoio valor

absoluto do menor afastamento padronizado entre todos os cursos da reaj; em seguida,

divide-se este resultado pela soma do maior afastamento padronizado com o mdulo do

menor. Os cursos que obtiveram valores de afastamento inferiores a -3,0 e superiores a3,0 no foram utilizados como ponto inferior ou superior da frmula, pelo fato de esses

cursos terem desempenhos muito discrepantes dos demais da sua rea (conhecidos

como outliers).

Ento, multiplica-se o resultado desse quociente por 5. O clculo acima descrito

pode ser expresso pela frmula a seguir, que chamada de Nota Padronizada da medida

de interesse X do cursoi.

inferiorsuperior

inferior

5XX

XX

APAP

APAP

NX+

+

= (2)

Esse clculo far com que a Nota Padronizada do curso i, referente determinada

medida, como a organizao didtico-pedaggica do curso, varie de 0 a 5. Os cursos com

Afastamento Padronizado menor que -3,0 recebem Nota Padronizada igual a 0 (zero) e

aqueles com Afastamento Padronizado maior que 3,0 recebem Nota Padronizada igual a

5 (cinco).

A seguir descrevemos cada uma destas 8 medidas de qualidade do curso que

compem o CPC.

1.1 Professores Doutores

A medida original para a criao da Nota de Professores Doutores (NPD ) de um

curso i corresponde proporo de professores vinculados ao curso i cuja titulao

maior ou igual ao doutorado ( PD ).

7/25/2019 Nota Tecnica CPC 17-12-2009

3/13

7/25/2019 Nota Tecnica CPC 17-12-2009

4/13

4

Para calcular essa proporo R , divide-se o nmero de professores vinculados ao

curso icujo regime de dedicao seja integral ou parcial, pelo nmero total de professores

vinculados a esse curso.Essa medida original PR padronizada e transformada, conforme procedimento

descrito anteriormente, para dar origem Nota Padronizada referente aos Professores

com Regime de Dedicao Integral ou Parcial (NPR), um valor entre 0 e 5.

Essa informao tambm extrada do Cadastro Docente, onde as instituies

cadastram cada um de seus professores, vinculando-os a cada curso em que eles

lecionam.

O curso que no tiver nenhum professor cadastrado, tambm ter a nota de

Professores com Regime de Dedicao Integral ou Parcial (NPR) computada como 0(zero) para o clculo do CPC.

1.4 Infra-Estrutura

A medida original para a criao da Nota de Infra-Estrutura (NF) de um curso i

corresponde proporo de alunos do curso i que avaliaram positivamente um aspecto

da infra-estrutura do curso no questionrio do Enade (F ).

A pergunta do questionrio do Enade sobre infra-estrutura utilizada a seguinte:

Aulas prticas: os equipamentos disponveis so suficientes para todos os alunos?. As

alternativas de resposta so: (A) = Sim, em todas elas. / (B) = Sim, na maior parte delas. /

(C) = Sim, mas apenas na metade delas. / (D) = Sim, mas em menos da metade delas. /

(E) = No, em nenhuma. A partir desta pergunta, considerou-se como tendo avaliado

positivamente a infra-estrutura os alunos que responderam (A) ou (B).

Para calcular a proporo de alunos F , divide-se o nmero de alunos do curso i

que avaliaram positivamente o aspecto de infra-estrutura extrado do questionrio do

Enade, pelo nmero total de alunos do curso que responderam ao questionrio.

Essa medida original F padronizada e transformada, conforme procedimento

descrito anteriormente, para dar origem Nota Padronizada referente Infra-Estrutura

(NF), um valor entre 0 e 5.

Caso nenhum aluno tenha respondido ao questionrio socioeconmico, o curso

ter a nota referente infra-estrutura ( NF) computada como 0 (zero) para o clculo do

CPC.

7/25/2019 Nota Tecnica CPC 17-12-2009

5/13

5

1.5 Organizao Didtico-Pedaggica

A medida original para a criao da Nota de Organizao Didtico-Pedaggica

(NO ) de um curso i corresponde proporo de alunos do curso i que avaliarampositivamente um aspecto da organizao didtico-pedaggica do curso no questionrio

do Enade (O ).

A pergunta do questionrio do Enade sobre a organizao didtico-pedaggica

utilizada a seguinte: Os planos de ensino contm todos os seguintes aspectos:

objetivos; procedimentos de ensino e avaliao; contedos e bibliografia da disciplina?.

As alternativas de resposta so: (A) = Sim, todos contm. / (B) = Sim, a maior parte

contm. / (C) = Sim, mas apenas cerca da metade contm. / (D) = Sim, mas apenas

menos da metade contm. / (E) = No, nenhum contm. A partir desta pergunta,considerou-se como tendo avaliado positivamente a organizao didtico-pedaggica os

alunos que responderam (A).

Para calcular a proporo de alunos O , divide-se o nmero de alunos do curso i

que avaliaram positivamente o aspecto da organizao didtico-pedaggica extrado do

questionrio do Enade, pelo nmero total de alunos do curso que responderam ao

questionrio.

Essa medida original O padronizada e transformada, conforme procedimento

descrito anteriormente, para dar origem Nota Padronizada referente Organizao

Didtico-Pedaggica (NO), um valor entre 0 e 5.

Caso nenhum aluno tenha respondido ao questionrio socioeconmico, o curso

ter a nota referente organizao didtico-pedaggica ( NO) computada como 0 (zero)

para o clculo do CPC.

1.6 Nota dos Concluintes no Enade

A Nota dos Concluintes no Enade (NC) corresponde nota final que d origem ao

Conceito Enade1. Portanto, para cada curso i composta por: 75% da nota dos alunos

concluintes no componente especfico do Enade e 25% da nota dos mesmos alunos no

componente de formao geral do Enade. importante dizer que as notas que entram no

cmputo de NCso as notas padronizadas e j transformadas na escala de 0 a 5.

1Para mais detalhes, consultar Nota Tcnica referente ao clculo do Conceito Enade.

7/25/2019 Nota Tecnica CPC 17-12-2009

6/13

6

1.7 Nota dos Ingressantes no Enade

A Nota dos Ingressantes no Enade ( NI) calculada conforme a mesma

metodologia que a Nota dos Concluintes no Enade (NC), com a nica diferena que os

valores utilizados correspondem s notas no exame dos alunos ingressantes, e no dos

concluintes. Portanto, para cada curso i, NI composta por 75% da nota dos alunos

ingressantes no componente especfico do Enade e por 25% da nota dos mesmos alunos

no componente de formao geral do Enade. Novamente, importante dizer que as notas

que entram no cmputo de NIso as notas padronizadas e j transformadas na escala

de 0 a 5.

1.8 IDD

Sabe-se que a diferena entre os desempenhos no Enade de alunos egressos de

dois cursos de graduao de duas instituies distintas no depende somente das

diferenas de qualidade entre esses cursos. As diferenas em relao ao perfil dos alunos

de ambos os cursos ao ingressar no ensino superior tambm influenciam as diferenas

nos resultados.

O Indicador de Diferena entre os Desempenhos Observado e Esperado (IDD)

tem o propsito de trazer s instituies informaes comparativas dos desempenhos de

seus estudantes concluintes em relao aos resultados mdios obtidos pelos concluintes

das demais instituies que possuem estudantes ingressantes de perfil semelhante ao

seu. Para tanto, o IDD, como o prprio nome j diz, resultante da diferena entre o

desempenho mdio obtido no Enade pelos alunos concluintes de um curso e o

desempenho mdio que era esperado para esses mesmos alunos, dadas as informaes

existentes sobre o perfil dos ingressantes desse curso.

Os fatores que determinam o desempenho mdio dos estudantes concluintes de

um determinado cursoi podem ser separados, por hiptese, em trs parcelas: a primeiradeterminada pelas caractersticas de ingresso destes alunos concluintes em termos de

aprendizagem; outra determinada pela qualidade da formao oferecida pelo curso i; e,

por fim, um termo de erro que capta os outros elementos que afetam o desempenho do

aluno, e . Assim, podemos escrever para um curso i:

eqcc I ++= (3)

com a hiptese usual de que [ ] 0, =qceE I .

7/25/2019 Nota Tecnica CPC 17-12-2009

7/13

7

As letras minsculas indicam que as variveis esto expressas em termos de

desvios da mdia, ou seja, a varivel original observada para cada curso i menos a

mdia da respectiva varivel observada para a reaja qual o curso pertence. Assim, c o desempenho dos alunos concluintes do curso imedido em desvios da nota mdia de

concluintes da rea j; Ic o desempenho dos alunos concluintes do curso i no momento

de ingresso medido em desvios da media da rea j; q a qualidade do curso imedida

em desvios da mdia da reaj.

No possvel observar exatamente o desempenho dos concluintes no momento

do ingresso ( Ic ). Isto porque no d para garantir que todos aqueles que tenham

participado da prova como ingressantes, participem como concluintes trs anos depois, j

que h cursos com mais ou menos de quatro anos de durao, os alunos podem seatrasar, trancar o curso e voltar, entre outras razes. Porm, podemos ter uma estimativa

desta varivel o desempenho dos concluintes no ingresso ( Ic ), visto que o Enade

aplica provas para alunos ingressantes e concluintes do mesmo curso. A idia , para

cada curso i, utilizar o desempenho dos alunos ingressantes como proxy para o

desempenho dos alunos concluintes no momento de ingresso. Assim, temos que

Iccqidd == , onde Ic o desempenho previsto dos estudantes concluintes no seu

momento de ingresso.

A especificao que subsidia o clculo o IDD est representada a seguir:uofprpmpdzwic ++++++++= ........ (4)

Como colocado anteriormente, as letras minsculas indicam que todas as

variveis esto expressas em termos de desvios da mdia, isto , subtramos da varivel

original observada para cada curso i a mdia da respectiva varivel observada para a

reaja qual o curso pertence. Na equao acima:

c : mdia ponderada das notas de contedo especfico (0,75) e de formao geral (0,25)

no Enade dos concluintes do curso i;

i : mdia ponderada das notas de contedo especfico (0,75) e de formao geral (0,25)no Enade dos ingressantes do curso i;

w : proporo de estudantes ingressantes do curso i cujo pai e/ou a me tem nvel

superior de escolaridade2;

2As informaes sobre a escolaridade dos pais dos estudantes ingressantes foram extradas do questionriosocioeconmico respondido pelos alunos no Enade. Considerou-se a maior escolaridade entre a do pai e dame do ingressante. No caso em que apenas uma das informaes estava disponvel, utilizou-se estainformao. Para agregar a informao para o curso i, computou -se a proporo de es tudantes do curso icujos pais tinham pelo menos ensino superior.

7/25/2019 Nota Tecnica CPC 17-12-2009

8/13

8

z: razo entre o nmero de concluintes e o nmero de ingressantes no cursoi;

pd: proporo de docentes no curso icom ttulo mnimo de doutor;

pm : proporo de docentes no curso icom ttulo mnimo de mestre;

pr: proporo de docentes no curso icom regime de trabalho integral ou parcial;

f: proporo de alunos do curso i que avaliaram positivamente um aspecto da infra-

estrutura do curso;

o : proporo de alunos do curso i que avaliaram positivamente um aspecto da

organizao didtico-pedaggica do curso;

,,,,,,, : parmetros a serem estimados.

Para a estimativa de Ic desempenho dos concluintes de um curso ino momento

de ingresso so utilizadas as seguintes variveis: a nota dos ingressantes do curso, o

nvel de escolaridade dos pais dos estudantes ingressantes e razo entre o numero de

ingressantes e o de concluintes. Esta ultima varivel includa como forma de contornar

possvel vis de estimao devido evaso dos estudantes ao longo do curso. Isto

porque, para cursos com elevada taxa de evaso, considerando que a evaso seja um

fenmeno no-aleatrio, o perfil mdio dos ingressantes pode no representar bem o dos

concluintes.

As variveis relativas qualidade do curso i presentes na equao (4) especificamente, qualidade do corpo docente e caractersticas da infra-estrutura e

organizao pedaggica do curso i3 foram inseridas apenas para diminuir o vis de

estimativa dos coeficientes associados s variveis caractersticas dos ingressantes.

Provavelmente, o desempenho dos ingressantes positivamente correlacionado com a

qualidade dos cursos, j que alunos com boa formao prvia tm maiores chances de

ingressar em cursos de melhor qualidade. Assim, parte da qualidade do curso iseria

captada por estes coeficientes associados s caractersticas dos ingressantes, o que nos

faria subestimar o idd para os cursos que recebem os melhores alunos. Procurando

diminuir este vis, foram includas estas variveis de qualidade do curso i. Note que para

a estimativa de Ic apenas as caractersticas dos ingressantes e a razo concluinte

ingressante so utilizadas.

A equao (4) estimada para cada uma das reasj. De fato para cada reaj, a

equao (4) estimada duas vezes. Numa primeira, estima-se a regresso, computa-se o

resduo e, ento, calcula-se o resduo padronizado, conforme procedimento descrito

3Note que estas variveis so as mesmas descritas anteriormente como componentes individuais do CPC itens de 1.1 a 1.5.

7/25/2019 Nota Tecnica CPC 17-12-2009

9/13

9

anteriormente (veja equao 1). A partir do resduo padronizado so identificados os

cursos outliers, ou seja, os cursos para os quais o resduo padronizado foi menor que -3

ou maior que 3. Na segunda estimativa definitiva, de onde se obtm o idd, estes cursosoutliersno so considerados.

Vale ressaltar, ainda, que se considerou para computar a nota mdia do curso,

tanto no desempenho do ingressante quanto no desempenho do concluinte, apenas os

estudantes com notas maiores que zero tanto na parte de formao geral da prova

quanto na de conhecimento especfico. Alm disso, excluiu-se das estimaes cursos

com menos de 10 participantes ou com taxa de participao inferior a 20% dos

selecionados, seja para o caso dos ingressantes ou concluintes. Entretanto, o

desempenho esperado e, portanto, o iddfoi computado para todos os cursos com mais de

10 participantes (selecionados e com nota no nula) entre ingressantes e entreconcluintes, ainda que a taxa de participao seja inferior a 20%4.

Obtido o idd, o passo seguinte, como para demais variveis, foi padroniz-lo e

transform-lo, conforme procedimento descrito anteriormente, para dar origem Nota

Padronizada do IDD (NIDD ), um valor entre 0 e 5.

Quando no foi possvel atribuir um iddpara um curso i, a Nota Padronizada do

IDD (NIDD ) recebeu o mesmo valor da Nota Padronizada de Concluintes (NC) para

este curso i para o clculo do CPC.

2. Forma de Clculo

O propsito do CPC agrupar diferentes medidas da qualidade do curso,

entendidas como medidas imperfeitas da contribuio do curso para a formao dos

alunos, em uma nica medida com menor erro. Para determinar como essas diferentes

medidas seriam ponderadas na formao do CPC, foram desenvolvidos estudos pela

equipe tcnica do INEP5. Posteriormente, o assunto foi discutido na Comisso Nacional

de Avaliao da Educao Superior (Conaes), que acabou por referendar a seguinte

ponderao para compor o CPC:

4Para 7 reas, entretanto, em funo do nmero pequeno de cursos no foi possvel estimar a equao (4) e,portanto, os cursos destas reas ficaram sem idd. Foram elas: Tecnologia em Alimentos, Tecnologia emConstruo de Edifcios, Tecnologia em Fabricao Mecnica, Tecnologia em Gesto da Produo Industrial,Tecnologia em Manuteno Industrial, Tecnologia em Processos Qumicos e Tecnologia em Saneamento

Ambiental.5As anlises desenvolvidas encontram-se no Texto para Discusso n 32 Avaliao de Cursos na EducaoSuperior: A Funo e a Mecnica do Conceito Preliminar de Curso, disponvel em:http://www.publicacoes.inep.gov.br/detalhes.asp?pub=4377#

7/25/2019 Nota Tecnica CPC 17-12-2009

10/13

10

)15,0()15,0(

)30,0()05,0()05,0()05,0()05,0()20,0(

NCNI

NIDDNONFNPRNPMNPDCPC

+

+

+++++=

Deste clculo obtm-se o valor do CPC para cada curso i em uma escala de 0 a 5,

conforme a equao. Esses valores contnuos so truncados na segunda casa decimal e

transformados em faixas de 1 a 5, conforme a correspondncia abaixo:

Quadro 1: Distribuio dos conceitos

Valor Discreto do CPC Valor contnuo do CPC

1 0,0 a 0,94

2 0,95 a 1,94

3 1,95 a 2,94

4 2,95 a 3,94

5 3,95 a 5,0

Tambm em discusso na Conaes, definiu-se que nenhum curso pode ser

considerado de excelncia ou seja, com Conceito Preliminar de Curso igual a 5 (cinco)

caso em algum dos termos que compem o Conceito Preliminar o curso tenha obtido nota

menor ou igual a 0,9 (correspondente a nota discreta igual a 1). Assim, qualquer curso

com nota em infra-estrutura e/ou em qualquer um dos outros termos menor que ou

igual a 0,9 atinge, no mximo, o conceito 4 (quatro).

O grfico seguinte apresenta a distribuio do CPC para os cursos avaliados em

2008. Para os componentes do CPC relativos s notas dos alunos e s respostas dos

alunos ao questionrio socioeconmico foram utilizados os dados do Enade 2008 e para

os componentes do CPC relativos aos professores dos cursos foram utilizados dados do

cadastro de docentes referentes a 2008.

Termo de insumos

(5)

7/25/2019 Nota Tecnica CPC 17-12-2009

11/13

11

Conceito Preliminar de Curso - CPC - 2008

53

1354

2421

871

121

2509

0

50 0

1000

1500

2000

2500

3000

1 2 3 4 5 SC

7/25/2019 Nota Tecnica CPC 17-12-2009

12/13

12

Apndice

Os cursos avaliados pelo Enade 2008 fazem parte das seguintes reas e subreas nos casos em que h essa subdiviso:

1. Arquitetura e Urbanismo

2. Biologia

3. Cincias Sociais

4. Computao e Informtica

4.1. Bacharelado em Cincia da Computao

4.2. Bacharelado em Sistemas de Informao4.3. Engenharia da Computao

5. Engenharia (Grupo I)

5.1. Engenharia Cartogrfica

5.2. Engenharia Civil

5.3. Engenharia de Agrimensura

5.4. Engenharia Hdrica

5.5. Engenharia Sanitria

6. Engenharia (Grupo II)6.1. Computao

6.2. Controle e Automao

6.3. Eletrnica

6.4. Eletrotcnica

6.5. Telecomunicaes

7. Engenharia (Grupo III)

8. Engenharia (Grupo IV)

8.1. Engenharia Bioqumica e Engenharia de Biotecnologia8.2. Engenharia de Alimentos

8.3. Engenharia Qumica e Engenharia Industrial Qumica

8.4. Engenharia Txtil

9. Engenharia (Grupo V)

10. Engenharia (Grupo VI)

11. Engenharia (Grupo VII)

11.1. Engenharia

7/25/2019 Nota Tecnica CPC 17-12-2009

13/13

13

11.2. Engenharia Ambiental

11.3. Engenharia de Minas

11.4. Engenharia de Petrleo11.5. Engenharia Industrial

12. Engenharia (Grupo VIII)

12.1. Engenharia Agrcola

12.2. Engenharia de Pesca

12.3. Engenharia Florestal

13. Filosofia

14. Fsica

15. Geografia16. Histria

17. Letras

18. Matemtica

19. Pedagogia

20. Qumica

21. Tecnologia em Alimentos

22. Tecnologia em Anlise e Desenvolvimento de Sistemas

23. Tecnologia em Automao Industrial24. Tecnologia em Construo de Edifcios

25. Tecnologia em Fabricao Mecnica

26. Tecnologia em Gesto da Produo Industrial

27. Tecnologia em Manuteno Industrial

28. Tecnologia em Processos Qumicos

29. Tecnologia em Redes de Computadores

30. Tecnologia em Saneamento Ambiental