Visualizando 1 resposta da discussão
  • Autor
    Posts
    • #6041

      Este tópico destina-se aos assuntos ligados à avaliação multicritérios, isto é aqueles tópicos que tratam do modelo de avaliação, seus problemas e alternativas propostas. Assuntos importantes:

      • Quais métricas são importantes para cada dimensão?
      • Como avaliar estas métricas?
      • Estas métricas são verificáveis externamente?
      • É possível automatizar a obtenção dos dados?
    • #6053

      Um problema surgirá se os multicritérios forem tratados de maneira tradicional, como um conjunto de métricas (e não dimensões) a serem avaliadas da maneira tradicional. Todos os programas vão acabar ampliando esses itens e novamente o problema de contabilizar números nos diferentes itens com uma nova onda (mais complexa) de medições com elementos de qualidade duvidosa vão surgir… Como garantir que a avaliação vai ser eficiente e adequada e não somente mais numerologia?

      • #6081

        Um problema surgirá se forem tratadas como métricas isoladas e não como componentes de dimensões. A ideia é que cada dimensão seja o resultado de muitas métricas específicas. O grande problema do Lattes e da atual avaliação dos programas é que se criou uma visão de que o mais importante para avaliar um programa são as suas publicações. As outras dimensões na avaliação da CAPES saturam para os melhores programas (6 e 7). Os avaliadores poderiam tomar para cada métrica o valor do melhor programa e colocá-la como 100, os demais seriam classificados proporcionalmente, sem saturação. Mas nas publicações parece que o céu é o limite. Então um espaço multidimensional é mapeado para a única dimensão das publicações. Na avaliação multicritérios cada dimensão é composta por muitias métricas (neste fórum devemos discutir estas métricas). Então um programa não seria mais 7, mas teria um valor em cada uma das dimensões. Como é impossível para um programa conseguir se ajustar para uma alta pontuação em todas as dimensões é muito mais difícil a manipulação. Cada programa deverá fazer um planejamento de quais são seus objetivos, e será cobrado por isto.

Visualizando 1 resposta da discussão
  • Você deve fazer login para responder a este tópico.