Entre os dias 30 de novembro e 2 de dezembro de 2007, reuniu-se em Búzios um grupo de 19 pesquisadores, membros dos comitês da CAPES e do CNPq, da SBC – Sociedade Brasileira de Computação e da ABC – Academia Brasileira de Ciências. O objetivo da reunião foi analisar a evolução da área de Computação no Brasil, com vistas a um planejamento a curto, médio e longo prazo. Os participantes foram:
Alberto Laender Ana Teresa de Castro Martins Carlos José Pereira de Lucena Clarisse Sieckenius de Souza Claudia Bauzer Medeiros Edmundo de Souza e Silva Henrique Pacca Loureiro Luna |
Jayme Luiz Szwarcfiter José Carlos Maldonado José Palazzo M. de Oliveira José Roberto Boisson de Marca Luis Fernando G. Soares Marco Antonio Casanova Nelson Fonseca |
Nivio Ziviani Paulo Cesar Masiero Paulo Cunha Philippe Navaux Ricardo Anido Teresa Bernarda Ludermir |
Na época foram feitas algumas recomendações. É claro que passados dez anos algumas coisas evoluíram, mas ainda há muito a ser feito. Acredito que precisamos retomar a discussão e passar a considerar critérios múltiplos de avaliação com mais intensidade. Apesar da CAPES insistir constantemente que o uso do QUALIS é inadequado para a avaliação monodimensional dos pesquisadores, e ainda pior por uma janela de quatro anos de suas publicações, esta avaliação continua sendo corrente nos programas. O objetivo do QUALIS não é a avaliação dos programas mas a análise dos mesmos para qualificar a contribuição para o país. Em recente palestra (2017) do Presidente do CNPq na ABC ele deixou claro que na dimensão de publicações estamos muito bem, infelizmente nas dimensões de inovação e de tecnologia desenvolvida ainda falta muito a ser conquistado, então estas dimensões devem ser valorizadas. Outra dimensão importante para a qualificação de um programa é a formação de recursos humanos, esta dimensão deve ser considerada na vida de um pesquisador. Deixo a vocês a leitura do documento e a verificação do que a comunidade realizou nestes 10 anos…
RECOMENDAÇÕES SOBRE AVALIAÇÃO E POSICIONAMENTO DA ÁREA DE COMPUTAÇÃO
A Computação é hoje onipresente e essencial para o desenvolvimento econômico e social do País. Cabe a uma instituição de ensino e pesquisa adiantar-se às necessidades futuras da sociedade e preparar adequadamente as próximas gerações para suplantar os desafios daí advindos. Uma visão clara da evolução da tecnologia, uma percepção adequada das necessidades da sociedade, a contínua adaptação da estrutura curricular e a motivação de jovens talentos são condições necessárias para levar a cabo esta missão. Estas afirmações adquirem uma maior relevância em áreas com alto impacto social e evolução acelerada, como é o caso de Computação.
Com este pano de fundo e dentro das atividades constantes de planejamento estratégico da área, entre os dias 30 de novembro e 2 de dezembro de 2007, reuniu-se em Búzios um grupo de 19 pesquisadores, membros dos comitês da CAPES, do CNPq, SBC e IEEE, com o objetivo de analisar a evolução da área de Computação no Brasil, com vistas a um planejamento a curto, médio e longo prazo. Esta reunião havia sido programada desde o início do ano de 2007.
Os principais tópicos abordados foram: os trabalhos dos comitês do CNPq e CAPES no último triênio; os estudos sobre a produção em ciência da computação, em andamento, para dar subsídios ao processo de avaliação (especialmente aquelas conduzidas na UFMG, na UNICAMP e no IEEE); o aperfeiçoamento do QUALIS em vigor, com especial atenção para a importância das conferências para a área; e a inserção da Computação na classificação das áreas da CAPES e do CNPq.
Um tema que permeou todas essas discussões foi a necessidade de avaliar a inserção internacional da área de Computação, através de comparações com programas de excelência na América do Norte e Europa. Pesquisadores da UFMG e da UNICAMP apresentaram um exercício de análise de desempenho da área com este objetivo, utilizando algoritmos e programas de mineração de dados em grandes bibliotecas digitais mundiais e dados sobre formação de doutores, inclusive os da CAPES. O exercício foi estendido, em parte, a áreas tais como Física, Biologia, Engenharia IV e Matemática. A análise confirmou que a comparação entre áreas baseada em bibliometria é um problema de grande complexidade e pode levar a conclusões bastante distorcidas.
Os participantes propõem três recomendações gerais, dirigidas à SBC e aos atuais e futuros comitês de avaliação e assessoramento da CAPES e do CNPq. A primeira recomendação é de curto prazo e urgente e as outras duas são de médio e longo prazo.
Recomendação 1: Revisão dos indicadores da produção dos programas de pós-graduação e da metodologia de avaliação
Os participantes sugerem que o próximo comitê de área da CAPES revise, com urgência, a definição dos indicadores da produção dos programas de pós-graduação e, por conseguinte, o próprio documento de área.
A revisão do documento de área deve partir de uma análise comparativa vertical para avaliar a inserção internacional dos programas de pós-graduação da área, em parte já realizado, conforme mencionado. Em particular, os índices medindo a produção bibliográfica e o WebQUALIS da área devem: (1) incorporar periódicos de áreas afins, à semelhança de outras áreas, como Engenharia IV; (2) incorporar conferências, reforçando a importância fundamental dos anais de conferências como meio de divulgação dos avanços da área, sem a limitação de conter apenas aquelas observadas no triênio.
Após consolidar o novo documento de área, os participantes sugerem que o próximo comitê avalie se a atual implementação do sistema utilizado pela CAPES permite especificar os indicadores definidos no documento e, se for o caso, solicitem modificações no sistema.
Recomendação 2: Criação de um esforço permanente de desenvolvimento e aprimoramento de ferramentas e metodologias para avaliação do desempenho e do impacto da área
Os participantes sugerem a criação, no contexto da SBC, de um esforço permanente de desenvolvimento e aprimoramento de ferramentas e metodologias para a avaliação do desempenho dos programas de pós-graduação e da contribuição da área para o crescimento econômico e bem estar social do País. Ressalte-se que o esforço não se destina a classificar os programas de pós-graduação, que é atribuição da CAPES.
Quanto à avaliação do desempenho dos programas, os participantes sugerem que a SBC coloque à disposição dos coordenadores de pós-graduação recomendações que promovam uma melhoria na qualidade dos dados levantados pelos programas, especialmente dados padronizados sobre os veículos de publicação da área (inclusive conferências).
Quanto à avaliação do impacto da área, os participantes sugerem que a SBC promova a consolidação e complemente as pesquisas e estudos já realizados, principalmente pelo MCT, para determinar a necessidade atual e projetada de profissionais da área.
Recomendação 3: Análise do posicionamento da área de Computação no contexto das grandes áreas
Os participantes sugerem que o próximo comitê de área da CAPES e o Comitê Assessor de Ciência da Computação do CNPq analisem em profundidade sobre qual deve ser o posicionamento da Computação no contexto das grandes áreas adotadas pela CAPES e pelo CNPq, criando uma caracterização mais precisa que fortaleça a área.
A análise deverá avaliar inicialmente se Computação deve ser tratada como uma grande área ou não; caso a decisão seja não tratá-la, a análise deverá indicar se Computação deve pertencer à grande área de Ciências Exatas e da Terra ou à grande área das Engenharias. Por fim, independentemente do resultado, a análise deverá avaliar a adequação de subdividir a área de Computação em duas de tal forma que uma subárea acomode os programas atualmente classificados como de Computação e a outra subárea inclua programas com um forte viés de Computação, mas que atualmente são classificados como multidisciplinares.