COENG | EE - Engenharias Elétrica e Biomédica

Ciências Exatas e da Terra e Engenharias

Critérios de Julgamento (CA-EE) - Vigência: 2019-2020

Este documento resume os critérios de avaliação de candidatos a bolsas de produtividade em pesquisa relacionados ao Comitê Assessor de Engenharia Elétrica e Biomédica (CA-EE) do CNPq. Os critérios visam reconhecer pesquisadores de destaque em suas áreas de atuação e estimular a pesquisa continuada e de alta qualidade nas áreas de Engenharia Elétrica e Biomédica com o objetivo de estimular a formação de grupos de pesquisa de excelência e a consolidação dos grupos de pesquisa e dos programas de pós-graduação de alta qualidade.

I. Critérios Gerais

  1. O enquadramento do pesquisador na Categoria/Nível 2 exige que o pesquisador seja doutor há, pelo menos, 3 (três) anos por ocasião da implementação da bolsa. O enquadramento do pesquisador na Categoria/Nível 1 exige que o pesquisador seja doutor há, pelo menos, 8 (oito) anos por ocasião da implementação da bolsa.
  2. O desempenho do pesquisador é avaliado principalmente por meio de indicadores no período recente da sua produção, compreendendo o decênio anterior, para o enquadramento nos Níveis 1 e 2, bem como indicadores que consideram toda a carreira.
  3. Os critérios de análise e julgamento seguem o teor e os pesos atribuídos nesta chamada.
  4. Os solicitantes serão classificados obedecendo critérios que considerem a qualidade da produção acadêmica, científica e tecnológica segundo os aspectos específicos apresentados a seguir. A classificação tem a finalidade exclusiva de adequar a demanda às cotas de bolsas PQ disponibilizadas pelo CNPq

II. Critérios Específicos

II.1 Perfil dos Bolsistas de Produtividade em Pesquisa no CA-EE

1) Pesquisador Categoria/Nível 2. Doutor há pelo menos 3 (três) anos, demonstrando capacidade de pesquisa independente, com produção técnico-científica relevante continuada, participação em grupos de pesquisa e programas de pós-graduação, e com atuação na formação de recursos humanos, pelo menos no nível de mestrado.

2) Pesquisador Categoria/Nível 1. Doutor com experiência comprovada em pesquisa independente, com produção técnico-científica relevante continuada, liderança de grupos de pesquisa, atuação na formação de recursos humanos tanto em nível de mestrado quanto de doutorado no País, participação nas atividades das sociedades técnico-científicas da área e inserção nas comunidades acadêmicas nacional e internacional dentro das subáreas cobertas pelo CA-EE.

Para que um pesquisador possa ascender à Categoria/Nível 1-B, é necessário que tenha contribuído de forma significativa no seu campo de pesquisa, e seja reconhecido por seus pares como uma liderança científica nacional e internacional na sua área de pesquisa.

Para que um pesquisador possa ascender à Categoria/Nível 1-A, é necessário que tenha contribuído de forma significativa no seu campo de pesquisa, e seja reconhecido por seus pares como uma liderança científica nacional e internacional na sua área de pesquisa. Além disso, será considerado o conjunto e o impacto das atividades acadêmicas, científicas e tecnológicas realizadas que incluem, dentre outros: distinções acadêmicas; coordenação de projetos; prêmios e honrarias; participação e atuação em sociedades científicas, agências de fomento à pesquisa e experiência administrativa pertinente.

II.2 Resumo dos Critérios de Avaliação da Produção Científica do Pesquisador

No processo de julgamento e avaliação das solicitações de Bolsa de Produtividade em Pesquisa, a ação do CA-EE consiste em:

a) Avaliação da proposta do projeto de pesquisa, que leva em consideração:

  1. Pareceres dos assessores ad hoc do CNPq considerados como de reconhecida competência na área.
  2. Análise pelo CA-EE quanto ao mérito da referida proposta, levando-se em consideração as informações relevantes dos pareceres ad hoc, assim como os itens pertinentes dos critérios estabelecidos por este CA.

b) Avaliação quantitativa e qualitativa da produção científica do pesquisador

O CA-EE utiliza critérios quantitativos e qualitativos no processo de avaliação da produção científica e tecnológica. Para a avaliação quantitativa, o CA-EE contabiliza, por meio do Currículo (CV) Lattes e do banco de dados Web of Science e eventualmente do Google Acadêmico, a produção técnico-científica nas áreas do CA-EE, dando importância primordial a:

  • artigos completos publicados em periódicos indexados pelo ISI (International Scientific Information - Web of Science) de caráter científico reconhecido pelas áreas de Engenharia Elétrica e Biomédica;
  • Ao Índice H e ao número total de citações alcançadas pelas publicações do pesquisador referentes ao ISI Web of Science e recuperados no CV-lattes de acordo com o seu código Researcher ID (http://www.researcherid.com/). Para tanto, na aba de citações do CV-Lattes todo pesquisador deve obrigatoriamente incluir o seu código de identificação junto ao sistema de identificação de autores científicos Researcher ID.
  • Soma dos índices de impacto (JCR) sobre publicações que apresentem este índice com valor maior do que 1 (um). Para fins dessa soma, o índice JCR a ser contabilizado para cada publicação é limitado em 4 (saturação).
  • Livros e monografias na área de pesquisa do proponente, levando em conta o seu impacto em citações encontradas no perfil do autor no Google Acadêmico.
  • Os artigos em periódicos serão analisados e algumas restrições podem ser aplicadas, vide as Seções e) e f). 

O CA-EE também considera importante a contribuição tecnológica, medida pelo número de patentes comprovadamente concedidas e/ou licenciada a terceiros. O CA-EE também considera os artigos completos publicados em periódicos nacionais de caráter científico e vinculados às sociedades científicas brasileiras, buscando conciliar o incentivo ao desenvolvimento desses periódicos com a necessidade de maior visibilidade e internacionalização da pesquisa feita no país.

 Para a avaliação qualitativa, o CA-EE considera itens como: qualidade dos periódicos, nível de qualidade e seletividade dos congressos que compõem a produção em conferências internacionais e conferências nacionais, impacto da contribuição científica e tecnológica, número de autores, tipo de artigo (regular paper, technical note, etc.), número de páginas e complexidade do tema da pesquisa. Artigos em periódicos que foram originalmente publicados em conferências, via de regra, não serão considerados.

Além disso, será analisado se as teses/dissertações orientadas pelo candidato geraram artigos científicos em periódicos. Por fim, como a seleção de bolsistas é feita em bases competitivas, o CA-EE utilizará também outras informações relevantes sobre cada candidato, tais como: seu engajamento no ambiente de pesquisa/inovação do Brasil e da sua Instituição; seu papel em atividades de sociedades científicas nacionais e internacionais; sua participação e coordenação de projetos de pesquisa com financiamento externo (agências de fomento e/ou empresas públicas ou privadas); seus trabalhos convidados em congressos de reconhecida importância, dentre outros. Propostas de pesquisadores que atuam em áreas interdisciplinares, serão avaliadas considerando-se também o grau de adesão da proposta e da produção do pesquisador  à área específica do pleito.

Os critérios qualitativos poderão se sobrepor aos quantitativos, quando a produção científica e tecnológica do candidato apresentar alta distinção e qualidade, avaliada por meio de critérios descritos acima.

Na análise qualitativa da produção científica, o CA-EE avalia o teor das associações de autores nas publicações, tanto quanto ao número de autores (ver item II.f.6) como sobre a oportunidade de tal associação.

c) Aspectos específicos

Será avaliada a produção científica no período de 10 (dez) anos imediatamente anteriores ao ano do pedido, somada à produção científica do ano vigente até a data final de submissão de propostas constante da chamada.

A Tabela 1 serve como referência na avaliação quantitativa para cada nível. O indicador JCR_10 refere-se à soma dos índices de impacto (JCR) sobre publicações em periódicos indexados na Web of Science, que apresentem este índice com valor maior do que 1 (um) e saturado em 4 (quatro), aplicando-se as substituições descritas na Seção II.2.e. O indicador Produção relevante (PR_10) refere-se à soma da quantidade absoluta de periódicos indexados considerados no período (levando em conta a restrição de JCR>1 e as substituições descritas na Seção II.2.e). O indicador Orientações concluídas (PTO_10) é número das orientações de doutorado concluídas (TD_10) multiplicado por dois, somado ao número de orientações de mestrado concluídas no período. As orientações a que se refere a tabela, são as concluídas nos programas de pós-graduação do País no período de avaliação.

Tabela 1. Avaliação do desempenho a partir da produção científica no período de avaliação (10 anos imediatamente anteriores ao ano do pedido, somada à produção científica do ano vigente até a data final de submissão de propostas constante da chamada).

Obs: Os valores dos indicadores são referências e não valores mínimos (ver box-plots no site do CNPq e no fim deste documento). O atendimento aos indicadores das tabelas não garante a recomendação para o nível de bolsa correspondente, pois a recomendação final é feita após análise em bases comparativas com os demais proponentes, levando também em conta critérios subjetivos, e depende da disponibilidade financeira. Outros indicadores também poderão ser utilizados pelo CA-EE, caso necessário.

Adicionalmente, serão considerados indicadores para o impacto e qualidade da produção dos pesquisadores de forma acumulativa, ao longo de toda a carreira, por meio do Índice H e do número de citações, ambos do ISI, do indicador Orientações concluídas (PTO), cujos valores de referência são apresentados na Tabela 2. Aspectos subjetivos e qualitativos do perfil e das contribuições do pesquisador ao longo da carreira serão também pontuados na Tabela 2 conforme os seguintes indicadores Ci, i = 1 a 7:

C1) participação nas atividades das sociedades técnico-científicas da área, nacionais e internacionais (0 a 5 pontos);

C2)  inserção nas comunidades acadêmicas nacional e internacional dentro das subáreas cobertas pelo CA-EE por meio da formação de recursos humanos, nucleação de novos grupos de pesquisa, participação em projetos estruturantes, entre outros (0 a 5 pontos);

C3) reconhecida liderança científica nacional e internacional na sua área de pesquisa (0 a 5 pontos);

C4) contribuição de forma significativa no seu campo de pesquisa (0 a 5 pontos);

C5) distinções acadêmicas; coordenação de projetos relevantes com financiamento externo; prêmios e honrarias (0 a 5 pontos);

C6) gestão científica e acadêmica tais como a atuação em agências de fomento à Ciência, Tecnologia e Inovação (nacionais e estaduais), implantação de laboratórios de pesquisa, coordenação de projetos de infraestrutura e de cooperação nacional/internacional (0 a 5 pontos);

C7) outras atividades consideradas relevantes (0 a 5 pontos).

Recomenda-se que os pesquisadores apresentem em suas propostas, de forma clara e objetiva, suas contribuições em cada um dos itens Ci,  i = 1 a 7.

Tabela 2: Indicadores de referência para a atuação ao longo de TODA a CARREIRA dos pesquisadores.

Obs: Os valores dos indicadores são referências e não valores mínimos (ver box-plots no site do CNPq e no fim deste documento). O atendimento aos indicadores das tabelas não garante a recomendação para o nível de bolsa correspondente, pois a recomendação final é feita após análise em bases comparativas com os demais proponentes, levando também em conta critérios subjetivos, e depende da disponibilidade financeira. Outros indicadores também poderão ser utilizados pelo CA-EE, caso necessário.

Para referência do quantitativo da produção para cada Categoria/Nível, pode-se consultar os gráficos em box-plot resultantes da avaliação das bolsas da Chamada de 2018, disponibilizado na página do CA-EE e no fim deste documento.

O atendimento aos indicadores das tabelas 1 e 2 não garante a recomendação para o nível de bolsa correspondente, já que as bolsas são distribuídas em bases concorrenciais, a partir de quotas limitadas que assim exigem classificação. Exceções poderão ser avaliadas pelo CA, considerando os critérios qualitativos e a produção relevante no período de avaliação.

d) Critério especial para pesquisadoras

Com o objetivo de promover a equidade entre homens e mulheres na ciência e tecnologia, será adotado um critério especial para as pesquisadoras que durante os 10 anos do período de avaliação passarem por nascimento ou adoção de filhos. Nesses casos, a janela temporal de avaliação será ampliada em 2 anos para cada gestação ou adoção no período, ou seja, serão consideradas as publicações, orientações e demais produção intelectual da pesquisadora em dois anos adicionais anteriores ao período de avaliação, para cada gestação ou adoção no período.

Esta medida terá reflexo principalmente nos indicadores da Tabela 1 e visa compensar o impacto da maternidade na produtividade científica das pesquisadoras.

As pesquisadoras que desejarem optar por este critério especial devem, necessariamente, informar as datas de nascimento ou adoção dos filhos na proposta.

OBSERVAÇÃO: ESTE ITEM É UMA PROPOSTA ORIUNDA DO CA-EE, QUE O CNPq RESOLVEU ACEITAR NESTA CHAMADA PARA AVALIAR SEUS EFEITOS, PORÉM O CNPq SE RESERVA O DIREITO DE NÃO INCLUIR PROXIMAS CHAMADAS, SE NECESSÁRIO FOR.

  1. Substituições
  1. Para a finalidade de atendimento à coluna ¿JCR¿ da Tabela 1, será possível substituir artigos publicados em periódicos por patentes comprovadamente concedidas ou transferidas. Essa substituição ocorrerá da seguinte forma:
  • Cada patente comprovadamente concedida ou licenciada para exploração por terceiros possibilitará a redução de 4 unidades no requisito de valor de JCR Acumulado.
  • As patentes serão contadas a partir da data de sua efetiva concessão ou licenciamento comprovado e serão contabilizadas, a partir dessa data, pelo período de 10 (dez).
  1. Para candidatos de instituições com programas de PG considerados pelo CA-EE como incipientes, ou em casos onde tais Programas não existam, como pode acontecer em centros de pesquisa, os requisitos de orientação poderão ser substituídos por supervisões de pós-doutorado, desde que o referido candidato apresente indicadores de produção acadêmica de destaque considerando fator de impacto, índice H (calculado pelo Web of Science) e/ou outros aspectos de mérito.
  2. Para a finalidade de atendimento às Tabelas 1 e 2, o CA pode, a seu critério, vir a considerar orientações concluídas fora do País.
  3. Os valores de referência constantes na Tabela 1 poderão ser parcialmente substituídos caso o proponente apresente uma produção acadêmica de destaque, considerando o fator de impacto (índice H calculado pelo Web of Science) da sua produção, livros editados com índice de citação relevante, ou outros aspectos de reconhecido mérito.
  4. Artigos em periódicos nacionais sem classificação de acordo com o índice JCR, editados por sociedades científicas reconhecidas (que obtiveram classificação B1 no Qualis/CAPES para a área de Engenharias IV) serão contabilizados para suplementação dos totais requeridos para efeito da Tabela 1. A contabilização desses periódicos nacionais será feita num valor equivalente de JCR de 1, e para tanto, um artigo será efetivamente contabilizado para cada quatro artigos publicados em periódicos internacionais considerados pelo CA-EE. Caso o periódico nacional seja também indexado na base Scopus, o valor equivalente de JCR considerado é de 1,5, e um artigo será efetivamente contabilizado para cada três artigos publicados em periódicos internacionais considerados pelo CA-EE.
  5. Artigos publicados em periódico cujas versões tenham sido publicadas em congressos, conforme declarado em bases de dados como o ISI, IEEE Xplore, etc, poderão ser contabilizados, caso haja evidência de originalidade, impacto e também considerando a proporcionalidade de seu conjunto em relação a produção global de artigos em periódicos do candidato.

 f) Observações

  1. O fato de um candidato satisfazer todos os valores quantitativos relativos a uma determinada Categoria/Nível, como mostrado nas Tabelas 1 e 2, não garante a concessão da bolsa. Ao CA compete destacar excelência e qualidade, e analisar comparativamente os pedidos com este foco.
  2. A concessão e a classificação da bolsa ocorrem a partir da análise comparativa entre os candidatos das categorias/níveis correspondentes e/ou entre os candidatos das categorias/níveis adjacentes que estiverem sendo avaliados na mesma reunião de julgamento.
  3. Artigos de periódicos que publicam exclusivamente na forma open access e listados no ISI serão avaliados caso a caso, e poderão não ser contabilizados para o requisito de JCR Acumulado.
  4. Co-orientações, tanto de dissertações de mestrado quanto de teses de doutorado, serão computadas com o mesmo peso que as respectivas orientações principais.
  5. Número de autores. Artigos em periódicos com até 6 coautores serão considerados integralmente. Artigos com mais de 6 e até 20 coautores deverão ter um deságio representado pela multiplicação de seus indicadores por 0,9 elevado ao número de coautores acima de 6. Artigos com mais de 20 coautores serão desconsiderados. Esse deságio incidirá sobre a contribuição do artigo para o requisito de JCR Acumulado.
  6. Publicações de livros/capítulos de livros. Serão computados (em termos de qualidade e quantidade) como critérios adicionais para a concessão da bolsa de produtividade em pesquisa. Os livros e capítulos deverão ser informados com seus dados bibliográficos completos, incluindo editora e ISBN, e acrescentando também os endereços eletrônicos por meio dos quais possam ser adquiridos.

III. Comentários Finais

  1. Avaliação qualitativa. Os candidatos à concessão de bolsa PQ são fortemente encorajados pelo CA-EE a incluir uma súmula resumida de suas atividades na qual deve constar:
  1. Contribuição Científica. Comentar (máximo de quinze linhas) a atuação e contribuição do pesquisador, qualidade dos veículos das publicações, número médio de autores nas publicações, atividades em sociedades científicas, responsabilidades na montagem e manutenção de laboratórios complexos, e outros aspectos julgados relevantes.
  2. Principais Publicações. Relacionar e comentar sobre até 5 (cinco) das suas publicações mais relevantes.  Os comentários de até 10 linhas para cada um devem evidenciar a qualidade do trabalho, seu impacto científico ou tecnológico, e outros aspectos julgados relevantes.
  3. Contribuição Tecnológica. Comentar (máximo de 15 linhas) sobre a atuação do pesquisador que tenha resultado em inovação tecnológica na forma de patentes concedidas ou patentes efetivamente transferidas para o setor produtivo, desenvolvimento de processos ou consultorias a empresas nacionais ou estrangeiras. A inclusão da informação precisa a respeito de como deve ser feito o processo de consulta ao escritório de registro de patentes para a verificação da data da efetiva concessão ou transferência da patente é imprescindível para a sua contabilização na análise da solicitação pelo CA-EE.
  4. Descrição de suas contribuições em cada um dos indicadores Ci,  definidos na Seção II.2 c e na Tabela 2.
  5. Informações sobre a data de nascimento ou adoção de filhos, caso a pesquisadora pleiteie o benefício da ampliação do período de avaliação, como descrito na Seção II.2 d. Neste caso, essas informações devem constar também em seu Currículo Lattes em campo próprio para esse fim.

 

  1. Qualidade das informações no CV Lattes. Muitos CVs Lattes apresentam informações incompletas, especialmente no que se refere a títulos de periódicos, de livros e numeração das páginas (sugere-se que nos trabalhos publicados eletronicamente sejam informados o número de páginas e o número do artigo, para saber se são resumos ou trabalhos completos). A ausência desses dados dificulta a avaliação podendo afetar o resultado quantitativo. O CA-EE alerta que não serão considerados itens do CV Lattes que estejam com informações preenchidas incorretamente ou incompletas. Recomenda-se fortemente a indicação do DOI nas publicações cadastradas, e artigos aceitos aguardando publicação, só serão contabilizados nessa forma. Para o correto cômputo do índice H e de citações é necessário que o Researcher ID seja informado na aba ¿citações¿ do CV-Lattes.
  2. Veracidade das informações no CV Lattes. Quando se verificar que as informações prestadas pelo candidato no tocante à sua produção científica, tecnológica e acadêmica sejam inverídicas, e que tendam a beneficiar o candidato em seu pleito, o pedido de bolsa será desqualificado e a Diretoria Executiva do CNPq será informada para que sejam tomadas as providências cabíveis. Da mesma forma, em concordância com as diretrizes da Comissão de Integridade de Pesquisa do CNPq, o CA-EE buscará coibir práticas indesejáveis, tais como plágio (incluindo autoplágio) e atribuição de coautoria sem correspondente participação intelectual, em particular no caso de artigos apresentando elevado número de coautores (ver último parágrafo da Seção II.2.f). 

 

Box-plots para os indicadores de desempenho

dos pesquisadores referentes à Chamada 2018