Valoració de l’activitat investigadora del professorat universitari: PDA-recerca i altres convocatòries

1a part

Jordi Ardanuy, Ángel BorregoDepartament de Biblioteconomia i Documentació

• Avaluació de la recerca• Elements de l’avaluació• Mesuradors d’impacte•Criteris d’assignació de dedicació per a activitats científiques en el PDA de la UB• Avaluació de revistes

Sumari

1. Importància de la ciència i la tecnologia en la societat per la influència en el desenvolupament econòmic, social i cultural dels països.

2. Com a conseqüència han augmentat notablement els recursos humans dedicats a la recerca, el desenvolupament i la innovació (R+D+I).

3. La limitació de recursos condueix a la necessitat de millorar-ne la seva gestió. Problemàtica específica quan es financen en fons públics.

4. Cal avaluar l’activitat científica.

Avaluació de la recerca

Perspectiva mertoniana de la ciència (Robert King Merton 1910-2003):

El prestigi dels científics és proporcional al prestigi de la seva obra; i, aquesta es quantifica a través de las revistes en les quals publica.

Dimensions de l’activitat científica:

• Els productes de l’activitat científica són les publicacions.• Les citacions són una mesura fiable de la repercussió dels treballs.

Avaluació de la recerca

• L’avaluació és intrínseca a l’activitat científica. La revisió per experts diferencia les revistes científiques de les que no ho són.

• L’avaluació és qualitativa i quantitativa.

Unes poques dades:

4.995 PDI UB (2009-2010) 4.275 col·laboradors i lectors (2003-2010) AQU 6.322 professor contractat doctor, professor ajudant doctor, professor col·laborador i professor de universitat privada (2009), ANECA.

Avaluació de la recerca

Avaluació ex-ante

Orientació de les línies prioritàries de recerca científica Valoració dels projectes científics abans de finançar-los

Avaluació ex-post

Gestió científica (acreditacions, avaluació científica, ...) Aspectes quantitatius: inputs i outputs

Avaluació de la recerca

Productes de l’activitat científica (Outputs)

• Coneixement certificat Articles en revistes amb avaluació d’experts independents (peer review). Mitjans assimilables (proceedings, congressos, monografies o capítols amb peer review).

• Activitat econòmica derivada Patens, contractes, spin-off

• Formació Docència, llibres, tesis, ...

• Divulgació mitjans de comunicació, exposicions, documentals, ...

Elements de l’avaluació

Recomptes i mitjanes orientats a publicacions

• Factor d’impacte (amb diferents períodes de mesura)• Índex d'immediatesa• Total de citacions

Ponderats orientats a publicacions• Eigenfactor (factors propis)• Article influence• Scimago Journal Rank

Orientat a autors• Índex H

Mesuradors d’impacte

Factor d’impacteEl Factor d’Impacte d’una publicació un any es mesura com el nombre de citacions rebudes aquell any pel conjunt de documents publicats durant els dos anys anteriors dividit pel nombre de documents publicats per la revista durant el mateix període de temps.

Exemple: FI (2010) de la revista El Profesional de la Información

35 citacions de documents de 200919 citacions de documents de 2008 Total: 54 citacions

71 documents publicats el 200973 documents publicats el 2008 Total: 144 documents

54

144 = 0,375

Factor d’impacteNaturalment les disciplines tenen FI molt diferents.

2010 JCR Science Edition FI

1. CA-A CANCER JOURNAL FOR CLINICIANS (0007-9235) 94,3332. ACTA CRYSTALLOGRAPHICA SECTION A  (0108-7673) 54,333...4. REVIEWS OF MODERN PHYSICS  (0034-6861) 51,695...9. NATURE (0028-0836) 36,104

2010 JCR Social Science Edition

1. BEHAVIORAL AND BRAIN SCIENCES  (0140-525X) 21,952...38. MIS QUARTERLY (0276-7783) 5,041...1958. REDC (0210-0614) 0,489...2133. EPI (1386-6710) 0,375

Factor d’impacte

Les revistes s’agrupen per matèries

Quartils• JCR: Divisió en quatre parts iguals de les revistes ordenades segons el factor d’impacte de manera descendent. Cada quartil reuneix un 25 % de les revistes.

A - Information Science & Library Science

B - Management

Criteris d’assignació de dedicació per a activitats científiques en el PDA de la UB

Llindars 2007-2009

Ciències experimentals i

de la salut

Ciències socials i humanitats

Global

Quartil - Llindar

INPUT OUTPUT INPUT OUTPUT INPUT OUTPUT

Percentil 75% 28 121 17 60 23 90

Percentil 50% 18 70 11 30 14 44

Percentil 25% 10 28 6 12 8 17

Nota: A 75%; B 50% C 25%

Validesa 2010-2012

Criteris d’assignació de dedicació per a activitats científiques en el PDA de la UB: inputs

CG MSC Partner Subc o membre

Proj. internacionals 1r nivell 12 10 9 5

Proj. internacionals 2n nivell 8 6 4,5 2,5

IP IS

Proj. recerca competitius estatal públic

9 5

Proj. rec. estatal privat o autonòmic 6 3

Projectes UB 3 1

Grups de recerca de la DGR i UB 4 2

Convenis i contractes de recerca 3 2

Contractes de recerca/serveis 2 1

Contractes de serveis 1 0,5

Criteris d’assignació de dedicació per a activitats científiques en el PDA de la UB: outputs

Articles i ressenyesQuartil o classificació

25% / A 50 % / B 75 % / C 100 % / D

Articles ISI 12 8 5 3Carhus+ 4 3 2 1Resta d’articles i ressenyes 1

Publicacions no periòdiques Internacional Nacionals

Llibre 14 7

Capítol de llibre 6 2

Ressenya en llibre 6 2

Editor 4 2

Criteris d’assignació de dedicació per a activitats científiques en el PDA de la UB: outputs

Congressos i estades Internacionals Nacionals

Participacions rellevants 3 2

Comunicacions i pòsters 2 1

Estades de Recerca 3 mesos 4

Estades de Recerca < 3 mesos 1,5

Direcció de tesis doctorals 5

Edició crítica pura de textos 14

Edició anotada de textos 6

Traducció literària amb aparell crític 10

Traducció literària sense aparell 3

Altres 0,5

Informes GREC

Avaluació individual

Informació acumulada d’inputs i outputs

Informes GREC

Informes GREC

Valoració de l’activitat investigadora del professorat universitari: PDA-recerca i altres convocatòries

2a part

Jordi Ardanuy, Ángel BorregoDepartament de Biblioteconomia i Documentació

Figures de professorat

AQU Catalunya(contractat)

ANECA(contractat)

Programa PEP

ANECA(funcionari)

Programa Academia

Catedràtic Catedràtic

Titular Universitat

Agregat Contratado doctor

Lector Ayudante doctor

Col·laborador Colaborador

http://www.aneca.es/content/download/11202/122982/file/pep_criterios_070515.pdf

Acreditació de recercaÀmbit de ciències socials

http://www.aqu.cat/doc/doc_33398330_1.pdf

Programa Academia

PRINCIPIOS Y ORIENTACIONES PARA LAAPLICACIÓN DE LOS CRITERIOS DE EVALUACIÓN

http://www.aneca.es/content/download/10527/118089/version/1/file/academia_14_ppiosyorientaciones.pdf

Titular d’Universitat Catedràtic

Acreditacions de recerca avançadaÀmbit de ciències socials

http://www.aqu.cat/doc/doc_20142265_1.pdf

Sexennis o trams de recerca

http://www.educacion.gob.es/horizontales/ministerio/organismos/cneai/convocatoria-sexenios.html

Sexennis o trams de recerca

Sexennis o trams de recerca

Sexennis o trams de recerca

Mèrits de recerca (AQU)

http://www.aqu.cat/professorat/merits_recerca/index.html

Plan Nacional de I+D+i

LIA de Proyectos de I+D+i

Programa Nacional de Proyectos de Investigación Fundamental

Subprograma de Proyectos de Investigación Fundamental no Orientada

http://www.micinn.es/portal/site/MICINN/menuitem.94f5cc1dd5adb3dc81ebe01001432ea0/?vgnextoid=db55b9746e160210VgnVCM1000001034e20aRCRD

Criteris d’avaluació1. Grupo de trabajo1.1 - Valorar el historial científico del IP, especialmente en los últimos 6 años, y su capacidad de liderazgo dentro del grupo. Puntuación 0 a 15.1.2 - Valorar el historial investigador del resto de los componentes del equipo de investigación. Méritos científicos de cada uno de los participantes, valorando positivamente la participación de investigadores en formación. Puntuación 0 a 10.

2. Proyecto2.1 - Valorar el grado de novedad y relevancia del proyecto y el avance científico-técnico que supone respecto del estado actual del tema. Puntuación 0 a 10.2.2 - Valorar los resultados esperables de los objetivos propuestos, el conocimiento del estado actual del tema y la claridad de ideas en el desarrollo del proyecto. Puntuación 0 a 5.

3. Viabilidad3.1. Capacidad del equipo de investigación para llevar a cabo los objetivos propuestos. Valorar la adecuación del tamaño, composición y dedicación del equipo de investigación a los objetivos propuestos en el proyecto. No valorar negativamente los intentos ambiciosos y arriesgados: un cierto riesgo puede ser meritorio en un proyecto bien fundamentado. Puntuación 0 a 5.3.2 - Valorar la adecuación de la metodología, el plan de trabajo propuesto y la correcta distribución de tareas entre los distintos miembros del equipo. Puntuación 0 a 5.

Deficiente: (0-15), Cuestionable: (16-24), Aceptable: (25-33), Bueno: (34-42), Excelente: (43-50).

Programa de Estudios y AnálisisEje I. Aspectos estructurales y organizativos del Sistema Universitario Español .Se esperan análisis que permitan examinar, estructurar y proponer mejoras en la estructura y organización de aspectos singulares y fundamentales del Sistema Universitario Español. Entre otros temas posibles, se consideran decisivos los análisis relativos a la movilidad como factor de modernización del sistema universitario, las buenas prácticas en la mejora de la gestión y administración y la implantación del nuevo Real Decreto que regula los estudios de doctorado y las Escuelas de Doctorado.Estudios específicos:•E.I.1. Análisis de indicadores en el ámbito de la capacidad emprendedora en la universidad como vía para la promoción del empleo universitario.•E.I.2. Análisis de impacto y seguimiento del programa Campus de Excelencia Internacional.•E.I.3. Cálculo empírico de indicadores relativos a la situación económico-financiera del Sistema Universitario Español.•E.I.4. Desarrollo de una aplicación que permita la obtención y el proceso de la información universitaria.

Eje II. Nuevos avances y determinación de impacto en las misiones universitarias.Se esperan análisis en profundidad […] en temas inherentemente relacionados con la excelencia en la innovación docente, especialmente por medio de herramientas, y sus posibilidades de evaluación. La mejora de las herramientas que inciden en la innovación formativa, la calidad de la actividad docente y su evaluación se revela como un elemento fundamental, así como las prácticas globales en el dominio de competencias, como pueden ser las de lectura y escritura en los entornos académicos, profesionales y sociales específicos de la universidad y que aporten criterios que permitan la puesta en marcha de políticas coordinadas de actuación, la optimización de recursos y la elaboración de catálogos de buenas prácticas. Por otra parte, se hace necesario contar con estándares de excelencia docente universitaria medidos de acuerdo con mecanismos de evaluación aceptados internacionalmente.Estudios específicos: •E.II.1. Indicadores cuantitativos y cualitativos referidos al ámbito de becas y ayudas universitarias.•E.II.2. Desarrollo de un sistema de gestión de conocimiento para facilitar la aplicación, en contextos formativos, de las mejores prácticas sobre innovación docente.•E.II.3. Análisis de variables e indicadores en el ámbito de la I+D de las universidades. Desarrollo de una herramienta de extracción de información de I+D.

Programa de Estudios y AnálisisEje III. La relación de la universidad con el entorno y su internacionalización.Dentro del contexto de cooperación con el entorno es imposible eludir el análisis histórico de relación de la universidad con la sociedad, en particular con reflexiones en profundidad sobre el surgimiento de la Universidad española y su difusión a la ciudadanía. En cuanto a la internacionalización, que incluye múltiples aspectos, se hace preciso analizar el valor social de becas de posgrado en universidades españolas para ciudadanos de otros países y, especialmente, aquellos que por razones culturales, idiomáticas e históricas son más frecuentes, como son los países latinoamericanos. Asimismo, procede analizar la relación de la universidad con su entorno productivo, sobre todo como factor de desarrollo regional, y su vertiente internacionalizadora y fortalecer aspectos transversales relacionados con un modelo de universidad saludable, sostenible y solidaria.Estudios específicos:•E.III.1. Estudio, identificación y clasificación de titulaciones de educación superior expedidas por universidades o instituciones de educación superior oficiales establecidas en países del continente americano y del continente asiático.•E.III.2. Verificación de las equivalencias de las notas medias de los estudios cursados en el extranjero y actualización de las escalas por países.•E.III.3. Fundamentación conceptual y metodologías de implantación de acciones encaminadas a la transformación cualitativa de los recintos universitarios (campus), así como al incremento de las sinergias universitario-ciudadanas, en los planos social, formativo, urbanístico y patrimonial.•E.III.4. Perfil y condiciones académicas y sociales de la vida de los estudiantes universitarios españoles.

http://www.educacion.gob.es/horizontales/servicios/becas-ayudas-subvenciones/centros-docentes-entidades/universitarios/estudios-analisis.html

AGAUR

http://www10.gencat.cat/agaur_web/AppJava/catala/a_beques.jsp?categoria=recerca

Altres convocatòries

Convocatòries UB

http://convocatories.ub.es/

“Indicis de qualitat”

Meho, L. I. (2009). Which citation database: Web of Science, Scopus, or Google Scholar?

Citacions rebudes

Citacions rebudes al ISI Web of Science i a Google Scholar:

“Indicis de qualitat”

http://www.scimagojr.com/journalrank.php

IN-RECS

http://ec3.ugr.es/in-recs/

DICE

http://dice.cindoc.csic.es/index.php

MIAR

http://miar.ub.es/buscar.php

CIRC

http://epuc.cchs.csic.es/circ/que.html