05 01 la ciencia se mide
TRANSCRIPT
alfin
05
Universidad de Jaén
Biblioteca
LA CIENCIA SE MIDE
parte 1
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
el alfin 05, es un curso online: ir al índice de microvídeos
p.122
INTRODUCCIÓN
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
el alfin 05, es un curso online: ir al índice de microvídeos
p.122
Proceso Bolonia espacio europeo de educación superior
eeesECTSSistema de transferencia de créditos
ESTRUCTURAGrado/Máster/Doctorado
CALIDADAcreditaciónSistema de
titulaciones
Alfin
06. e
l tr
ab
ajo
de
inve
stiga
ció
n
año 1999
• Formación general
• Orientada a la preparación para el ejercicio profesional
1º ciclo
grado
• Formación avanzada de carácter especializado o multidisciplinar
• Orientada a la especialización académica, profesional o a promover la iniciación en tareas investigadoras
2º ciclo
máster
• Su finalidad: formación avanzada en técnicas de investigación
3º ciclo
doctorado
TFM obligatorio y de defensa pública
Tesistrabajo original de investigación
TFGobligatorio y de defensa pública
Alfin
06. e
l tr
ab
ajo
de
inve
stiga
ció
n
RD1027/2011, de 15 de julio, por el que se establece el Marco Español de Cualificaciones para la Educación Superior (MECES)
PDF de la disposición
La Conferencia de Ministros europeos de Educación Superior celebrada en Bergen el 19 y 20 de mayo de 2005, tomó la decisión de adoptar un marco comprensivo de cualificaciones para el espacio europeo de educación superior, construido sobre los denominados
«Descriptores de Dublín»
descriptores Dublin
competencias resultados
Alfin
06. e
l tr
ab
ajo
de
inve
stiga
ció
n
Nivel 2 de Grado
haber adquirido conocimientos avanzados y demostrado una comprensión de los aspectos teóricos y prácticos y de la metodología de trabajo en su campo de estudio con una profundidad que llegue hasta la vanguardia del conocimiento;
poder, mediante argumentos o procedimientos elaborados y sustentados por ellos mismos, aplicar sus conocimientos, la comprensión de estos y sus capacidades de resolución de problemas en ámbitos laborales complejos o profesionales y especializados que requieren el uso de ideas creativas e innovadoras;
tener la capacidad de recopilar e interpretar datos e informaciones sobre las que fundamentar sus conclusiones incluyendo, cuando sea preciso y pertinente, la reflexión sobre asuntos de índole social, científica o ética en el ámbito de su campo de estudio;
ser capaces de desenvolverse en situaciones complejas o que requieran el desarrollo de nuevas soluciones tanto en el ámbito académico como laboral o profesional dentro de su campo de estudio;
saber comunicar a todo tipo de audiencias (especializadas o no) de manera clara y precisa, conocimientos, metodologías, ideas, problemas y soluciones en el ámbito de su campo de estudio;
ser capaces de identificar sus propias necesidades formativas en su campo de estudio y entorno laboral o profesional y de organizar su propio aprendizaje con un alto grado de autonomía en todo tipo de contextos (estructurados o no).
Alfin
06. e
l tr
ab
ajo
de
inve
stiga
ció
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
rmación
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
La información es una potente herramienta democrática, pero es necesario organizarla y gestionarla para que los ciudadanos no se sientan desbordados por ella.
(Pautas Calimera, 2005)Cultural Applications: Local Institutions Mediating Electronic Resources
The Calimera Project is funded under the European Commission IST Programme
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Competencias informáticas Competencias
informacionales
ALFIN
http://www.ci2.es/
es el acrónimo de competencias informáticas e informacionales y surge en la Comisión mixta intersectorial CRUE-TIC (Conferencia de Rectores de Universidades Españolas - Comisión Sectorial de las Tecnologías de la Información y las Comunicaciones) y REBIUN (Red de Bibliotecas Universitarias)
CI2A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
competencias informacionales
uso y comunicación de la información eficazmente de forma ética y legal, con el fin de construir el conocimiento
Comisión Mixta CRUE REBIUN-TICCi2 en los estudios de grado
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
En el marco CI2, ALFIN (Alfabetización Informacional) es una palabra que ya
forma parte de nuestro vocabulario y si nos piden una definición de “libro” tenemos claro su concepto:
saber cuándo y por qué necesitas información, dónde encontrarla, y cómo evaluarla, utilizarla y comunicarla de manera éticaCILIP (Chartered Institute of Library and Information
Professionals)
Alfin
06. e
l tr
ab
ajo
de
inve
stiga
ció
n
la información y gestionarla de manera certera
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
DIGCOMPCompetencia digital
Digital Competence
marco de consenso europeo de competencias en los planes formativos
competencia digital
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Competencia Digital es aquella que implica el uso crítico y seguro de las Tecnologías de la Sociedad de la Información para el trabajo, el tiempo libre y la comunicación. Apoyándose en habilidades TIC básicas: uso de ordenadores para recuperar, evaluar, almacenar, producir, presentar e intercambiar información, y para comunicar y participar en redes de colaboración a través de Internet” (European Parliament and the Council, 2006).
eval
uar
alm
acen
ar
pre
sen
tar
inte
rcam
bia
r
comunicar
participar en redes de colaboración
informaciónA
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
internet
crítico
seguro
usando
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
8C + 4IA
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
05
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
alfin 05. la ciencia se mide. gestión de a información
1. Capacitar al usuario en la elaboración de trabajos académicos
2. Conocer los indicadores científicos de evaluación de la ciencia
3. Conocer y usar los gestores bibliográficos
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
2.1 el universo
cita 2.2
los gestores bibliográficos
2.3 Refworks
orden en el caos
gestión de la información
1.1 de ciencia a
producción científica:
un matiz que cambia todo
1.2 indicadores y
rankings:
todo lo que se mide se puede ordenar
1.3 principales
sitios para la evaluación
que tienes que conocer sí o sí
la ciencia se mide
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
apunta algunas direcciones
abiertoBujaderechos de autor y acceso abierto
cienciaBujaanálisis y evaluación de la producción científica
bujaBloginformación general
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
LA CIENCIA SE MIDE
módulo 1
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
1.1 de ciencia a
producción científica:
un matiz que cambia todo
1.2 indicadores y
rankings:
todo lo que se mide se puede ordenar
1.3 principales
sitios para la evaluación
que tienes que conocer sí o sí
la ciencia se mide
el alfin 05, es un curso online: ir al índice de microvídeos
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
módulo 1DE CIENCIA A PRODUCCIÓN CIENTÍFICA
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
“Escribir bien un trabajo científico no es una
cuestión de vida o muerte; es algo mucho
más serio.”
Robert A. Day. Cómo escribir y publicar trabajos científicos
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
sobre la vida o la muerte... palabras mayores
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
…Entre los residuos, encuentran una pieza de meteorito, que lleva a Seeley Booth y su compañera, Temperance Brennan, al Collar Institute of Science para descubrir que la
víctima es la editora en jefe de una prestigiosa revista científica que
había formado parte de un polémico proyecto.
«El consejo de facultad decide cómo se reparten las asignaciones, y ellos, como todos los demás, negocian un plan de acuerdo con un perfil académico determinado. ¿Cuál va a ser la apuesta y por qué?. Para Dinamarca es importante tener un perfil de investigación competitivo que no solo esté a la altura del resto de las investigaciones que se estén llevando a cabo en la Unión Europea, sino de las de todo el mundo.
Dicho esto, no cabe duda que las decisiones del consejo no sólo miran por el interés del país. Dentro de su cerradísimo círculo también reina cierto nepotismo. Hoy por ti, mañana por mí, un mecanismo que empezará a vivir su edad de oro en cuanto se cierren las arcas del Estado….
Los miembros del consejo tienen que soportar enormes presiones al tiempo que
ven cómo van reduciendo sus áreas de investigación… Intercambian ayudas y becarios como los niños cambian cromos, y cuando toca hacer públicas sus
decisiones todo el mundo contiene la respiración y cruza los dedos»
Gazan, Sissel-Jo. Las alas del dinosaurio. Alfaguara, 2011, p. 182
Nota: la autora es doctora en biología
cn
una novela muy negra
para momentos de ocio…
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Normalmente toda investigación se
convierte en una publicación
Llamada de atención del profesor E. Delgado en su introducción al master “evaluación de la investigación…” de la ugr
Publicar no es investigar
Todo lo que se publica no es investigación
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
3 obviedades
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
La publicación científica y la difusión de los resultados constituyen uno de los pilares fundamentales de la actividad científica
1
El carácter científico de una
disciplina va indisolublemente unido al ejercicio
de la investigación
2
La madurez de una disciplina se
mide por la actividad
investigadora que genera
3
Para evaluar el progreso de una disciplina nada
mejor que valorar la cantidad y calidad de la investigación
producida
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
podríamos decir
pu
blic
ació
n Investigación orientada a resultados
comunicada
difundida
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
medida
Junto a palabras como
ciencia, actividad investigadora, publicaciónvan apareciendo otros conceptos…
“producción científica”
y desembocamos en el concepto de
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Los espectaculares avances científicos son patrimonio
de profesionales financiados con fondos
públicos o capital privado, reclutados como
investigadores con dedicación exclusiva.
El grupo de investigación sustituye
al científico individual, estructurado a modo de
pirámide jerarquizada, con un director al frente, varios
miembros consolidados dotados de sólida base
más un cuadro de investigadores en proceso
de formación inicial.
La ciencia dejó de ser protagonizada por ricos ociosos y talentos patrocinados por algún
mecenas acaudalado.
¿Qué es la producción científica? . JC.Argüelles. El País, 6/02/2008Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
ambios en los procedimientos de
omunicarlos resultados de la investigación
Y en paralelo, edición de un número importante de nuevas revistas en cualquier rama del saber
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
La abundancia y nivel de las publicaciones constituye un índice fiel de la capacidad, trayectoria y hondura
científica asignable a cada grupo investigador.
Más aún, se han convertido en un parámetro crucial de política científica para medir la calidad y decidir -dada la escasez crónica de recursos- qué líneas y equipos de
trabajo merecen ser financiados
se han introducido ciertos factores
matemáticos para medir el rendimiento de los grupos, que atienden a dos criterios esenciales:
• el número de artículos publicados (cantidad) • el prestigio de la revista (calidad: citaciones y/o
impacto)
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
número de publicaciones
citasImpacto calidad
cantidad
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
publicaciones
parámetros
calidad financiación
rendimiento
medida
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
pero eso puede llevar implícito una gran
tiranía
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
quién decide?
es riguroso el proceso de selección?
cantidad siempre determina conclusiones brillantes?
hay quién tiene más posibilidades para publicar en revistas de impacto?
el número de citas es la madre de todos los parámetros?
sin trampa ni cartón?
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
por cotillear…A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
por cierto, una cuestión de conceptos…
revisión por pares“En los medios académicos (véase ciencia), la revisión por pares (en inglés: peer review), también denominada arbitraje, es un método usado para validar trabajos escritos y solicitudes de financiación con el fin de evaluar su calidad, originalidad, factibilidad, rigor científico, etcétera, antes de su
publicación (véase revista científica)”
https://es.wikipedia.org/wiki/Revisi%C3%B3n_por_pares
La revisión por pares es la valoración
crítica de los manuscritos presentados a
una revista, por parte de expertos que
no forman parte del personal editorialhttp://www.ncbi.nlm.nih.gov/pmc/articles/PMC3142758/
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
¿la esencia de la ciencia es crear o producir?
¿Qué es la producción científica?´.JC.Argüelles. El País, 6/02/2008
proponemos una reflexiónA
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Por cierto, Publish or Perish es el nombre de un software que recupera y analiza las citas académicas, usando Google Scholar y Microsoft Academic Search como Fuente y a partir de ahí construer diferentes metricas
http://www.harzing.com/pop.htm
publicar o perecer
Fuente: https://vimeo.com/100000045
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
http://blog.trabajando.pe/index.php?start=95
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
porque si algo empieza a aparecer tanto…
desconocerlo
y por qué yo…?A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
vida y muerte son palabras mayores…así que a prepararse, porque…
“El miedo a las alturas es ilógico. El miedo a caer, por otro lado, es prudente y evolucionista”. Sheldon Cooper ;)
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
módulo 2Indicadores y rankings
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
2a. Indicadores
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Autor: Jordi Jordana (La Seu d’Urgell, 1958) es doctor en veterinaria y profesor de la Universidad Autónoma de Barcelona desde 1985. Su experiencia docente e investigadora sirvió de marco para desarrollar su primera novela de ficción, Índice de impacto, publicada en 2011.
“Con Índice de impacto, su primera incursión en la novela de ficción, el autor nos sumerge en el conocimiento de la condición humana y sus condicionantes en el mundo investigador. La fuerte presión por publicar a que se ven sometidos sus miembros hace que se establezcan unas bien peculiares interrelaciones humanas que pueden hacer aflorar y arraigar sentimientos contrapuestos y maliciosos.”
Ver sinopsis
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
ahí va un fragmento ;)
– ¡Ya lo sé, ya! -exclamó el becario asintiendo con la cabeza-. En el Departamento
andáis todos locos intentando publicar en ese tipo de revistas.
Yaiza sonrió brevemente -mirando de reojo a Roger- ante el comentario, inocente o
impertinente, de Pol.
– Tienes razón, Pol -asintió no obstante Roger-. Muchas veces publicamos pequeñas
cosas, de ámbito estrictamente local en revistas japonesas, brasileñas o australianas,
por poner tres ejemplos geográficamente distantes. Y lo hacemos únicamente porque
son revistas indexadas, con cierto valor de índice, cuando lo más lógico hubiera sido
publicarlos en una revista española, de mayor difusión y repercusión práctica entre la
gente verdaderamente interesada en el tema. Pero el índice de impacto manda, y
un investigador siempre preferirá tener un artículo SCI en su curriculum vitae que no
tenerlo. Además se quiera o no, el sistema está montado así. Y si no te quieres
extinguir, científica y promocionalmente hablando, hay que adaptarse al sistema.
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
retomando…el investigador siente la presión de publicar
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Sus organizacionesintentan maximizar su inversión en recursos humanos y materiales buscando la eficiencia
del sistema académico. A los investigadores se
les exige el, aumento de la producción científica.
La industria quiere rentabilizar sus productos
y aumentar beneficios
Los autores quieren ser evaluados
positivamente mediante los
indicadores de visibilidad habituales :
las citas de sus trabajos y la publicación en revistas de impacto
podríamos introducirnos aquí en el interesante mundo de la edición científica
un mundo de intereses
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
y además no vale cualquier cosa…
la producción se mide en rendimiento y el rendimiento científico se articula en torno a bases de datos y productos de evaluación
basados en indicadoresAlfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
el número de artículos publicados
(cantidad)
el prestigio de la revista (citaciones
y/o impacto)
(calidad)
Los factores matemáticos para medir atienden a dos criterios esenciales
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Y no existe “el indicador”…son una nube que permite conocer de forma
combinada el impacto y el estado de la producción científica, ya sea de una publicación, un trabajo, un campo de la ciencia , una institución, un país…
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
FI
SJR
Índice h
Ai (article
influencescore)
SNIP (Source Normalized
Impact per Paper
ef (eigenfactor
score)
índice g
una nube…llena de siglas por ejemplo…A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
y así las cosas…¿por qué y qué tengo que
saber de índices e indicadores?
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
0
0,5
1
1,5
2
2,5
3
3,5
4
4,5
5primero que existen y que son decisivos
y si algo es decisivo…
debes conocerlo
y de todos ellos…vamos a hablar de unoAlfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
se trata de una medida aplicada a la repercusiónque tiene una publicación en la literatura científica
a partir de las citas que ha recibido, es
decir, el número de veces que se cita por término medio un artículo publicado en una revista determinada
factor de impacto ¿qué es exactamente?
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
La idea es que cuanto más se cita un artículo,
más importante es y más relevancia tiene dentro de su Área de
investigación
+ citado = + relevante
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
• Y contar se traduce en números…que se pueden ordenar
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Eugene Garfield (16 de septiembre de 1925), conocido como Gene Garfield, es un informatólogo. Es el creador del Instituto para la Información Científica (ISI) de Filadelfia. También es un investigador destacado en el campo de la Bibliometría, y creador de múltiples teorías y cocientes en Información y Documentación.
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
El monopolio durante décadas de las bases de datos del ISI (hoy Web of Science, de la empresa Thomson Reuters) cede terreno con la publicación de la base de datos Scopus de Elsevier.
¿dónde?A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
2enormes y poderosas bases de datos que ofrecen factores de impacto
http://www.scimagojr.com
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
el FI es el número promedio de citas de los artículos obtenidas por los artículos publicados en esa revista.
El FI de una revista para un año concreto se calcula dividiendo el número de citas obtenidas en ese
año por los artículos publicados en dicha revista los dos años
anteriores entre el total de artículos que la revista publicó en esos dos años.
JCR
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
número de citas recibidas en el 2006 por los trabajos publicados en 2004-2005
número de trabajos publicados en la revista
X en 2004-2005
A
B
C=A/B
FI revista X en el año 2006A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
A&HCI no tiene edición JCR
así, por ejemplo… en Índice SJR (SCImago Journal Rank)parecido pero no igualalgoritmo basado en el Google Page Rank y “mira” una ventana de citación de 3 años
• http://www.scimagojr.com
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
sobre factores de impacto
•Búsquedas en Journal Citation Reports (JCR)•Búsquedas en SCImago Journal & Country Rank (SJR)
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Q de cuartil
• Permite evaluar la importancia relativa de una revista en el total de las revistas de su área indexadas en una base de datos
• ¿dónde? A nivel internacional, por
supuesto, en JCR y en SJR.
Si un listado de revistas ordenadas de mayor a menor factor de impacto se dividiera en cuatro partes iguales, cada una de las partes sería un cuartil. Las revistas con el factor de impacto más alto están en el primer cuartil, los cuartiles medios serán el segundo y tercero, y el cuartil más bajo será el cuarto.
.
Q1 Q2 Q3 Q4
en un listado de 100 títulos, el primer cuartil (Q1) son los 25 primeros títulos y estos serán los más valorados por los investigadores
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
hay quién discrepa mucho…
Declaración de San Francisco sobre evaluación de la investigación
Leiden Manifesto for Research Metrics
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
enfermedades derivadas…
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
impactolatríaconlleva una práctica simplista en la que se presupone que el FI de la revista y su reputación son indicativos absolutos de la calidad o importancia de una investigación concreta y, por extensión, de los autores de ésta.
La Impactolatría en la Ciencia, NauKis. 21 08.2012
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Más información en Carlton M. Caves, “High-impact-factor Syndrome,”
APS News, Nov. 2011; Reinhard Werner, “The focus on bibliometrics makes papersless useful,” Nature News, 13 Jan 2015; Mohamed L Elsaie, Jenna Kammer, “Impactitis: The impact factor myth syndrome,” Indian J. Dermatol. 54: 83-85, 2009; doi: 10.4103/0019-5154.48998.
HIFSY su síndrome asociado….
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
2b. Rankings
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
lo que no se mide no se puede controlar, y lo que no se controla no se puede gestionar
mirar rendimientos y calidad es muy saludable en política científica
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
pero esto no es “conceptual”…ni conceptualmente individual…
la medida de prestigiosse traduce en millones de euros
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
hasta ahora las Universidades venían siendo responsables de cerca del 80% de la producción científica (SCImagoInstitutions Rankings) http://www.scimagoir.com
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
“El sistema universitario español corre el riego de vivir una “década pérdida” si no se toman medidas para recuperar recursos económicos y para darle un marco jurídico con el que afrontar la globalización.”
ahora mismo, el futuro es incierto…
Fundación Conocimiento y Desarrollo (CYD)
Las universidades han perdido un 28% de financiación pública durante los años de crisis desde 2010 hasta 2014, una bajada presupuestaria que ha afectado de forma especial a los proyectos de investigación, donde la disminución ha alcanzado un 38%.
Esta es una de las principales conclusiones del informe Encuesta de investigación y transferencia de conocimiento del bienio 2012-13, presentado este lunes por la Comisión sectorial de I+D+i de la Conferencia de Rectores de las Universidades Españolas (CRUE), que también ha destacado que las ayudas a la
infraestructura se redujeron un 66%
15/06/2015
comisión sectorial de I+D+i de la CRUE. encuestaA
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
#rankingstodo lo que se cuenta…se puede ordenar
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
EL RENDIMIENTO DE LOS CENTROS I+D SE SUELE COMPARAR
A PARTIR DE RANKINGS BASADOS EN INDICADORES
Los 'rankings' imponen su ley a la Universidad
(J.A. Aunión) alerta del peligro del diseño de políticas de investigación a
partir de los rankings
un tema que preocupa y mucho…
Cómo se cocinan los rankings universitarios(E. Delgado López-Cózar)
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
“Desde la irrupción del Ranking de Shanghai, el primer ranking internacional de universidades, a principios del presente siglo, la influencia de estas herramientas no ha hecho más que crecer y actualmente se han convertido en la verdadera vara de medir de las universidades a nivel mundial. Sus metodologías no sólo son tenidas en cuenta, sino que se incluyen en los propios planes estratégicos de las universidades para así mejorar su posicionamiento en futuras ediciones” (Hazelkorn, 2011).
Hazelkorn, E. (2011). Rankings and the reshaping of higher education. The
battle for world-class excellence. New York: Palgrave Macmillan.
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Porque los rankings han llegado para quedarse
Cuando un ranking existe es imposible ignorarlo
Y porque tienen efectos en el mundo académico y están condicionando las políticas universitarias
…otra vez la pregunta del millón:
y por qué yo?A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
dentro de una cultura de evaluación, definiendo…
mundiales
nacionales
generales
por disciplinas
Se eligen indicadores Se les da un
valor (peso)
Se agregan a un
porcentaje de nota final
Se fija la clasificación
tipos
cómos
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
“Cuando se habla de situar alguna universidad de un país -pongamos España- entre las 100 mejores del mundo o de Europa, se está hablando básicamente de dos rankings
internacionales: el de la Universidad Jiao Tong de Shanghái, que se publica desde 2003, y el de la
publicación británica Times Higher Education (THE), de 2004.”
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Times Higher Education (THE)
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
El Shanghai Jiao TongAcademic Ranking of WorldUniversities (ARWU) o Ranking de Shanghai, pese a la proliferación de otros rankings de universidades y a las duras críticas recibidas, se ha convertido en el referente básico para señalar las universidades de investigación a nivel global.
ARWUA
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
2003: en el principio fue ARWU…
Porque, aunque había productos anteriores, ARWU “pilló” desprevenido al mundo de la educación superior, donde ante la variedad de opciones prima el concepto consumista de la educación, plasmado en la comparación convertida en norma.
un gran negocio que condiciona decisiones, políticas y recursos
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
tu futuro depende de tu elección, en términos de éxito profesional. el
nuestro de ti, en términos de cliente
elige
compara
busca
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Fuente: ARWU. Metodología en.: http://www.shanghairanking.com/es/ARWU-Methodology-2014.html
Delgado-López-Cózar, Emilio. Cómo se cocinan los rankings universitarios. Dendra Médica. Revista de Humanidades 2012; 11(1):43-58.
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
aunque no son los únicos
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
La Comisión Europea estrenó en el 2014 un
nuevo ranking de universidades: U-Multirank
clasifica los centros en función de una serie más amplia de factores de calidad
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
“Ranking Web de Universidades" del Laboratorio de Cibermetría, que pertenece al CSIC, el mayor centro nacional de investigación de España.
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
sobre cocina de rankings: a modo de ensayo
Por principio desconfiar de un ranking
Transparencia: quién, cómo, para qué
No a las mezclas indiscriminadas de dimensiones
Realmente de calidad (fuentes, técnicas…)
Asegurar que se relativizan los datos
Y que los tiempos que contempla sean amplios
Y que se diferencien las áreas y las disciplinas
COMPARAR LO COMPARABLEDelgado-López-Cózar, Emilio. Cómo se cocinan los rankings universitarios. Dendra Médica. Revista de Humanidades 2012; 11(1):43-58.A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
“La gran importancia que tienen actualmente los rankings internacionales en
política científica hace que debamos ser conscientes de las muchas limitaciones que presentan estas herramientas. Entre otras, destacamos su incapacidad para representar de manera precisa sistemas universitarios nacionales, ya que su objetivo es exclusivamente incluir a las principales universidades a nivel mundial. Otra de sus limitaciones es su incapacidad para representar el perfil disciplinar de las universidades, al presentar normalmente una única tabla Global”. (Nicolás Robinson-García)
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
módulo 3PRINCIPALES SITIOS PARA LA
EVALUACIÓN
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
buscando indicios de calidad
Las agencias de evaluación valoran las revistas en las cuales los autores publican sus trabajos. Así, utilizan índices de calidad de las revistas y otras herramientas de evaluación.
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
artículos en revistas científicas
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Tienen factor de impacto, por lo que se conoce la posición en el ranking de su especialidad
Revistas indexadas
con índice de calidad relativo
No tienen factor de impacto.
Usamos criterios de solvencia editorial, visibilidad, opinión de expertos…
Revistas no indexadas o sin índice de
calidad relativo
una primera distinción…porque no todas las áreas funcionan igual: ICR sí, ICR no
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
ICR sí
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
factores de impacto
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
ICR sí, manda quién manda…
WoSJCRSCOPUS SJR
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
sobre factores de impacto
• Índices de Impacto de las Revistas Españolas de Ciencias Sociales, Ciencias Jurídicas y Ciencias Humanas
• Ofrecían información estadística a partir del recuento de las citas bibliográficas. Permitía conocer de manera individualizada las citas bibliográficas que reciben los trabajos publicados en revistas científicas españolas.
• Son productos que clasificaban las revistas en cuartiles
IN-RECS
In-RECJ
In-RECH
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
productos sin actualización, desde 2011una eternidad
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Factor de impacto
• Humanidades 2004-2008
• CCSSJJ 2005-2009
Criterios de calidad cumplidos
• CNEAI (19)
• ANECA (22)
• Latindex (33)
Difusión de las revistas en bases de datos nacionales e
internacionales
Opinión de expertos
ICE (indicador de Calidad según Expertos)
El indicador elegido para resumir el impacto científico de las revistas españolas de Humanidades, Ciencias Sociales y Jurídicas es la tasa de citación.
el valor que el conjunto de especialistas de un área otorga a una determinada revista. Se trata de una aproximación a la evaluación del contenido de la publicación.
medido a través de la presencia de las revistas en bases de datos nacionales e internacionales. Esta información se obtuvo a lo largo del primer trimestre de 2010, realizando búsquedas y analizando listados de publicaciones indizadas de bases de datos nacionales e internacionales.
Cumplimiento de criterios CNEAI, ANECA y Latindex tienen en cuenta en sus respectivos sistemas de evaluación
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
ICR no
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Solvencia editorial
Visibilidad en bases de datos
Sello de calidad Fecyt
Opiniones de expertos
Calificadas en categorías en algunos índices
(etc…)
si no hay factor de impacto…
hay que buscar datos que acrediten la calidad de las revistas: otros indicadores alternativos
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
CIRC, ERIH, DICE, Latindex …
Si olvidarnos de productos como
MIAR y Carhus+
recursos fundamentales para encontrar indicios de calidad de las publicaciones
en Humanidades y Ciencias Sociales
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
es conveniente tener claro qué podemos esperar de cada una de estas siglas
y si ya lo sabes…aquí un enlace rápido
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
es conveniente tener claro qué podemos esperar de cada una de estas siglas
y si ya lo sabes…aquí un enlace rápido
fuente: Guías BUS
a modo de resumen….A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
muy desactualizados
artículos en revistas científicas
libros, capítulos de libros
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
artículos en revistas científicasLa fuente de datos empleada es el Book
Citation Index y el periodo de análisis 2009-2013. Se presentan 42 rankings: 4 por áreas y 38 por disciplinas
en Google Scholar hasta 2012 en el ámbito de las
Humanidades y Ciencias Sociales.
impacto de las editoriales de monografías científicas a partir del recuento de citas de los libros publicados por los profesores e investigadores de universidades públicas españolas indizados
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
otra vez con lo mismo…por qué yo?
porque debo saber que la investigación tiene una
estrategia de posicionamiento
las opciones de publicación
También, porque en mi búsqueda
documental, hay fuentes “top” que debo conocer,
y por tanto tengo que saber localizarlas
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
porque si algo empieza a aparecer tanto…
desconocerlo
y por qué yo…?A
lfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
os presento la “chuleta personal” del profesor …
Francesc Esteve (Departamento de Pedagogía de la Universidad Rovira i Virgili)
recopilación clasificada en 4 niveles (oro, plata, bronce y otras) que puede servir de ayuda a la hora de elegir revista dónde publicar
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
1.1 de ciencia a
producción científica:
un matiz que cambia todo
1.2 indicadores y
rankings:
todo lo que se mide se puede ordenar
1.3 principales
sitios para la evaluación:
que tienes que conocer sí o sí
Introducción Alfín 051.1 De ciencia a producción científica1.2(a) Indicadores1.2(b) Rankings1.3 Principales sitios para la evaluación
microvídeos ALFIN 05. Módulo 1: La ciencia se mide
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
un pdf de 5 páginas con todos los enlaces del curso
Alfin
05. la
cie
ncia
se
mid
e. ge
stió
n d
e la info
rmació
n
Biblioteca de la Universidad de JaénGrupo de Trabajo de Alfabetización Informacional
más información en [email protected]