uso y abuso del factor de impacto la desapariciÓn del

16
RESUMEN Se discute y analiza el concepto denominado "Factor de impacto" como medida de la calidad de una publicación internacional. Los usos y abusos que se hacen de este concepto con medición de la calidad de una revista, e incluso de la calidad de un investigador, son críticamente analizados. Este concepto ha sido erróneamente considerado por los administradores de la investigación en varios países del mundo para medir la calidad de ciertas revistas e incluso para decidir sobre a quien otorgar apoyo financiero para proyectos de investigación. Se analiza el sesgo de algunos índices interna- cionales para con revistas latinoamericanas y la dificultad inherente para acceder algunos índices. Se presentan alternativas para que en nuestros países se consideren otras revistas de lato nivel en la evaluación que se hacen de las publicaciones de los investigadores. Se presenta y se analiza la aparición y sœbita desaparición del llamado "factor de prestigio" como una alternativa del factor de impacto. Se analiza de la conveniencia de mantener de mantener los altos estÆndares requeridos para las publicacio- nes, pero se deja en claro que las llamadas revistas con alto Factor de impacto no son las œnicas que deben ser consideradas para evaluar el impacto de los resultados de una investigación y menos de la calidad de un investigador. ____________ Recibido para evaluación: Noviembre 18 de 2004. Aprobado para publicación: Enero 25 de 2005. 1 CONFERENCIA DICTADA EN EL V ENCUENTRO DE EDITORES DE REVISTAS CIENT˝FICAS Instituto de Ciencia Animal, La Habana - Cuba, noviembre 2004 2 Fac. de Ingenieria, Depto. De Ing Mecanica, Univ de la Serena, Casilla 554, La Serena - Chile centro de información Tecnología, Monseæor Subercaseaux 667, Casilla 724, La Serena - Chile Correspondencia: biotecnologí[email protected] PALABRAS CLAVE: Medición de revistas, publicacio- nes, indices de impacto, factor de prestigio. KEY WORDS: Magazines measurement, publi- cations, impact indexes, prestige factor. USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL FACTOR DE PRESTIGIO 1 USE AND ABUSE OF THE IMPACT FACTOR, THE DISAPPEARANCE OF THE PRESTIGE FACTOR JOSÉ O. VALDERRAMA 2

Upload: others

Post on 24-Feb-2022

2 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

RESUMEN

Se discute y analiza el concepto denominado "Factor de impacto" comomedida de la calidad de una publicación internacional. Los usos y abusosque se hacen de este concepto con medición de la calidad de una revista,e incluso de la calidad de un investigador, son críticamente analizados. Esteconcepto ha sido erróneamente considerado por los administradores de lainvestigación en varios países del mundo para medir la calidad de ciertasrevistas e incluso para decidir sobre a quien otorgar apoyo financiero paraproyectos de investigación. Se analiza el sesgo de algunos índices interna-cionales para con revistas latinoamericanas y la dificultad inherente paraacceder algunos índices. Se presentan alternativas para que en nuestrospaíses se consideren otras revistas de lato nivel en la evaluación que sehacen de las publicaciones de los investigadores. Se presenta y se analizala aparición y súbita desaparición del llamado "factor de prestigio" comouna alternativa del factor de impacto. Se analiza de la conveniencia demantener de mantener los altos estándares requeridos para las publicacio-nes, pero se deja en claro que las llamadas revistas con alto Factor deimpacto no son las únicas que deben ser consideradas para evaluar elimpacto de los resultados de una investigación y menos de la calidad deun investigador.

____________

Recibido para evaluación: Noviembre 18 de 2004. Aprobado para publicación: Enero 25 de 2005.

1 CONFERENCIA DICTADA EN EL V ENCUENTRO DE EDITORES DE REVISTAS CIENTÍFICAS Instituto de Ciencia Animal, La Habana - Cuba,noviembre 2004

2 Fac. de Ingenieria, Depto. De Ing Mecanica, Univ de la Serena, Casilla 554, La Serena - Chile centro de información Tecnología,Monseñor Subercaseaux 667, Casilla 724, La Serena - Chile

Correspondencia: biotecnologí[email protected]

PALABRAS CLAVE:

Medición de revistas, publicacio-nes, indices de impacto, factor deprestigio.

KEY WORDS:

Magazines measurement, publi-cations, impact indexes, prestigefactor.

USO Y ABUSO DEL FACTOR DE IMPACTO LADESAPARICIÓN DEL FACTOR DE PRESTIGIO1

USE AND ABUSE OF THE IMPACT FACTOR, THEDISAPPEARANCE OF THE PRESTIGE FACTOR

JOSÉ O. VALDERRAMA 2

Page 2: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

111Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005

ABSTRACT

The named concept �impact factor� is discussed and analyzed as a quality measure of an international publication.The uses and abuses made to this concept with the quality measure of a magazine, and even the quality of aresearcher, are critically analyzed. This concept has been incorrectly considered by the investigation management inseveral countries in the world in order to measure the quality of some magazines and even in order to decide to whomconfer financial support to research projects. The slant of some international indexes in Latin American magazinesand the inherent diffucult to accede to some indexes were analyzed. Some options are presented in order to in ourcountries other high level magazines were considered in the evaluation made to publications of the researchers. Theemergence and sudden disappearance of the �prestige factor� is presented and analyzed as an alternative of theimpact factor. The advisability of maintain high standards required in the publications, but it is let clear that the namedmagazines whit a high impact factor are not the single ones to be considered in order to evaluate the impact of the aresearch results and less of the researchers quality .

INTRODUCCIÓN

Hoy en día esta bien establecido en el mundo acadé-mico que le producto del que hacer de los investiga-ción se refleja solamente en los artículos que publi-can los investigadores. Algunos estudiosos inclusosostienen que la publicación de revistas es indiscu-tiblemente una de las principales actividades del in-vestigador, tan importante como la investigación mis-ma. La publicación de artículos en revistas surge porlo tanto, de la necesidad de mostrar los avances lo-grados en una investigación, para que lleguen a lacomunidad especializada en forma eficiente. La sa-tisfacción de esta necesidad es una obligación quedebe contraer todo investigador que recibe dineropara sus trabajos de parte de universidades, de go-biernos y de entidades internacionales. Algunas uni-versidades e institutos gubernamentales de diversospaíses han comprendido este concepto dual de nece-sidad - obligación y requieren por lo tanto, que toainvestigación financiada termine con una o mas pu-blicaciones en revistas.

La publicación en revistas arbitradas, indizadas y dealto impacto en la comunidad científica y tecnológica,tienen un enlace mucho mayor que cualquier otro me-dio de difusión de un trabajo de investigación. Estaes una de las principales razones para considerar a lapublicación en revistas arbitradas, como un recursoestratégico de la investigación. Si un investigadorpublica, se da a conocer, sus trabajos son citados,sus trabajos dan origen a nuevos estudios, puedeoptar a dinero para proyectos, puede elevar el nivel desus investigaciones y obviamente prestigiar a la insti-tución a la que pertenece.

El significado y alcance de una publicación esta cla-ro y bien definido en el ambiente de investigacióninternacional y se puede dar una definición simple yconcreta. Una publicación valida es un documentode difusión de ka actividad de la investigación seriay relevante, evaluada por pares y puesto disposiciónde la comunidad investigadora a través de revistasespecializadas. Dicho documento debe contener in-formación suficiente que permita a otros investiga-dores del tema, entender los avances escritos, repe-tir los experimento y cálculos, evaluar los resultadosy entender los alcances de las conclusiones. Ade-más una publicación valida debe estar permanente-mente sujeta al control de índices internacionales dereconocido prestigio y amplia cobertura (1, 2, 3).En ingeniería, ciencia y tecnología, por ejemplo índi-ces tales como Chemical Abstrats e EngineeringIndex, entre o tros, dan amplia cobertura a las revis-tas que indizan. Hoy en día se publican alrededor de80 mil revistas en ingeniería, ciencia y tecnología ypor lo tanto, los índices internacionales constituyenactualmente un nivel mas de control de la calidad deuna revista.

LOS ÍNDICES INTERNACIONALES

Los índices internacionales son base de datos de am-plia cobertura que indizan o resumen las publicacio-nes de revistas seleccionadas, en todas las áreas delsaber. El mas completo índice internacional en inge-niería, ciencia y tecnología es el Chemical Abstract .en la actualidad Chemical Abstract incorpora masde 700 mil resúmenes al año en sus bases de datos,indizando mas de 15000 revistas (4, 5).

Page 3: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005112

Existe una gran cantidad de índices en todas las aresdel saber, principalmente proveniente de Estados Uni-dos e Inglaterra. Los de mayor alcance en las ares deingeniería y de tecnología son del orden de 50 (6). LaTabla 1 muestra una sección de índices internaciona-les disponibles hoy en día. Como se observa en laTabla, la mayoría de los índices son publicados enEstados Unios de América y en Inglaterra, aunqueimportantes índices se publican en Alemania, Franciay Rusia. La mayoría de los índices incluyen revistaspublicadas en idioma ingles, quedando aquellas pu-blicadas en otro idioma, relegadas a un segundo pla-no. Las revistas publicadas en idioma castellano reci-ben una cobertura mínima en el contexto internacio-nal, formándose así un circulo vicioso para el desa-rrollo de las revistas publicadas en nuestro idiomacastellano, si una revista es indizada, es mas difícilconsolidarse en el contexto internacional, si no mues-tra estar bien consolidada, no es aceptada en los índi-ces internacionales .

Un esfuerzo destacable en esta línea de indización derevistas en nuestro idioma castellano lo constituye elíndice "Actualidad Iberoamericana", publicado por elInstituto Iberoamericano de Información en Ciencia yTecnología y el Centro de Información Tecnológicade Chile.

Este índice internacional indiza revistas publicadas enidioma castellano solamente en diversos países deiberoAmérica. "Actualidad Iberoamericana" cubre actual-mente mas de 150 revistas en todas las áreas de lasciencias, la ingeniería y la tecnología, cantidad queincrementa día a día. Un listado de las revistas indizadasse pueden encontrar en http: / citchile.8m.com. en este

sitio de Internet se puede encontrar también los últimosnúmeros de "Actualidad Iberoamericana"

El ingreso a índices internacionales depende de variosfactores. La mayoría de los índices consideran entreotros: el sistema de evaluación, la calidad del comitéeditorial, el ajuste a normas y plazos, la frecuencia depublicación, la calidad de la impresión, el contenido yrelevación de los temas y la permanencia en el tiempo.

Sin embargo, el sistema parece relajarse cuando se tratade indizar revistas nuevas publicadas por grandes casaseditoras (Elsevier, Prentice Hall) o por institucionesavaladas por fuerte respaldo económico. Estas revistasentran sin problemas al sistema entran sin problema alsistema desde la aparición del primer numero, sin ningu-na evaluación del impacto que tendrán en el medio inter-nacional. Alguna de éstas han dejado de ser publicadasdespués de poco tiempo de aparición en el mercado. Esteantecedente y otras irregularidades en el sistema usadopor algunos índices internacionales, en especiales losdel ISI, han merecido reiterados reparos en la comunidadinternacional, cuestión que bebe ser considerada porlos propios investigadores y por los administradores dela investigación en universidades e instituciones guber-namentales en los países iberoamericanos.

MEDICIONES DE IMPACTO Y CALIDAD DEUNA REVISTA

El concepto de medición e impacto radica en el simplepostulado de que el valor de la información que se tras-mite a través de la revistas especializadas debe ser eva-luado por los usuarios (7). Mientras mas investigadores

Chemical Abstract USAThe Engineering USAManag. And Marketing Abst USAMetal Abstracts USAEngineering Material Abst USAComputing Review USAAplied Sc. & Technol Index USACurrent Contents USAScience Citation Index USAActualidad Iberoamericana ChileBibliographie Internationale FranciaBulletin Signaletique Francia

Referativnyi Zhurnal RusiaNTIS Report RusiaChemical Engineering Abstracts UKPlastic abstracts UKRAPRA Abstracts UKElectrical and Electronics UKFood Science and Technol Abstracts UKAnbar Management Publications UKPlastics Abstracts UKChemischer Informationsdienst AlemaniaEconomic Abstracts HolandaCurrent bibliog. On Sci & Techol Japòn

TABLA 1 Algunos Índices internacionales en Ciencia e Ingeniería (9)

Page 4: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

113Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005

lean un articulo y lo citen en sus futuros trabajos, sesupone que el autor y su idea han tenido mayor impactoen la comunidad científica y tecnológica. Aunque el con-cepto y su utilidad para la comunidad científica son cla-ros, los llamados índices de citación empezaron un len-to desarrollo a par tir de 1950. en un principio, laindización, y especialmente la búsqueda, era larga ylaboriosa, por lo que el mayor impulso ha ocurrido enlos últimos 30 años con el mayor desarrollo de la com-putación.

Las bibliotecas más importantes del mundo fueron quie-nes iniciaron hace unos 80 años la evaluación de revis-tas especializadas. Obviamente los criterios de tales eva-luaciones eran diferentes a los que plantean hoy en díay en un principio se basaban mas en la frecuencias delectura (cuantas veces una revista era solicitada), que enla frecuencia de citaciones (cuantas veces una revistaera citada en otras revistas).

El ISI (Institute for Scientific Information) fue fundado elaño 1958 por Eugene Gardfield, un químico graduadode la Universidad de Culumbia, con el fin de proveerproductos y servicios destinados a investigadores de to-das las ares del saber. Gardfield obtuvo una Maestría enciencias de Biotecnología y un doctorado en lenguajeestructurado de la Universidad de Pensilvania, el año1961. Su Tesis Doctoral se titulo "Algoritmo para Traducir

Nombres Químicos a Formulas Moleculares". El año 1951se unió a un proyecto de indización médica de la Univer-sidad John Hopkins en Estados Unidos. El objetivo delproyecto era examinar los problemas fundaménteles yprácticos asociados a la indización y búsqueda de infor-mación en el área medica. Después de obtener su Master,Gardfield fue consultor de una industria farmaceuticadonde elaboro su idea de una empresa privada y fundo elISI el año 1958. la Tabla 2 muestra los hitos mas impor-tantes en el desarrollo y crecimiento del ISI desde lasideas originales de Gardfield y los 500 dólares inicialesque pidió a una institución financiero, hasta la empresade mas de 6 mil millones se dólares que son hoy en día.

Además de crear importantes bases de datos, el ISI ini-cio en los años 60 la definición de algunos parámetrospara medir de alguna forma la calidad de muchas revis-tas que se publican hoy en dia en el mundo. Uno deestos y talvez el más conocido por los investigadores esel llamado factor del impacto (7). La informática y lacomputación ayudan a contabilizar en diversas formasel alcance de una determinada revista en la comunidadcientífica. Luego, producto de estudios internos sobreel impacto de las diferentes revistas que indicaban ensus bases de datos, el ISI creo el índice de Citaciones enCiencia (SCI, Science Citation Index) y desde el año1975 el ISI publica el informe de citaciones de revistas(JCR, Journal Citation Reports). Según sus creadores,

TABLA 2 : Hitos en el desarrollo del ISI����� (XJHQH�*DUILHOG�IXQGD�OD�HPSUHVD�FRQ�����GyODUHV�TXH�VROLFLWR�D�SUpVWDPR�GH�XQD�

HQWLGDG�EDQFDULD�� ,QLFLR�HVH�DxR�HO�&XUUHQW��FRQWHQWV��&&��RI� �&KHLFDO��3KDUPDFR�

0HGLFDO��/LIH��6FLHQFHV��TXH�FXEULD������UHYLVWDV��

����� ,6,� LQWURGXFHV� &XUUHQW� $EVWUDFWV� RI� FKHPLVWU\� \� HO� LQGH[�&KHPLFXV� \� DGHPiV� VH�

WUDVIRUPD�HQ�XQD�HPSUHVD�LQFRUSRUDGD�EDMR�OD�OH\�GH�3HQVLOYDQLD��

������ &XUUHQW� &RQWHQWV� HGLWD� GRV� YHUVLRQHV�� &KHPLFDO�� 3KDUPDFR�0HGLFDO� � /LIH�

6FLHQFHV�DQG�6SDFH��(OHFWURQLF�DQG�3K\VLFDO�6FLHQFHV��

����� 6H�FXEUHQ�\D������UHYLVWDV��FRQ�������UHIHUHQFLDV��VH�SXEOLFDQ�\D���YHUVLRQHV�GH��

&XUUHQW�&RQWHQWV��&&�&KHPLFDO�6FLHQFHV��&&�(GXFDWLRQ��&&�%HKDYLRUDO��VRFLDO�DQG�

0DQDJHPHQW� VFLHQFHV�� &&� $JULFXOWXUDO�� )RRG�� DQG� 9HWHULQDU\� 6FLHQFHV�� \� &&�

(QJLQHHQLQJ�DQG�7HFKQRORJ\��

����� &XUUHQW� &RQWHQWV� WLHQH� � \D� ��� PLOORQHV� GH� UHIHUHQFLD� GH� PDV� GH� �� PLOORQHV� GH�

DUWLFXORV�LQGL]DGRV��&XUUHQW�&RQWHQWV�FXEUH������UHYLVWDV��

����� 0DV� GH�XQ�PLOOyQ�GH�FLHQWtILFRV� HQ� WRGR�HO�PXQGR� WLHQHQ�DFFHVR�D� ODV�%DVHV� GH�

'DWRV�GHO�,6,��6H�LQLFLD�OD�SXEOLFDFLyQ�GH�6RFLDO�6FLHQFHV�,QGH[��66&,��

����� ,6,��SURYHH�&XUUHQW�&RQWHQWV�RQ�'LVNHWWH�

����� ,6,�SUpVHQWD� ,6,�:HE�RI�6FLHQFH��DGHPDV�GH�DFFHVR� LQWHUQHW��H� LQWUDWHQW�D�FXUUHQW�

&RQWHQWV�

����� 'HVSXpV�GH����DxRV�,6,�HPSOHD�����SHUVRQDV�\�WLHQH�RILFLQDV��HQ���SDtVHV�LQFOX\H�

�����UHYLVWDV�SXEOLFDGDV��HQ����LGLRPDV���

����� ,6,� SUHVHQWD� WUHV� QXHYRV� SURGXFWRV�� ,6,+LJKO\&LWHG�FRP�� ,6,� (VVHQWLDO� 6FLHQFH�

,QGLFDWRUV�H�,6,�:HE�RI�.QRZOHGJH�

Page 5: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005114

el JCR entrega información cuantitativa para jerarquizar,evaluar, categorizar y comparar revistas, considerandosu alcance e impacto en la comunidad científica y tec-nológica.

ÍNDICES DE CALIDAD ISI

El ISI ha definido una serie de conceptos cuantitativospara medir el impacto y alcance de una revista internacio-nal y el impacto que producen en la comunidad investi-gadora: Factor de Impacto, Citas Totales, Índice de Inme-diación, Número de Articulas Totales, Vida Media de Cita-ción y Velocidad de Citación Propia son algunos de ellos.Todos estos factores son medidos sobre un conjunto derevistas seleccionadas, por el lSI. La selección de las re-vistas que ingresan al selecto grupo del ISI sigue méto-dos que según algunos críticos son poco transparentes,asunto que se discutirá más adelante en este trabajo. Enlo que sigue se presentan cinco de estos factores defini-dos y considerados como válidos por el lSI. La Figura 1muestra el significado gráfico de estos Índices.

Citas Totales: Es el número de veces que un artículo deuna revista X es citado como fuente de información entodas las demás revistas de la lista del lSI, en un períododeterminado.

Artículos Totales: Es el número de articulas (artículosoriginales, revisiones, comunicaciones cortas y notas

técnicas), que son publicados en una revista X en unperíodo determinado. Este parámetro es importante paradefinir varios de los otros índices y factores de medi-ción de la calidad e impacto de una revista.

Factor de Impacto: Este factor índica la frecuenciacon la que un artículo de una revista X es citado en unperíodo determinado (N años), en la misma revista X.Este factor se calcula dividiendo el número de citastotales en N años por el número de ar tículos publica-dos en esos mismos N años. Según el ISI esta factordetermina la importancia relativa de una revista en unadeterminada área.

Índice de Inmediación: Es una medida de cuán rápidoen el tiempo un artículo de una revista X es citado encualquiera otra revista de la lista del lSI, considerandoun período de un año como máximo. Definido así, esteíndice mide el impacto inmediato de un artículo de unarevista. Según el ISI este índice es útil para clasificaraquellas revistas que están investigando temas canden-tes y de actualidad.

Vida Media de Citación: Indica el promedio de vida deun artículo en una revista, siendo la "vida de un articulo"el periodo estimado de la curva de citaciones en que escitado un artículo. El promedio de la vida de todos losartículos de una revista determina este índice. Este índi-ce es útil para la administración de colecciones y paratomar decisiones sobre archivos en bibliotecas.

FIGURA 1

Factor de Impacto

(fJ (1)c: o (,) ra~ o

Indice de Inmediación

Vida Media de Citación

Tiempo después de publicación (años)

Page 6: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

115Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005

De todos estos factores e índices, es sin duda el Factorde Impacto el que ha sido más usado y abusado porautores, investigadores y administradores de la investi-gación. Erróneamente este Factor de Impacto ha sidoconsiderado como el único parámetro que determina siuna revista es buena o mala. Incluso ha sido peor queesto; algunos investigadores y administradores de lainvestigación sostienen que sólo con ser revista ISI larevista es "de corriente principal', un error muy arraiga-do y que costará mucho corregirlo mientras no haya unÍndice o Factor alternativo que compita con el del lSI o ellSI revise sus métodos para satisfacer a una mayor au-diencia y aplacar las justificadas críticas. Ha sido esteFactor de Impacto el que ha monopolizado el negociode la información y ha llevado a grupos de profesiona-les a intentar, sin éxito hasta ahora, crear factores alter-nativos de medición de la calidad de una revista.

El Factor de Impacto

El Factor de Impacto ha sido por décadas el parámetromás importante para medir el impacto, estatus, posi-ción, renombre, importancia, prominencia e influen-cia, es decir el prestigio de más de 7400 revistas enciencias exactas, ciencias de la vida, tecnología e in-geniería, arte y ciencias de sociales que han sido se-leccionadas por el ISI para medir su Factor de Impacto.El ISI sostiene que aunque el Factor de Impacto no esuna medida perfecta es el más reproducible y confiablede los índices disponibles. El problema es que no hayotros disponibles porque el ISI se ha encargado demonopolizar el negocio. Con una buena campaña depublicidad el ISI ha ido imponiendo sus criterios enmuchos países del mundo, incluyendo varios deLatinoamérica. No hay nada impropio en esta campa-ña, si se ha realizado con la buena práctica que debeprevalecer en los sanos negocios. Al parecer no hasido así, y se ha llegado a la situación actual y lamen-table de que muchos administradores de la investiga-ción en nuestros países consideren los criterios del ISIcomo los únicos aplicables para medir la calidad delas publicaciones.

El mismo inventor de estos índices de medición de im-pacto estableció hace muchos años que el uso cuida-doso y bien informado de los datos de impacto es esen-cial, que los usuarios no deben obtener conclusionesapresuradas basadas en estos índices, y que varios otrosfactores deben ser considerados al momento de califi-car a una revista (7).

Se define el Factor de Impacto como una medida de lafrecuencia con la que un articulo publicado en una revis-ta es citado durante un período dado. Aunque hay variasdefiniciones matemáticas, el Factor de Impacto Estándarse calcula dividiendo el número de citaciones a los artí-culos de una revista por el número total de artículos pu-blicados en esa revista durante los dos últimos años

El Factor de Impacto, en sus diversas definiciones, esútil para clarificar el significado de la frecuencia de citastotales o absolutas. Este Factor elimina el sesgo produ-cido por el efecto de revistas que publican muchos artí-culos sobre las revistas que publican pocos artículos,además del sesgo relacionado con la frecuencia y laantigüedad de una revista

La definición anterior no considera, sin embargo, ladistorsión causada por las auto citaciones. Esto es porlas citas de autores que se citan así mismo en susartículos. Para corregir este aspecto el ISI ha definidoun Factor de Impacto Corregido. En este Factor el nu-merador en la ecuación. (1) se calcula sumando todaslas citas y descontando las autocitas. La Tabla 3 mues-tra distintas formas de calcular el Factor de Impacto ysu significado (7).

La Tabla 4 entrega valores de cuatro de estos índicespara revistas algunas áreas ,de ingeniería y tecnología.Una extensa lista conteniendo los valores de estos índi-ces para más de 1000 revistas se puede obtenerdellnstitute far Scientific Information de Estados Uni-dos (3).

Deficiencias del Factor de Impacto

Hay una serie de deficiencias en la definición y aplica-ción del Factor de Impacto que han sido mencionadasreiteradamente en la literatura. Entre estas se analizanaquí cuatro aspectos: i) el tipo de citas consideradas enla definición; ii) intereses económicos más que decalidad e impacto de las revistas; iii) variabilidad en eltiempo; y iv) múltiple auto ría.

citaciones de la revista en artIculasen el año X, durante los dos anosanteriores a X =

número de articulas totales pu-blicados en esos mismos dosanos anteriores a X

Factor deImpactopara el año X

Page 7: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005116

Tipo de citas

Como se explicó antes, el Factor de Impacto es calculadodividiendo el número de citaciones que recibe una revistaen los dos años anteriores por el número de artículos detodo tipo publicado en esos mismos dos años. Este as-pecto según los críticos es el principal defecto de esteparámetro. El denominador incluye solo citas a artículosoriginales de investigación, revisiones y notas cortas, sindistinción. En el numerador, sin embargo, todas las citasson válidas. Por lo tanto las revistas que tienen revisionesde libros, cartas al editor, materiales editoriales puedenhacer aumentar el numerador, ya que comentarios, res-puestas, correcciones, etc. citarán artículos. Es tan im-portante esto que, por ejemplo, se ha dado el absurdo deque una revista que solo presenta revisiones de libros hasido clasificada de acuerdo a su Factor de Impacto comonúmero 1 entre 500 revistas de sicología y número 2entre 1600 revistas de ciencias sociales.

Intereses Económicos

La Tabla 5 muestra una selección de revistas indizadaspor el ISI bajo el área de Ciencias Multidisciplinarias.Por ejemplo, la revista Iran J. Sci. Technol. tiene unFactor de Impacto de 0.03. Si esta revista publica unos60 artículos por año el Factor de Impacto indica que larevista fue citada solamente cuatro veces en otras re-

TABLA 3: Métodos de cálculo del Factor de Impacto

)DFWRU�GH�,PSDFWR�GH�GRV�DxRV�

���XQ�DxR�GH�FLWDV�\�GRV�DxRV�GH�OD�UHYLVWD��$ �FLWDV�WRWDOHV�HQ�XQ�DxR�[�% �FLWDV�WRWDOHV�GH�DUWLFXODV�SXEOLFDGRV�HQ�ORV�GRV�DxRV�DQWHULRUHV�D�[���& �Q~PHUR�GH�DUWLFXODV�SXEOLFDGRV�HQ�HVRV�GRV�DxRV�DQWHULRUHV�D�[���' �%�&� �)DFWRU�GH�,PSDFWR�GHO�DxR�[�

)�DFWRU�GH�,PSDFWR�GH�ORV���DxRV�

�XQ�DO?R�GH�FLWDV�\�FLQFR�DO?RV�GH�OD�UHYLVWD��$ �FLWDV�HQ�HO�DxR�[�GH�DUWtFXORV�SXEOLFDGRV�HQ�ORV���DxRV�DQWHULRUHV�% �Q~PHUR�GH�DUWLFXODV�SXEOLFDGRV�HQ�HVRV���DxRV�DQWHULRUHV�D�[�

���& �$�%� �)DFWRU�GH�,PSDFWR�GH���DxRV�

)�DFWRU�GH�,PSDFWR�5HYLVDGR��VH�H[FOX\HQ�ODV�DXWRFLWDV��

��$ �FLWDV�WRWDOHV�HQ�XQ�DxR�[�GH�DUWLFXODV�GXSOLFDGRV�HQ�ORV���DxRV�DQWHULRUHV�D�[���% �WRWDO�GH�DXWR�FLWDV�HQ�HVRV���DxRV�DQWHULRUHV�D�[���& �$���%������FLWDV�WRWDOHV���DXWR�FLWDV���' �Q~PHUR�GH�DUWtFXORV�SXEOLFDGRV�HQ�HVRV�GRV�DxRV�DQWHULRUHV�D�[���( �&,'� �)DFWRU�GH�,PSDFWR�5HYLVDGR�SDUD�HO�DxR�[�

vistas, durante los dos últimos años. A otras revistas,sin embargo, se les exige un Factor de Impacto másalto antes de ser incorporadas en la lista. Si revistascomo algunas indicadas en la Tabla 5, con tan bajoFactor de Impacto, están incluidas en las Bases de Datosdel lSl, creo que tenemos todo el derecho a sospecharque este asunto no es tan objetivo y que hay situacio-nes donde priman más los intereses económicos quelos de calidad.

Variabilidad

La Figura 2 muestra como el valor promedio del Factorde Impacto experimenta notables variaciones, depen-diendo del tema. Esto refuerza la idea de que el índicede Impacto, como valor absoluto, no es un In dice de lacalidad de la revista en un determinado campo. Puedeocurrir incluso de que el Factor de Impacto más bajo enuna determinada área puede ser el Factor de Impactomás alto en otras áreas. Por ejemplo en el área de Biolo-gía y Biología Molecular la primera revista clasificada,Annual Review of Biochemistry, tiene un índice de Im-pacto de 39 y la revista ubicada en el lugar 25 tieneíndice de 6.4. En el área de Agricultura y Ciencia Animalla revista de más alto impacto tiene un índice de Impactode 2.2, mientras que la revista ubicada en el lugar 25tiene un Índice de 0.6. ¿ Significa esto que la revista N°1 en el área de Agricultura y Ciencia Animal es de más

Page 8: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

117Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005

bajo prestigio que la N° 25 del área de Biología y Biolo-gía Molecular? Obviamente no es así, pero hay investi-gadores y administradores que dan demasiada credibi-lidad a este Factor de Impacto.

Múltiple Autoría

Muy relacionado con esta variación del valor del Factor de

Impacto está el fenómeno de múltiple autoría. El pro-medio de autores en una determinada área varía con eltema de que se trate. En Ciencias Sociales, el prome-dio es de 2 autores por artículo, pero en las CienciasBásicas es del orden de 4. Considerando que los au-tores se autocitan con frecuencia, las áreas con mayorpromedio de autores por ar tículo tienen mayor índicede impacto.

TABLA 4: Cuatro factores de medición de impacto de artículos de revistas (ISI, 1995)

5HYLVWD� ,QG�GH� &LWDV�7RWDOHV� ,QG��GH� $UWOFXORV�� ,PSDFWR� � ,QPHGLDFLyQ� 7RWDOHV�,QJHQLHUOD�4XOPOFD� � � � �-��&DWDO�� ������ ������ ������ ����$,&K(�-�� ������ ����� ������ ����&KHP�(QJ��6HO�� ������ ����� ������ ����)OXLG�3KDVH�(TXOO�� ������ ����� ������ ����,QJ��(OpFWULFD�\�(OHFWUyQ,FD� � � �,(((�-��4XDQWXP�(OHFWU�� ������ ����� ������ ����,(((�(OHFWU��'HYOFH� ������ ����� ������ ����6HPLFRQG��6HO��7HHK�� ������ ���� ������ ����,(((�-��6ROOG�&LUFR� ������ ����� ������ ����,QJHQLHUOD�0HFiQ,FD� � � � �,QW��-��+HDW�0DVV�7UDQVW�� ������ ����� ������ ����,QW��-��3ODVWLHLW\� ������ ���� ������ ���-��(QJ��0HHK��$6&(� ������ ����� ������ ����,QW��-��0HFK��6H/� ������ ���� ������ ����,QJHQLHUOD�,QGXVWULDO� � � � �0DWK��2SHUR�5HV�� ������ ���� ������ ���-��4XDOOW\�7HHK�� ������ ���� ������ ���-��3URG��,QQRY��0DQDJ�� ������ ��� ������ ���,QW��'HVOH��7HHKQRO�� ������ ��� ������ ���&LHQF,DV�$PE,HQWDOHV� � � � �(QY��6HO��7HHKQRO�� ������ ����� ������ ����&OOPDWOH�&KDQJH� ������ ���� ������ ���-��(QYOU��4XDOLW\� ������ ����� ������ ����-��(QY��(QJ��$6&(� ������ ���� ������ ���7HFQ��\�&V��GH�ORV�$OLPHQWRV� � � �&UOW��5HY��)RRG�6HO�� ������ ���� ������ ���-��$JUOH��)RRG�&KHP�� ������ ����� ������ ����-��&HUHDO�6HO�� ������ ���� ������ ����-��)RRG�6HO�� ������ ����� ������ ����$JULFXOWXUD� � � � �$GY��LQ�$JURQRP\� ������ ���� ������ ���-��$JULH��)RRG�&KHP�� ������ ����� ������ ����$P��-��(QRO��9LWOHXOW�� ������ ���� ������ ���3HVWOH��6HO�� ������ ����� ������ ����(QHUJOD�\�&RPEXVWLEOHV� � � � �$$3*�%XOOHWOQ� ������ ����� ������ ���3URJ��(QHUJ��&RPEXVWR� ������ ����� ������ ���(QHUJ\�DQG�)XHOV� ������ ���� ������ ����&RPEXVWR�)ODPH� ������ ����� ������ ����

Page 9: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005118

Revisión

Dentro de una determinada área el impacto de un artícu-lo es también diferente, dependiendo del tipo de artícu-lo (nota corta, revisión o artículo original). Como se veen la Figura. 2, una comunicación corta (ShorterCommunication) tendrá mayor Índice de Inmediaciónpero menor Vida Media. Esto es que la curva estará masapegada al origen, pasa por un máximo y decae rápida-mente después del máximo.

Los Índices de impacto y el tercer mundo

Aunque las instituciones dedicadas a este negocio dela información están convencidas de la objetividad desus elementos de medición (Índices interacciónales,factores de impacto, número de citas), el sistema harecibido frecuentes críticas en la literatura (Gibbs, 1995;Octavio, 1996). Algunos países de Latinoamérica hanhecho según los críticos mala implementación del sis-tema, considerando además que la mayoría de las re-

vistas provenientes del tercer mundo están fuera delselecto grupo de revistas consideradas en la determi-nación de estos factores.

Los factores mencionados son obtenidos haciendo usoprincipalmente de las citas aparecidas en un grupo derevistas seleccionadas mediante un método poco trans-parente. Revistas nuevas provenientes de editorialescomo Elsevier o pergamon entran en los índices inter-nacionales casi sin evaluación del alcance e impactoque tendrá una nueva revista. Algo similar ocurre conrevistas que tienen el respaldo de alguna institución quetiene varios miles de socios a donde la empresa quemaneja el índice Internacional puede llegar con sus pro-ductos (costosas bases de datos, libros, subscripcio-nes, etc.).

Alfredo Octavio (8), un matemático venezolano, es uncrítico del sistema y en particular de lo que hace el Ins-tituto de Información Científica (lSI), y es interesanteexponer y analizar sus argumentos. Escribe Octavio (8):"... hay un sistema para evaluar la calidad de la investi-gación de un investigador sin haber leído nunca ningu-no de sus trabajos. El sistema es ampliamente usado enel tercer mundo y se conoce como análisis de citacio-nes. Esta basado en un producto comercial conocidocomo Science Citación Index (SCI). EIISI, que produce ycomercializa el SCI, sostiene que ellos indizan todos losartículos publicados en las principales revistas del mun-do, hacen un análisis cruzado buscando las citas a losartículos publicados en ellas. Todo lo que hay que ha-cer después de comprar el disco compacto (CD) al valorde US$ 11.000, es buscar las citas que ha recibido uninvestigador en los últimos años, y Voila... Ud. obtiene

TABLA 5: Factor de Impacto de algunas revistas clasifi-cadas por el lSI como Ciencias Multidisciplinaria

Tiempo después de publicación (años)

FIGURA. 2 Factor de Impacto y tipo de publicaciones (Adaptado de Amin y Mabe, 2000)

5HYLVWD� � )DFWRU�GH�,PSDFWR�

9LGD�0HGLD�

1DWXUH� �� ����� ����6FLHQFH� �� ����� ����%LRVFLHQFH� �� ���� ����6FLHQWLVW� ��� ���� ����-��.XZDLW�6FL�� ��� ���� ��$UDE�*XOI�-��6FL��5HV�� ��� ���� ��.XZDLW�-��6FL��(QJ�� ��� ���� ���$UDE��-��6FL��(QJ�� ��� ����� ���,UDQ�-��6FL��7HFKQRO�� ��� ����� ��

Page 10: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

119Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005

una medida numérica y objetiva del valor del trabajoque hace un investigador. Esto es al menos lo que el lSlle gustaría que creyéramos".

Octavio resume sus críticas en un teorema y un corola-rio. Teorema: Las únicas buenas revistas son las queestán en la Lista 0811SI. Corolario; Los único, artículosque deben ser considerados válidos para' evaluar la ca-lidad de un investigador son los publicados en las re-vistas de. la Lista.

Puesto de esta forma, que se acerca 'bastantea la reali-dad, obviamente el sistema debe merecer algunos repa-ros y no ser seguido en forma tan estricta en los países deLatino América, o al menos no hasta que el sistema con-sidere en su selecta Lista una cantidad razonable de re-vistas del tercer mundo o se considere en forma ponde-rada las publicaciones en cualquier revista. o El listadodel ISI incluye alrededor de 7400 revistas de las más de80 mil que se publican hoy en día en el mundo. Cierta-mente no están todas las que debieran y están algunasque no debieran, o como dice el refrán: "no están todaslas que son, ni son todas las que están". En el índice delISI Current Contents Engineering, Computing andTechnology, de las 1100 revistas indizadas, 28 son enidiomas distintos al Inglés y solo 2 son publicadas enidioma Castellano. Esto constituye un aspecto claro so-bre la poca importancia que dan los propietarios de losíndices a las revistas en idioma Castellano. Creo que quie-nes de una u otra forma estamos involucrados en la in-vestigación y en la difusión de los resultados de la inves-tigación debemos hacer algo al respecto.

El Factor de prestigio

No se conoció mucho acerca de la empresa PrestigeFactor, aparte de ser una empresa canadiense estable-cida en Toronto y que estuvo en el mercado por menosde dos años. Las razones conocidas para esta súbitadesaparición se analizan en sección aparte.

La empresa Prestige Factor definió varios factores e índi-ces para medir la calidad de una revista: Índice deInteracción, Índice de Biblioteca, Índice de Publicacio-nes, Factor de Artículos de Revisión, Índice de Revisio-nes e Índice de Articulas y Revisiones. Prestigio es unapalabra altamente positiva como los son sus numerosossinónimos. Incluirla en un servicio como el de la empre-sa Prestigefactor.com parece ser una ingeniosa idea pararelacionarla con la calidad de una publicación.

El Factor de Prestigio usa un algoritmo que consideraseis variables independientes de los tres últimos añosde publicación: las citaciones en artículos originalesde artículos originales en el año X de artículos publi-cados en los tres años anteriores a X y el número deartículos totales publicados en esos mismos tres añosanteriores a X.

Índice de Publicaciones: contiene 7 variables, las 6 delFactor de Prestigio y el número promedio de artículosque fueron publicados en los tres años anteriores). ín-dice de Publicaciones = (Factor de Prestigio) x (prome-dio de artículos originales publicados durante los tresaños anteriores).

Índice de Interacción: contiene 3 variables indepen-dientes: el número total de artículos originales y revisio-nes en los últimos tres años). Las revistas con mayoríndice de Interacción son aquellas que ofrecen formasde relación entre los autores. Cartas, entrevistas. en-cuestas

Factor de Artículos de Revisión: contiene 6 variablesindependientes, las citaciones en el año X a artículos derevisión publicados en los tres últimos. años y la 'Canti-dad de artículos de revisión publicados durante esosmismos años.

Índice de Revisión: contiene 7 variables independien-tes, las seis del Factor de Artículos de Revisión y el valorpromedio de artículos de revisión publicados durantelos tres años anteriores .

Índice de Articulas y revisiones: contiene 12 variables,las del Factor de Prestigio y las del Factor de Artículos deRevisión. índice de Artículos y revisiones = Índice dePublicaciones: contiene + Índice de Revisiones.

Índice de Biblioteca: reúne varios de los índices y.Factores definidos por Prestige Factor. índice de Bi-blioteca: = Factor de Prestigio + índice de Publica-ción + índice de Revisión + índice de Interacción

Factor dePrestigioel año X

Citaciones de una revista en artículosoriginales en el año X, durante lostres años anteriores a X =__________________________________________________________________Número de artículos totales publica-dos en esos mismOs tres añosanteriores a X.

Page 11: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005120

Comparación entre el Factor de Prestigio y el Fac-tor de Impacto

De acuerdo a la información presentada enPrestigeFactor.com, antes que desaparecerá, la empre-sa percibía diferencias sustanciales entre su producto"Factor de Prestigio" y el popular "Factor de Impacto" dellSI. Al igual que el Factor de impacto, el Factor de Pres-tigio mide la frecuencia con la que es citada una revistaen otras revistas selectas. Sin embargo el Factor de Pres-tigio solo considera citaciones en artículos originales.Por lo tanto, según la empresa,"el Factor de Prestigiomide el valor verdadero del impacto de una revista yaque la investigación innovadora es publicada solo enarticulas originales. (10).

TABLA 6: Comparación entre el Factor de Prestigio y el Factor de Impacto del lSI (10)

9DULDEOH�GH�&RPSDUDFLyQ� )DFWRU�GH�,PSDFWR� )DFWRU�GH�3UHVWLJLR�

2IUHFH�%DVHV�GH�'DWRV�

HVSHFLDOL]DGD�

1R� 6t�

&XEUH�ODV�&LHQFLDV�6RFLDOHV���� ��6,�D������86'� ��6t�D������862�

&XEUH�HO�iUHD�$JUL�*HR�$PEOHQWDO� ��&LHQFLD���������86'��

��$JUL�*HR�$PEOHQWDO������

862�

%LRPHGLFDO�GDWDEDVH� ��&LHQFLD���������86'�� ��%tRPpGLFD��������

%DVHV�GH�'DWRV�7pFQLFDV� ��&LHQFLD���������86'�� ��7pFQLFR�������86'��

1~PHUR�GH�%DVHV�GH�'DWRV� �� ��

,�)HFKD�GH�3XEOLFDFLyQ� -XQLR� 6HSWLHPEUH�

8OWLPD�9HUVLyQ� ����� �����

3DUD�HO�DOtR�����XWLOL]D�GDWRV�GH���� ����������� ���������������

1~PHUR�GH�UHYLVWDV� !������� ������

9DULDEOHV�LQFOXLGDV�HQ�ODV�%DVHV�GH�

'DWRV�1R�%LRPpGLFDV�

��YDULDEOHV� ��YDULDEOHV�

9DULDEOHV�LQFOXLGDV�HQ�ODV�%DVHV�GH�

'DWRV�%ORPpGLFDV�

1R�GLVSRQLEOH� ��YDULDEOHV�

'LVWLQJXH�HQWUH�DUWLFXODV�RULJLQDOHV�\�

GH�UHYLVLyQ�

1R� 6L�

'LVWtQJXH�HQWUH�DUWtFXORV�GH�FLHQFLDV�

EiVLFDV�GH�FOOQLFRV�

1R� 6,�

6XEHVWLPD�DUW,FXODV�GH�FLHQFLDV�

EiVLFDV�FRQ�UHVSHFWR�D�F8QOFRV�

6,��SRU�������� 1R��OR�FRUULJH�

&ODVLILFD�SRU�SRUFHQWDMH��SHUFHQWLOH�

UDQJH��SDUD�FRPSDUDU�WRGRV�ODV�

UHYLVWDV�HQ�OD�%DVH�GH�'DWRV�

1R� 6L�

,QGLFD�HO�FUHFLPLHQWR�R�GHFOLQDFLyQ�

UHDO�GH�XQD�UHYLVWD�

1R� 6L�

,GHQWLILFD�UHYLVWDV�FRQ�FUHFLPLHQWR�R�

GHFDLPLHQWR�IDOVR�

1R� 6t�

1XHYDV�UHYLVWDV�VRQ�LQFRUSRUDGDV�

FRQ�SURQWLWXG�

1R� 6L�

,QWHUYDOR�GH�(YDOXDFLyQ� ��������� �������

,QWHUYDOR�GH�(YDOXDFLyQ�HV�GLIHUHQWH�

GH�DOtR�HQ�DOtR�

6t� 1R�

Prestige Factor en su página en Internet hacía una com-paración entre su principal producto, el Factor de Pres-tigio y el Factor de Impacto del lSI. La Tabla 6 muestraesta comparación. indicando allí diversos defectos delFactor de Impacto y diversas bondades del Factor dePrestigio. Independiente de las bondades que proclamala empresa Prestige Factor, la Tabla 6 muestra algunasdeficiencias del Factor de Impacto que personalmentehe comprobado como ciertas, y que han sido discuti-das en secciones anteriores:i) Es verdad que el Factor de Impacto no distingue

entre artículos originales y de revisi6n, pero losartículos de revisión son un porcentaje muy pe-queño, como para alterar significativamente el va-lor del factor de impacto y modificar

Page 12: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

121Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005

sustancialmente la posición de la revista en unadeterminada área;

ii) Es verdad que el intervalo en que se mueven losvalores del Factor de Impacto varía de año a añoporque dependen no sólo de las citas sino de losartículos publicados en las revistas. Sin embar-go, la mayoría de los usuarios está interesado enlos últimos datos y no en varios años anteriorespara decidir en que revista publicar;

iii) Efectivamente esta variación anual no permite cla-sificar una revista en el largo tiempo, a menosque se inventen promedios adecuados. Un Fac-tor que indique posición relativa de una revistaen el contexto de todas las revistas arbitradaspublicadas en un determinado año puede ser deinterés. En todo caso, se puede observar que lasrevistas mejor clasificadas, Science y Nature,estarán siempre en las primeras posiciones, in-dependiente de como se definan estos factoresde Impacto;

iv) El intervalo de evaluación fijo que establecióPrestige Factor parece razonable para poder vi-sual izar en forma inmediata si una revista superasu ubicación anterior o baja en su impacto. Conel Factor de Impacto esto no es posible ya que losintervalos de variación el Factor varían de año enaño; y

v) Efectivamente, Prestige Factor esperaba incorpo-rar revistas con mayor prontitud que lo que lohace el ISI y con métodos más claros y objetivos.Lamentablemente no alcanzó a estar en el merca-do tiempo suficiente como para haber verificadoesta sana intención.

La Tabla 7 muestra el Factor de Prestigio de varias re-vistas en el área de Ingeniería y Tecnología. Se obser-va en la Tabla que, salvo escasas excepciones. la po-sición de las revistas es similar, independiente de quese clasifiquen usando el factor de impacto 6 'el Factorde Prestigio.

La Desaparición del Factor de Prestigio

De acuerdo a la información disponible en informes, artí-culos y comunicaciones personales, el Factor de Presti-gio usó información de propiedad del ISI (JCR) para crearsobre ella ciertos índices cosmética mente diferentes, peroigualmente defectuosos en algunos aspectos. PeterJacsó, columnista de Informafion Today, Profesor de Cien-cia de la Información y de Bibliotecología y un recocidoexperto en Calidad de Bases de Datos. expone un exten-so trabajo en Intemet: "The Mirage o, Prestige. About thePrestige Factor Database" (11). Lo más especial de suartículo se resume en lo que sigue.

TABLA 7: Factor de Prestigio de varias revistas en el área de Ingeniería y Tecnología

-RXPDO�

3UHVWLJH�

)DFWRU�

5DQNtQJ�

3UHVWLJH�

)DFWRU�

3HUFHQWLOH�

)DFWRU�GH�

,PSDFWR�

1DWXUH� ������� �� ���� �����

6FLHQFH� ������� �� ������ �����

$,&K(�-RXPDO� ������ ���� ������ ����

-�6XSHUFULW�)OXLG� ������ ���� ������ ����

&KHP�(QJ�6FL� ������ ���� ������ ����

)OXLG�3KDVH�(DXLOtEU� ������ ���� ������ �����

)RRG�6Ft��7HFKQRO�,QWO� ������ ����� ������ ����

&DQ�-�&KHP�(QJ� ������ ����� ����� ����

-�3KDVH�(TXtOLEU� ������ ����� ������ ����

.RUHDQ�-�&KHP�(QJ� ������ ����� ������ ����

%ROHWLQ�6RF�&KLOH�4XLPLFD� ����� ����� ������ �����

*UDVDV�$FHLWHV� ����� ����� ������ �����

,�5HYLVWD�0H[�

)tVLFD�

����� ����� ����� �����

,QJHQLHULD�4XLPLFD� ����� ����� ����� ������

&KLQHVH�-�&KHP�(QJ� ����� ����� ����� ����

$UDELDQ�-�6FL�(QJ� ����� ����� ����� �����

Page 13: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005122

1.- El Factor de Prestigio empieza su página estable-ciendo que el Factor de Impacto mide la frecuencia conla que una revista es citada por otras. Se sabe queprácticamente todas las revistas reciben la mayor partede sus citaciones de las mismas revistas y sin embar-go una de las clasificaciones para ver la calidad de unarevista es este número. Además el Factor de Impactosostiene que su análisis del año X incluye los artículospublicados durante ese año X (Factor de Impacto sepublica en octubre de cada año). Las citas recientesdeben usarse para calcular otros índices o factorescomo el "índice de Inmediación" del JCR. Jacsó cita elsiguiente ejemplo. En la edición de Ciencias Socialesdel JCR 2000 solo el 1.6% de todas las citas recibidasel año 2000 fueron de ar tículos publicados el 2000.

Así por ejemplo, 437 de las 1697 revistas incluidas endicha edición no recibieron ni una sola cita y 253 re-vistas recibieron una sola en artículos publicados elmismo año.

4.- El Factor de Prestigio disminuye el impacto medidopor otros índices para reconocidas revistas sobre lasque los usuarios no tienen duda sobre su calidad e in-fluencia en los investigadores de todo el mundo. El au-tor detalla un caso de una revista de leyes que la CorteSuprema de USA nunca citó en tres años (1996-1998),y que el Factor de Impacto clasifica como superior a unareconocida revista del ámbito de las leyes la que fuecitada 8 veces en el mismo período.

3.- Jacsó muestra con ejemplos que los datos usadospor el Factor de Prestigio y que la empresa guarda bajosecreto son los mismos del JCR. Argumenta sobre elalto costo que tendría la suscripción a las 6222 revistasque dice incluir el Factor de Prestigio, además del gastopara procesar más de 50 millones de citas, estimadaspara tres años. La tarea es enorme, y por lo tanto elrápido manejo de los datos se explica solo porque losdatos deben haber estado disponibles. El JCR reclamaque son sus datos.

4.- PrestigueFactor.com establecía una prohibición dereplicar y usar su información para otros fines, cuandoal parecer, fueron ellos los que usaron los datos del ISI.Además los reglamentos del Factor de Impacto estable-cen que toda reclamación o juicio relacionado con susproductos se hará en Santo Domingo- Rep. Dominica-na, mientras que las oficinas de Prestige Factor estabanen Toronto-Canadá.

Paula J. Hane, editor of NewsBreaks, y co-editora deInformation Today, ha escrito un interesante reportajesobre la desaparición del Factor de Prestigio. Hane(2001), titula su artículo como "The Prestige (Factor) IsGone" y hace un relato corto y certero sobre las razonesde esta súbita desaparición. Jane sostiene que la re-ciente y audaz empresa Prestige Factor desafió al ISI ysu popular Factor de Impacto para medir la calidad delas publicaciones en revistas académicas. La principalrazón para esta súbita desaparición fue al parecer la in-habilidad de Prestige Factor para defenderse ante unamillonaria demanda establecida por el lSI.

En la desaparecida página de Internet de la empresa,(10) había varias directas comparaciones mostrando lasuperioridad del Factor de Prestigio y las deficienciasdel Factor de Impacto. La empresa sostenía que a pesarde que el ISI había estado en el mercado por mas de 30años, no había sido capaz de responder a muchas delas necesidades de la comunidad científica. Así, un gru-po de científicos y profesionales de ia informática dioorigen a este nuevo índice, desafiando a la poderosaISI. EI15 de Febrero de 2002 el lSI estableció una de-manda contra Prestige Factor en una Corte Federal enNueva York. La demanda se estableció por violación dederechos de autor.

El 22 de Marzo, Prestige Factor informó a sus clientesque cerraban el negocio debido a la demanda que alparecer no podrían sostener: "Lamentamos informalesque prestigefactor.com desaparece a partir de hoy. Des-afortunadamente, en Estados Unidos y Canadá cual-quier persona o entidad puede demandar a otra sin mé-ritos. Los millones de dólares en asuntos legales quenecesitaríamos para defendemos de nuestro competi-dor es la principal razón para esta triste decisión".

Propuestas

Considerando el análisis y discusión presentado, plan-teo aquí dos propuestas: una relacionada con el Factorde Impacto y otra con la valoración que se da a otrosíndices Internacionales diferentes a los del lSI.

Factor de Impacto Global

Por lo expuesto, se debe definir un índice que conside-re las revistas clasificadas en una determinada área so-lamente. Si se quiere comparar la revistas como un todo,independiente del área, pero que a su vez refleje el de-

Page 14: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

123Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005

sarrollo de la investigación en un área con respecto aotra, se debe redefinir el concepto. Propongo aquí defi-nir un Factor de Impacto Global, FIG:

La Tabla 8 muestra el índice de Impacto por área deinvestigación y el Factor de Impacto Global. En la Tablase observa por ejemplo, una revista del área de Físicacon índice de Impacto de 1.0 tendría un Factor de Im-pacto Global de 1.0/1.5=0,67 mientras que una revistade Ingeniería y Ciencias de Materiales con índice de Im-pacto de 1.0 tendría un Factor de Impacto Global de 1.0/0.7=1.43. Estos números muestran que dentro de sucampo la revista de Ingeniería y Ciencias de Materialesestá mejor posicionada que la revista de Física. Esteconcepto puede ser comparado con la situación de eva-luar el éxito económico de un médico con el de un inge-niero por la cantidad de dinero que ganan. Si esto qui-siera hacerse se debería comparar las ganancias delmedico entre sus pares médicos y las ganancias delingeniero entre sus pares ingenieros.

Valoración de otros Índices Internacionales

Convencido de que toda publicación en revistasindizadas, arbitradas, o que simplemente han pasadopor un Comité Editorial tienen algún valor relativo, pro-pongo una forma cuantitativa de valorar todas las publi-caciones de un investigador.

La propuesta considera el estándar ya común enLatinoamérica (revistas ISI), pero propone valorar la in-clusión en otros importantes índices, además de enfati-zar el arbitraje como medida de calidad de las publica-ciones. Conocedor del área de las ciencias y de la inge-niería, propongo el puntaje indicado en la Tabla 9, solopara revistas en estas áreas.

Una vez que se ha asignado el puntaje indicado en laTabla 9 las revistas arbitradas son fuertemente valoradas(el puntaje se multiplica por 2). Esto es de especial im-portancia porque la comunidad investigadora interna-cional está de acuerdo en que, a pesar de casos deplagio o incluso de invención de resultados, la publica-ción arbitrada es la mejor forma actual disponible paravalidar los resultados de una investigación.

La limitación de autores a un máximo de tres para asig-nar puntaje total a una publicación tiene que ver con dosconceptos básicos: uno de tipo estadístico y uno detipo ético. Estadísticamente se sabe que el promedio deautores está entre 2 y 3 en prácticamente todas las revis-tas, con contadas excepciones en el área de medicina yalgunas áreas de física.

Éticamente se sabe que existen autores e incluso gru-pos de investigación que hacen acuerdos de publica-ción para aumentar la cantidad de articulas e inflar losrespectivos curriculums de los investigadores. Haymuchos casos que parecen injustificables en la literatu-ra seria y que los respectivos editores han aceptado,erróneamente, según mi opinión. Se puede creer quehaya mucha gente involucrada en una investigación,pero no se puede creer que haya por ejemplo 75 autoresinvolucrados en la publicación (12).

En esto hay un malentendido éticamente reprobablesobre el significado da la autoría en una publicación. Laautoría de un trabajo escrito, ya sea que se trate de unapresentación a un congreso o de una publicación local,nacional o internacional, constituye una de las princi-pales recompensas en la investigación y es hoy en día,nos guste O no, una medida de éxito y logro de unainvestigación. Es por lo tanto, de extrema importanciaque los autores de articulas den a este aspecto la aten-ción que el tema merece y que los editores y administra-dores de la investigación valoren este aspecto en sujusta medida.

El Autor muestra el puntaje que obtendrían algunas re-vistas, arbitradas y no-arbitradas, incluidas en diversosíndices. De acuerdo a la propuesta, un artículo publicadoen una revista como Chemical Engineering Science queestá en varias Bases de Datos, incluidas las indicadas enla Tabla 9, tendrá un valor parcial de 28 puntos (y total de56); un artículo publicado en una revista como IngenieríaQuímica del Uruguay que está solamente en el lSI tendrá10 puntos parciales y los mismos totales ya que no esarbitrada; un artículo publicado en una revista como In-geniería Química de España que solo está en ChemicalAbstract y no es arbitrada, tendrá 5 puntos; y un artículopublicado en una revista universitaria no-indizada y noarbitrada, tendrá 1 punto. Esto números son bastante rea-listas respecto a la dificultad, al aporte al conocimiento yal posible impacto en la comunidad científica que tieneun artículo, pero valora el solo hecho de publicar, situa-ción que debe ser incentivada en nuestros países.

Factor de Impacto de larevista en su Área =

Factor de ImpactoPromedio de esa Área

Factor deImpacto Global

Page 15: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005124

CONCLUSIONES

1. - El producto de una investigación pierde su uti-lidad si no es comunicado a la comunidad inte-resada.

2. - Solo en la publicación en revistas seriamentearbitradas es donde verdaderamente se validan losresultados de un trabajo de investigación relevan-te que aporte al desarrollo de la ciencia y la tecno-logía..

3. - Los medidores de impacto de las publicacionesmerecen un análisis más crítico de parte de losadministradores de la investigación en los paíseslatinoamericanos.

4. - El Factor de Impacto, el Factor de Prestigio o cual-quier factor que aparezca en el futuro debe sercuidadosamente interpretado y debe ser consi-

derado solo como un índice más de la calidadde una publicación y no como el valor absolu-to.

5. - Las instituciones que financian proyectos deinvestigación (universidades, entidades y gu-bernamentales), deben exigir que toda investi-gación financiada termino con una o más pu-blicaciones en revistas arbitradas.

6. - Todas las publicaciones deben ser valoradasen alguna forma y se debe eliminar el conceptode que las únicas publicaciones válidas son laspublicadas en las revistas incluidas en la selec-ta lista del lSI.

7. - Las propuestas vertidas en este trabajo apun-tan a corregir esta deficiencia de modo de obte-ner una mejor opinión sobre el trabajo e impac-to del trabajo de un investigador..

TABLA 8: Factor de Impacto por Área (FIA) y el nuevo Factor de Impacto Global (FIG)

5HYLVWD� ),$� ),*�&LHQFLDV�%iVLFDV�GH�OD�9LGD� ���� ����1HXURFLHQFLDV� ���� ����0HGLFLQD�&OLQLFD� ���� ����)DUPDFRORJtD�\�7R[LFRORJLD� ���� ����)tVLFD� ���� ����4XtPLFD�H�,QJHQLHUtD�4XtPLFD� ���� ����&LHQFLDV�GH�OD�7LHUUD� ���� ����&LHQFLDV�$PELHQWDOHV� ���� ����&LHQFLDV�%LROyJLFDV� ���� ����,QJHQLHUtD�\�&LHQFLDV�GH�0DWHULDOHV� ���� ����&LHQFLDV�6RFLDOHV� ���� ����0DWHPiWLFDV�\�&LHQFLDV�GH�OD�&RPSXWDFLyQ� ���� ����

TABLA 9: Valor de las publicaciones incluidas en diversos índices Internacionales para el área de ciencias aplicadas,ingeniería y tecnología

tQGLFH� 3XQWRV��KDVWD���DXWRUHV�� 3XQWDMH��1�DXWRUHV��

,6,� ���&KHPLFDO�$EVWUDFWV� ��(QJLQHHULQJ�,QGH[� ��,QGLFHV�(VSHFtILFRV��WHPD�� ��F�X�tQGLFHV�*HQHUDOHV� ��F�X�

3RU�FDGD�DXWRU�VXSHULRU�D����VH�GHVFXHQWD�XQ�SXQWR�HQ�FDGD�SXQWDMH�DVLJQDGR�

1LQJXQR� �� FHUR�

Page 16: USO Y ABUSO DEL FACTOR DE IMPACTO LA DESAPARICIÓN DEL

125Facultad de Ciencias AgropecuariasVol 3 No.1 Marzo 2005

REFERENCIAS

(1) Taubes, G., Measura for Measura in Science,Science, 260, 884-886 (1993)

(2) Gibbs, w.w., Ciencia en el Tercer Mundo, Investi-gación y Ciencia, Dic (1995)

(3) ISI, Joumal Cítatíon Repor t, ISI PrE¡!ss,Philadelphia-USA (1995)

(4) Mildren, K.W. y P.J. Hicks, Information Sources inEngineering, Bowker Saur, UK (1990) Octavio, A.,The Indexed Theoram, The Math. In!., 18(4),9-11(1996)

(5) Khan, M.S., D. Pinkston y D.F. Zaye, ChemicalEngineering Information from Chemícal Abstracts,AIChE Symposium Series 247(82)5-14(1985)

(6) Bottle, R.T. y J.F.B. Rowland, Informatíon Sources

in Chemistry, Bowker Saur, UK (1990) GarfieldE. The Concept of Citation Indexíng: A Uniqueand Innovative Tool for Navígating the ResearchLiteratura. Current Contents, (1):3-5, 3 January1994

(7) Garfield E. The impact factor. Current Contents,(25):3-7, 20 June 1994a

(8) Alfredo Octavio (1996)(9) Amin, M. Y M. Mabe, «Impact Factors: Use and

Abuse», Elsevier Science Perspectives inPublishing, N°, october (2000)

(10) Prestige Factor.com.2000(11) Jacsó, P., �The Mirage of Prestige. About the

Prastíge Factor {)atabase� (http://www2.hawaii.edu/-jacso/extra) , (2001)

(12) Phys. Rev. Letters, vol 54, N° 5, 1985