ARTCULO DE REVISINCriterios, clasificaciones y tendencias de los indicadores bibliomtricos en la evaluacin de la cienciaCriteria, classifications and tendencies of bibliometric indicators in the evaluation of the scienceMara Josefa Peralta Gonzlez,IMayln Fras Guzmn,IOrlando Gregorio ChavianoIIIUniversidad Central "Marta Abreu" de Las Villas, Santa Clara, Villa Clara, Cuba.IIDepartamento de Ciencia de la Informacin. Pontificia Universidad Javeriana. Bogot, Colombia.

RESUMENEl presente trabajo se realiza con el objetivo de enunciar los referentes tericos sobre clasificacin de indicadores bibliomtricos en la literatura cientfica a partir de criterios, clasificaciones y tendencias que se manifiestan en el contexto internacional. Se enfatiza en el desarrollo de los indicadores de impacto en los sistemas de informacin cientfica a travs de valoraciones respecto al uso del factor de impacto y sus derivados, as como en la normalizacin y ponderacin matemtica para establecer comparacin entre diferentes disciplinas cientficas. Se abordan conceptualmente las nuevas tendencias de la medicin del impacto cientfico en la Web: los llamados altmetrics.Palabras clave:bibliometra, bases de datos, indicadores bibliomtricos, sistemas de informacin cientfica.

ABSTRACTS

The objective of this work is to state the theoretical framework about the classification of bibliometric indicators in the scientific literature from the criteria, classifications and trends emerging in the international context. The emphasis is on the development of impact indicators in systems of scientific information through assessments regarding the use of impact factor and its derivatives, as well as standardization and mathematical weighting to establish comparisons between different scientific disciplines. New trends to measure the scientific impact on the Web, called almetrics, are conceptually addressed.Key words:bibliometric,databases,bibliometric indicators, scientific information systems.

INTRODUCCINLa Bibliometra se entendi, desde sus orgenes, como la disciplina encargada de la medida de los libros.1-3En las primeras dcadas del siglo XX, su alcance fue limitado al mbito de los libros y sus anlisis se concentraron en el comportamiento del discurso escrito de las publicaciones y de un rea temtica en particular, en un momento en que la proliferacin de una variedad de soportes comenz a ser evidente.El objeto de estudio de la Bibliometra y su condicin de herramienta o disciplina instrumental de la Bibliotecologa se debati en la literatura especializada. Su gnesis en el mbito bibliotecolgico se asoci a la gestin bibliotecaria.4Durante la dcada del 70 y del 80 del siglo XX, consolid su carcter interdisciplinar y se reconoci como el mtodo de anlisis y medicin de los documentos cientficos. Estos se convirtieron en su principal inters sin obviar los fines que ocasionaron su gnesis.2En el campo de las disciplinas informativas, se convirti en un mtodo para la contabilizacin de la cantidad de documentos y adecuar los recursos disponibles a las necesidades de informacin de los usuarios, as como cubrir tasas de informacin en un rea de la ciencia. Por su parte, en la recuperacin de informacin se auxili del desarrollo de mapas cognitivos para facilitar la obtencin de informacin relevante y de aspectos estadsticos del lenguaje natural y los lenguajes documentarios."Reducir las posibilidades de la Bibliometra a la modelacin bibliogrfica, como es el anlisis de la dispersin de la fuentes, la productividad de los autores o la obsolescencia de la literatura (algunas de sus aplicaciones ms conocidas) es condenarla a una suerte de subdesarrollo disciplinar (...); aplicar sus modelos exclusivamente a la seleccin y adquisicin de la literatura es limitar sus potencialidades. Sin embargo, los lmites de esta ciencia an no han sido encontrados".5En la actualidad constituye "un medio para situar la produccin de un pas con respecto al mundo, una institucin en relacin con su pas y hasta los cientficos en relacin con sus propias comunidades".6Presta tambin atencin al estudio del comportamiento de comunidades y disciplinas cientficas a travs de los resultados de las investigaciones,7as como las motivaciones y proyectos de redes de investigadores, grupos e instituciones. Proporciona indicadores para medir la produccin y la calidad cientfica, y ofrece una base para la evaluacin y orientacin de la investigacin y desarrollo (I+D). Las tendencias de la ciencia y la tecnologa son examinadas a travs del comportamiento de la produccin de artculos cientficos y registros de propiedad intelectual.Su uso no se restringe al listado cuantitativo de referencias publicadas o no publicadas de un autor, pas, temtica o regin. Abarca, adems, las frecuencias y tendencias de las citas bibliogrficas que inciden en el impacto y la visibilidad, las relaciones de colaboracin internacional o nacional que se establecen entre autoreso instituciones, as como los canales por los que circula la informacin registrada.La seleccin de los indicadores a utilizar en determinados estudios depende de mltiples factores y se complejiza por la gran variedad de propuestas existentes en la literatura cientfica sobre el tema y la aplicacin de estos a diferentes casos de estudio. En la actualidad continan evolucionando fundamentalmente en la medicin del impacto cientfico desde el factor de impacto hasta los indicadores altmetrics, que miden la comunicacin cientfica en la Web 2.0, de gran utilidad en la evaluacin y gestin de la investigacin.Este fenmeno ha condicionado la existencia de una vasta tipologa para el uso de los indicadores bibliomtricos, que dificulta, en ocasiones, su seleccin en el contexto de investigacin. Qu criterios se establecen para su agrupacin? Qu clasificaciones se identifican en la literatura? Qu tendencias se vislumbran en el desarrollo de indicadores bibliomtricos en el mbito internacional? Estas son interrogantes que guan el presente trabajo.Conocer y entender las diversas clasificaciones, criterios y tendencias en torno al uso de los indicadores, posibilita ampliar el espectro y la concepcin sobre el tema; encauza la organizacin metodolgica de estudios bibliomtricos sin obviar relaciones de subordinacin, exclusin e inclusin de estos y favorece su aplicacin segn necesidades y acorde con el objeto de estudio planteado, importante para investigaciones futuras.LOS INDICADORES BIBLIOMTRICOS EN LA LITERATURA CIENTFICAEl presente trabajo es una investigacin documental que muestra y analiza los fundamentos y clasificaciones de los indicadores bibliomtricos y sus tendencias actuales, a partir de la amplia dispersin de clasificaciones y fundamentos existentes sobre el tema en la literatura cientfica. Desde los objetivos del trabajo se caracteriza como descriptiva.8Los indicadores bibliomtricos constituyen herramientas de la Bibliometra. Como instrumentos de evaluacin cuentan con una historia reciente. Su empleo se inici en los aos 70; sin embargo, a partir de la dcada del 80 del siglo XX se impuls la investigacin sobre estos, lo que repercuti en la proliferacin de una variedad de trminos utilizados por un sinfn de estudiosos del tema. En la dcada del 90 se consolid su uso y se combinaron con tcnicas de representacin visual. Desde su nacimiento pretendieron examinar el comportamiento de la informacin registrada en los libros y publicaciones cientficas; sin embargo, la intencin no se circunscribe a estas solamente. Permiten cuantificar el comportamiento de la produccin bibliogrfica y la comunicacin cientfica. Elcuadro 1muestra su alcance a partir del examen del objeto de estudio de la Bibliometra considerado por algunos tericos. Existen diversos criterios de clasificacin, pero de manera general convergen en dos agrupaciones esenciales: una divisin en indicadores de productividad, visibilidad o impacto y colaboracin, y otra en unidimensionales y multidimensionales.Las herramientas fundamentales para la aplicacin de la Bibliometra lo constituyen los indicadores bibliomtricos, utilizados ampliamente en la evaluacin de las producciones cientficas en diferentes dominios del conocimiento y de las comunidades cientficas. Su definicin se ha producido vinculada a las particularidades de la produccin bibliogrfica y del desarrollo de la ciencia y la tcnica. Estas herramientas describen y evalan un fenmeno a travs de medidas cuantitativas. Cumplen dos importantes funciones: la descriptiva en la medida que caracteriza el estado de un sistemay la valorativa, que juzga ese estado, segn una perspectiva deseable.

En las definiciones anteriores se observa que el objeto de anlisis son los documentos en su conjunto para el estudio de elementos vinculados a su creacin y uso. Los libros y las publicaciones peridicas constituyeron el centro de atencin de los estudios bibliomtricos. Se destaca la particularidad de atender aquellos que han sido publicados. Su aplicacin en la evaluacin de fondos y colecciones en las bibliotecas propici el anlisis de otras tipologas documentales."Los elementos cuantificables en los cuales se basan los estudios bibliomtricos provienen de dos fuentes: las referencias y las citas, vocablos con significado y papel especficos. El primero se usa para designar a la unidad fuente o documento de origen, mientras que la cita corresponde al documento citado".9Su vnculo con la actividad cientfica relaciona su empleo en la evaluacin de la calidad de la produccin cientfica.10Se definen como medidas basadas habitualmente en recuentos de publicaciones, que persiguen cuantificar los resultados cientficos atribuibles bien a unos agentes determinados, bien a agregados significativos de esos agentes.11SanzyMartnno limitan la concepcin del trmino a los datos extrados de las publicaciones. Amplan la definicin a los datos que solicitan los usuarios, y permiten el anlisis de la produccin y el consumo de informacin.12,13Por su parte, algunos autores no reducen el campo de aplicacin de los indicadores a la literatura cientfica. Para ellos constituyen una medicin agregada y compleja que permite describir un fenmeno, su naturaleza, su estado y su evolucin. Ofrecen el alcance y el lmite de los fenmenos a travs de medidas cuantitativas.13-15Varios modelos matemticos se emplean en los estudios mtricos que derivan indicadores de comportamiento de la informacin. Vinculados a la Bibliometra, son significativos los que analizan el comportamiento de la produccin y la comunicacin cientfica (cuadro 2).2

Por su parte, la distincin entre indicadores es a veces difusa en el mbito bibliomtrico por la variedad de tipologas existentes derivadas de los diferentes intereses evaluativos. Algunos investigadores prefieren nombrarlos sin especificar su categora, lo cual genera polmicas en el plano terico, mientras que otros los agrupan en clasificaciones especficas(cuadro 3).Tambin, la tipologa est en funcin del recuento, uso y relaciones de los elementos bibliogrficos. ParaSancho, los indicadores de calidad estn basados en percepciones (peer review).15,16De manera general las clasificaciones bsicas corresponden a la produccin o actividad e impacto o calidad. En ocasiones se desglosan separados los referidos a la colaboracin y relacin. Elcuadro 4revela una clasificacin general a partir de los juicios de varios autores, basados en las variables publicaciones y citas. Las tipologas de indicadores fueron perfeccionndose en el tiempo mediante la prctica bibliomtrica.

Los indicadores de produccin o actividad se basan en la enumeracin y cuantificacin de los documentos que se generan. ParaMaltrs, "persiguen cuantificar los resultados cientficos atribuibles bien a unos agentes determinados, bien a agregados significativos de esos agentes (...). Los agentes elementales son los investigadores, pero es ms frecuente calcular indicadores de produccin referidos a agregados como instituciones, regiones, pases o disciplinas".11Los indicadores de impacto, visibilidad o calidad son los ms polmicos y cuestionables en el mbito bibliomtrico. Se refieren al valor final, influencia o repercusin de los documentos en el resto de las publicaciones. Estn asociados a las direcciones que alcanzan las citas bibliogrficas y generalmente se vinculan al factor de impacto e ndice de citaciones. Son indicadores parciales de la originalidad, claridad, importancia e influencia de las publicaciones, aunque su resultado final est condicionado por la produccin cientfica de la variable o agregado que se est evaluando.11Los indicadores de colaboracin miden las relaciones que se establecen entre los productores en la elaboracin de un resultado que surge del esfuerzo cooperativo. Se dividen en dos categoras: simple y relacional. Los indicadores simples ofrecen informacin sobre las caractersticas o el nivel de colaboracin que exhibe la produccin cientfica, mientras los relacionales se centran en la representacin grfica de las redes de colaboracin que se establecen.11En elcuadro 5se agrupan indicadores con categoras de acuerdo con los criterios deMaltrsyCamps, donde se recogen los ms importantes indicadores existentes a la fecha.CallnyCourtialofrecen un desglose de indicadores acorde con una segmentacin general que agrupa los de produccin, visibilidad e impacto, y colaboracin, como indicadores de actividad.19En ese apartado se inscriben los indicadores de colaboracin simple. Una clasificacin similar a la realizada porCallnyCourtialse utiliz en estudios bibliomtricos en universidades espaolas.20-25Esta clasificacin ampla y actualiza los indicadores basados en el factor de impacto incluyendo los incorporados por elWoSyScopus, as como el ndice h. Incorpora una clasificacin de indicadores no bibliomtricos tiles para medir el nmero de documentos producidos a nivel institucional incluyendo otra tipologa de productos de investigacin (cuadro 6).Otra clasificacin general est en funcin de la tcnica estadstica utilizada en la obtencin de los indicadores bibliomtricos. Segn este criterio, se clasifican y agrupan en dos categoras esenciales: unidimensionales y multidimensionales (cuadro 7). Los unidimensionales estn basados en la estadstica univariable y reflejan una nica caracterstica del objeto estudiado. ParaSanzyMartn, miden una caracterstica de los documentos publicados o de los recursos econmicos invertidos en la actividad cientfica, sin tomar en cuenta algn vnculo comn entre ellos. Losbiomultidimensionales se basan en tcnicas estadsticas multivariables y su aplicacin facilita el estudio conjunto de distintas variables, as como de las relaciones que se establecen entre estas.

SegnSanzyMartn, "permiten tener en cuenta, de modo simultneo, las distintas variables o las mltiples interrelaciones que pueden ser observadas en los documentos, o en los hbitos y necesidades de informacin de los usuarios".12Su examen se produce sobre la base del conteo de matrices de datos y la representacin de la coocurrencia de las variables comunes. La agrupacin de los indicadores bibliomtricos, segn esta clasificacin, vara en la literatura. Elcuadro 8muestra una tipologa a partir del criterio deSanzyMartn. Los indicadores de produccin y visibilidad se corresponden con los unidimensionales, aunque existen algunos indicadores de colaboracin que se integran al criterio anterior. Su examen y representacin depende, en la mayora de los casos, de anlisis multivariante que los subordinan a los multidimensionales.

DESARROLLO DE LOS INDICADORES BIBLIOMTRICOS EN LOS SISTEMAS DE INFORMACIN CIENTFICALos indicadores bibliomtricos han sido tan criticados como definitivos en la evaluacin cientfica. Por muchos aos, los indicadores bibliomtricos del antiguoInstitute for Information Science(ISI), ahoraThomson Reuters, han sido el recurso fundamental para la toma de decisiones en materia de polticas cientficas. El factor de impacto (FI) deEugene Garfield, fue el punto de partida de una avalancha de indicadores basados en el nmero de publicaciones y en el conteo de citas, a pesar de las crticas y sesgos.Seglenlos resume desde cuatro sesgos fundamentales:26,27- No muestra la diferencia de la citacin de los artculos en una revista. Estadsticamente no es una representacin estadstica de un artculo individual.- El FI de una revista no tiene en cuenta la calidad cientfica de los artculos.- Depende del comportamiento y desarrollo de la investigacin en las reas o campos cientfico. Los hbitos de citacin, la frecuencia y la dinmica son diferentes en los campos de investigacin.- Las tasas de citaciones de los artculos determina el FI de una revista y no viceversa.Los sesgos planteados porSeglenestn sustentados en que resulta inapropiado realizar comparaciones entre el nmero de citas generadas por diferentes campos cientficos, ya que el potencial de citacin puede variar significativamente de un campo a otro;26,30en otras palabras, diferentes campos cientficos poseen diferentes prcticas de citacin.31,32Otros criterios abordados en la literatura redundan en las diferencias en el impacto segn la tipologa de artculos publicados por las revistas. Por ejemplo, los artculos de revisin review son altamente citados, e influyen en el FI de una revista. La extensin de los artculos tambin puede influir o no en el promedio de citas por documento, as como en la preferencia idiomtica para referenciar artculos del mismo idioma por parte de los autores. El sesgo idiomtico y la cobertura incompleta respecto a la tipologa documental continan predominando en los sistemas de informacin cientfica.Las principales limitaciones sealadas al factor de impacto se refieren a la medicin de la cantidad y no de la calidad de los resultados de los trabajos publicados, la asignacin de iguales valores a todos los artculos, la influencia igualitaria de las citas en la totalidad de los trabajos en una muestra y la totalidad de las publicaciones las cuales no reflejan toda la actividad cientfica de un contexto determinado, factores a tener en cuenta en los procesos evaluativos de dominios cientficos.El desarrollo de indicadores bibliomtricos basados en el factor de impacto ha estado aparejado con la aparicin de competencias entre sistemas de informacin cientfica y sistemas derankings.Thomson ReutersyScopushan creado una gama de indicadores bibliomtricos que permiten la realizacin de anlisis cuantitativos y cualitativos de diferentes dominios cientficos, segn sea el objeto a medir; sin embargo, las propias limitaciones reflejadas por los especialistas en el tema han propiciado el desarrollo y el perfeccionamiento en su aplicacin. En este sentido, la calidad de un trabajo publicado no debe ser entendido como el conteo de las citas recibidas, aunque en este punto el supuesto trabajo ha transitado por un mtodo de evaluacin cientfica: la revisin por pares.La evaluacin por pares, contina siendo estudiada como mtodo o procedimiento llevado a efecto en la ciencia para evaluar la calidad de un artculo y por qu llega a ser publicado o no. Este punto tiene sus controversias tanto econmicas como subjetivas desde los procesos editoriales con el movimiento de acceso abierto a la informacin cientfica, acrecentado con la reciente inclusin de Scielo alThomson Reutersy los esfuerzo de Latindex por elevar la visibilidad e impacto a la produccin cientfica en Latinoamrica.33Lo cierto es que cantidad no es igual a calidad, pero ambas pueden complementarse segn los propsitos y alcances de un estudio bibliomtrico.La asignacin de iguales valores a la totalidad de los artculos en la metodologa bibliomtrica, es un elemento al que han aparecido alternativas matemticas con el surgimiento de los indicadores alternativos al factor de impacto.ScopusyThomson Reutersapuestan por modelaciones de indicadores bibliomtricos aplicados a revistas cientficas que utilizan la ponderacin matemtica, eliminan las autocitas y amplan el perodo de citacin; tal es el caso de los indicadores alternativos alfactor de impacto: ElEigenfactor (Eigen)y elScimago Journal Rank.33-36 A pesar de estas alternativas, permanece la limitacin referida al traslado del valor del indicador general de una revista a los artculos que la componen, si se tiene en cuenta que no todos los artculos contribuyen de forma similar al total de citas recibidas.37ElScimago Journal Rank (SJR),38es un indicador con acceso abierto, basado en los datos de la informacin cientfica indizada enScopus; toma las variables de las citas y los trabajo publicados de manera similar al factor de impacto, pero en este caso le asigna diferentes pesos a la citacin teniendo en cuenta el prestigio de la revista citante (estimado con el algoritmo delPage Rankde las revistas en la red) y elimina las autocitas.39,40Las ventajas del SJR frente al FI se refieren a la facilidad de acceso a los datos, mayor cobertura y variedad de tipologa documental, lenguaje y pases de las publicaciones.39Otros indicadores como elArticle influence score(Score) y elSource normalized impact per paper (SNIP)son utilizados porThomson ReutersyScopusen la bsqueda competitiva de nuevos anlisis cada vez ms normalizados, con el fin de disminuir los sesgos que los anlisis de citas introducen en los estudios bibliomtricos. ElScorese origina delEigenfactor; se define como la influencia media delEigene incluye la variable trabajos publicados.Article influencemide la influencia media de los artculos de las revistas y se basa en el mismo clculo iterativo queEigenfactor, pero teniendo en cuenta el nmero de artculos de la revista. Se asemeja ms al FI y SJR.37,41Por su parte, el SNIP se define como la razn del nmero de citaciones por artculo y la citacin potencial en un campo cientfico determinado. Desarrolla las nociones deEugene Garfieldsobre "citacin potencial", definido como la longitud media de las listas de referencias en un campo y la determinacin de la probabilidad de ser citado.Algunos estudios analizan este fenmeno para introducir y estudiar estos indicadores en evolucin. Han sido utilizados en revistas de diferentes campos cientficos y se ha demostrado el funcionamiento similar entre los indicadores bibliomtricos adquiridos porThomson Reuters(EigenfactoryArticle influence score) y los deScopusen la evaluacin bibliomtrica de revistas cientficas; as tambin la similitud entre el AIS y el FI al proveer similaresrankingsde revistas mdicas.38,42Se visualiza en estos casos la necesidad de complementar indicadores en determinados campos cientficos, teniendo en cuenta el rango de aos que utilizan y la cantidad de citas segn la variabilidad de las disciplinas cientficas.Los indicadores bibliomtricos basados en el FI deben ser normalizados, ponderados y relativizados necesariamente para disminuir los sesgos en comparaciones de revistas cientficas. La Bibliometra lleva ms de 40 aos contando con el factor de impacto y su evolucin se despliega a la bsqueda de normalizaciones para estudios de dominios con comportamientos cientficos diferentes. Resulta necesario para la interpretacin de los resultados de la medicin de indicadores bibliomtricos, los aspectos cualitativos que caracterizan un dominio cientfico o el campo cientfico sujeto a un estudio de este tipo. Esta situacin se presenta cuando la unidad de anlisis en la metodologa bibliomtrica pretende comparar produccin cientfica originada no solo de diferentes campos, sino de diferentes estructuras cientficas; por ejemplo: instituciones multidisciplinarias, regiones o pases y dentro de estos dominios los agregados deseados a comparar.De manera general, cuando la variablecitasinterviene en el clculo del impacto cientfico se introducen sesgos en la evaluacin bibliomtrica. Las crticas permanecen an vigentes: desde el punto de vista editorial, es conocida la manipulacin para aumentar dicho indicador, lo que proporciona, indica o sugiere, en los mejores casos, referenciar artculos de revistas prestigiosas. Esto, a su vez, se ha vuelto una estrategia para la publicacin de artculos y forma parte del "ABC" cuando los investigadores, profesores o acadmicos construyen un artculo cientfico, teniendo en cuenta que la citacin de artculos de autores prestigiosos y revistas influyentes puede incidir en el FI de la revista fuente.42,43El factor de impacto entendido como el promedio de citas por documentos, ya sea en dos o 5 aos, segn en el clculo es una medida en una distribucin no asimtrica; es decir, la distribucin del FI de una revista en ese perodo de tiempo no se corresponde con una distribucin normal, teniendo en cuenta la mencionada contribucin no equilibrada de cada artculo dentro de la propia revista. Es por eso que en la evolucin de la evaluacin de impacto cientfico est implcito el tratamiento matemtico. Se observan diferentes tendencias: ponderacin de las citas, ampliacin de los perodos para reflejar ms acertadamente la realidad del impacto, unos incluyen el nmero de publicaciones de las revistas, otros solo incluyen el conteo de citas.Lo anterior viene aparejado con la cobertura territorial, lingstica y de campos cientficos en ambas bases de datos multidisciplinarias.Thomson Reuters, por ser el iniciador de la indizacin automtica de citas, fue el ms criticado en la literatura; sin embargo, contina siendo una plataforma en constante desarrollo, selectiva en sus polticas de inclusin y tan utilizada comoScopus. Los nuevos indicadores mencionados, o tambin llamados ms recientemente indicadores bibliomtricos alternativos heredados del factor de impacto, se resumen en latabla.Sobre el uso de una u otra base de datos para estudios bibliomtricos de la produccin cientfica se ha demostrado lo siguiente:44-WoSno debe ser utilizado solamente para estudiar la citacin de un autor o trabajo publicado, ni como como nico recurso para anlisis de citas e impacto de un autor o publicacin.-ScopusyGoogle Scholarpueden ayudar a identificar un considerable nmero de citaciones que no se encuentran en elWoS, dado que ofrecen una imagen ms completa y abarcadora del carcter internacional e interdisciplinario de la comunicacin cientfica.- Se presenta la problemtica de las tcnicas de medicin de Google Scholar para analizar con precisin y eficacia las citas.- La utilizacin de uno u otro recurso para la medicin depende del dominio cientfico que se analice.- En el caso deScopusuna de las limitantes sealadas se refiere a la indizacin de las citas solamente de 1996.45Teniendo en cuenta estos criterios se han desarrollado estudios para comprobar la capacidad enWoSyScopusen cuanto al control de autoridades y su repercusin en la visibilidad e impacto de autores e instituciones. Persisten errores en los nombres de los autores, lo cual puede influir en el clculo del ndice h en ambas bases de datos como indicador incluido.46Por otra parte, se ha comprobado que no existen diferencias entre ambas fuentes de datos en cuanto a los datos de las publicaciones. Se encontr mejor representacin de la temtica en las categoras, as como las omisiones de datos de afiliacin de autores deScopus.ALTMETRICS O INDICADORES ALTERNATIVOS EN LA MEDICIN DEL IMPACTO DE LA INVESTIGACIN CIENTFICALos altmetrics o indicadores alternativos se refieren a las posibilidades de recuento en la Web social, exactamente a los "me gusta", deFacebook, favoritos compartidos,tweetspara evaluar la informacin cientfica.47De aparicin reciente, se definen como creacin y estudio de nuevos indicadores basados en la Web 2.0 para el anlisis de la actividad acadmica y considerados alternativos al medir formas no convencionales de la evaluacin de la actividad cientfica.47,48Las menciones en blogs, el nmero detweetso el de personas que guardan un artculo en un gestor de referencias como,Mendeley, puede ser una medida vlida del uso y la repercusin de las publicaciones cientficas. En este sentido, estas medidas se han situado en el centro del debate de los estudios bibliomtricos y han cobrado especial relevancia.48,49Un punto de partida es la Declaracin de San Francisco, la cual reconoce la necesidad de mejorar la forma en que se evalan los resultados de la investigacin cientfica y de fomentar un cambio hacia la evaluacin basada en el contenido cientfico del artculo en lugar de mtricas sobre la revista en que fue publicado.49El origen de estos indicadores se relaciona con la webmetra al tener en cuenta variables de medicin a sitiosonline, con lo que justifican mtodos y modelos bibliomtricos e informtricos al estudio de la informacin cientfica disponible en la web.2,48En la terminologa conceptual respecto a los indicadores alternativos, confluyen varias disciplinas cientficas, entre ellas la comunicacin, teniendo en cuenta las evidentes relaciones de comunicacin cientfica y el contenido hipertextual a travs de loslinks.El estudio del impacto de la informacin cientfica en la Web se extrapola a partir de la concepcin de la cita mediante el estudio delinks. La diferencia entre las citas y loslinksradica en la direccin manifiesta. La cita es unidireccional porque solo una publicacin anterior puede ser referenciada y recibir una cita por parte de otra publicada posteriormente y no de forma inversa. Las relaciones entre loslinksson de forma bidireccional por las caractersticas del contenido. El contexto o propsito que generan loslinksson totalmente diferentes a los que genera una cita o referencia; estas ltimas incluyen una relacin de responsabilidad con los contenidos del documento referenciado o citado, mientras que en loslinksesto no sucede.2,50Con el surgimiento de mltiples plataformas que permiten compartir de manera libre todo tipo de informacin y enlazarse a travs de la Web 2.0, la actividad cientfica y acadmica tambin se ha visto beneficiada: redes sociales acadmicas, gestores de referenciasonline, repositorios de acceso abierto e ndices de citas abiertos, comoGoogle ScholaryData Sharing, son tendencias que han permitido obtener mayor rendimiento de los recursos invertidos en la ciencia y mayor transparencia.51De cara a la medicin del impacto cientfico, las tcnicas webmtricas y las bibliomtricas experimentan una imbricacin, a partir de las crticas histricas del factor de impacto y con el surgimiento y desarrollo de los recientes productos del Google Acadmico. La fortaleza fundamental de los indicadores altmetrics radica en que ofrecen datos, casi a tiempo real, de la repercusin de un trabajo en diferentes niveles de agregacin. Las principales limitaciones se refieren a:- La difcil jerarquizacin de los indicadores, de cara a las variables a medir. En este sentido el ordenamiento en forma derankings, teniendo en cuenta la fuente o plataforma utilizada.- Algunos artculos cientficos apenas tienen impacto en las redes sociales; sin embargo, en otras fuentes como bases de datos e ndices de citasposeen resultados ms slidos.- Impacto cientficoversusimpacto social de la actividad cientfica.- Variabilidad de los indicadores altmetrics producto del surgimiento y permanencia de las fuentes, as como su validez, por lo que la informacin es efmera, lo que dificulta reproducir los resultados al mbito cientfico.A su vez, se han realizado taxonomas o clasificaciones de los indicadores altmetrics. Los criterios de clasificacin se basan en las plataformas para la medicin48y las variables a medir.52Aunque algunas de estas plataformas miden la reputacin de un investigador de forma individual, un grupo de colegas pueden ser el reflejo de una institucin. La reputacin de un investigador y la interaccin entre los grupos incide en suscore, pues no solo tiene en cuenta cmo los colegas contribuyen y evalan los trabajos sino tambin en quines son estas personas, lo cual significa que cuanto mayor sea la puntuacin de los que interactan, ms posibilidades de aumentar elRG Scorede un investigador y reflejar una posicin dentro de la comunidad cientfica.53CONSIDERACIONES FINALESLos indicadores bibliomtricos deben su surgimiento y evolucin a las particularidades de la produccin bibliogrfica, lo que permite el estudio del comportamiento de comunidades y disciplinas cientficas a travs de los resultados de las investigaciones.La literatura cientfica sobre indicadores bibliomtricos recoge amplia variedad de criterios y clasificaciones segn la bibliografa referenciada. Pueden ser utilizados desde los diferentes objetos de estudios de la Bibliometra como especialidad mtrica de la informacin. Se derivan de dos regularidades fundamentales: la produccin cientfica y la comunicacin cientfica, y estas, a su vez, originan tipologas agrupadas en la produccin, visibilidad e impacto, y colaboracin cientfica. La tipologa de los indicadores bibliomtricos resulta difusa en la literatura. Est en funcin del recuento, uso y relaciones de los elementos bibliogrficos, y fueron perfeccionndose a partir de la propia prctica de los procedimientos bibliomtricos. Los indicadores bibliomtricos basados en el factor de impacto y el nmero de citas han sido los ms polmicos en la literatura cientfica, cuyas causas estn centradas en la motivacin para la citacin, el peso de la cita de un artculo respecto al total de las citas que recibe la revista y el comportamiento de la citacin en diferentes reas temticas de la ciencia. Este fenmeno ha originado la evolucin hacia indicadores alternativos en los sistemas de informacin cientfica, para la evaluacin de la ciencia en revistas, instituciones y pases.El desarrollo y evolucin de los indicadores bibliomtricos ha estado inclinada a los indicadores derivados del factor de impacto en busca de normalizaciones para la comparacin entre campos cientficos. Los sistemas de informacin cientfica los incluye con el fin de minimizar sesgos en los estudios comparativos yrankingde dominios cientficos.Ms recientemente la Bibliometra se imbrica con el desarrollo de la Webmetra, y ha generado los llamados indicadores altmetrics para medir las formas no convencionales de la actividad cientfica y acadmica. Estos indicadores posibilitan medir, casi a tiempo real, el impacto cientfico a travs de la interaccin de los dominios en la Web 2.0.Los indicadores bibliomtricosofrecenen la actualidad perspectivas interesantes a partir de la posibilidad de su uso en la gestin y evaluacin de la investigacin, a niveles micro, meso y macro, especficamente en la seleccin de revistas para publicar resultados de la investigacin, gestionar proyectos de colaboracin, disear polticas cientficas y agendas de investigacin, entre otras.REFERENCIAS BIBLIOGRFICAS1. Martnez A. Estudios mtricos de la informacin: seleccin de lecturas. La Habana: Editorial "Flix Varela"; 2004.2. Gorbea Portal S. Modelo terico para el estudio mtrico de la informacin documental. Gijn, Espaa: Ediciones Trea; 2005.3. Egghe L, Rousseau R. Introduction to informetrics: Quantitative methods in library, documentation and information science. New York: Elsevier Science Publishers; 1990.4. Pritchard A. Statistical bibliography or bibliometrics? J Document. 1969;25(4):348-9.5. Blatt Oldira ML. Producao Cientfica em Biblioteconoma no estado de Santa Catarina. Transinformacao. 1997;9(3):68-87.6. Macas-Chapula CA. Papel de la informetra y de la cienciometra y su perspectiva nacional e internacional. So Paulo: Seminario sobre Evaluacin de la Produccin Cientfica; 1998.7. Leydesdorff L. The evaluation of research and the evolution of science indicators. Studies in Science of Science. 2004;22(3):225-32.8. Moed HF, Burger WJ, Frankfort JG, Van Raan AF. The use of bibliometric data for the measurement of university research performance. Res Pol. 1985;14:131-49.9. Hernndez-Sampieri R, Fernndez-Collado C, Baptista-Lucio P. Metodologa de la Investigacin. Mxico: McGraW-Hill; 2006.10. Licea De Arenas J. Indicadores de la actividad cientfica Scientometrics indicators. Cienc Inform. 1993;24(1):2-6.11. Maltrs B. Los indicadores bibliomtricos: fundamentos y aplicacion al anlisis de la ciencia. Gijn, Espaa: TREA, S. L.; 2003.12. Sanz Casado E, Martn Moreno C. Aplicacin de tcnicas bibliomtricas a la gestin bibliotecaria. Invest Bibliotecol. 1998;12(24):24-40.13. Iribarren Maestro I. Produccin cientfica y visibilidad de los investigadores de la Universidad Carlos III de Madrid en las bases de datos del ISI, 1997-2003 [Tesis Doctoral]. Getafe: Universidad Carlos III de Madrid; 2006.14.Arencibia-Jorge R, de Moya-Anegn F. La evaluacin de la investigacin cientfica: una aproximacin terica desde la cienciometra. Acimed. 2008[citado12 de marzo de 2014];17(4). Disponible en:http://scielo.sld.cu/scielo.php?script=sci_arttext&pid=S1024-9435200800040000415. Elizagaray Fernndez B. Ciencias sociales en Cuba: anlisis mtrico de la produccin cientfica en el perodo 2000-2008 a partir de la base de datos Cubaciencia [Trabajo de Diploma]. La Habana: Universidad de La Habana; 2010.16. Sancho-Lozano R. Indicadores bibliomtricos utilizados en la evaluacin de la ciencia y la tecnologa. Revisin Bibliogrfica. Rev Esp Docum Cient. 1992;13(34):842-65.17.Scheneider JW. Concept symbols revisited: Namish clusters by parsing and filtering of nouns phrases from citation contexts of symbols. Scienciometrics. 2006[citado12 de marzo de 2014];68(3). Disponible en:http://www.akademiai.com/doi/abs/10.1007/s11192-006-0131-z18. Lpez Piero JM, Terrada ML. Los indicadores bibliomtricos y la evaluacin de la actividad mdico-cientfica (I). Usos y abusos de la bibliometra. Med Clin. 1992;98:64-8.19. Callon M, Courtial JP, Penan H. Cienciometra. El estudio cuantitativo de la actividad cientfica: de la bibliometra a la vigilancia tecnolgica. Gijn, Espaa: Ediciones TREA; 1995.20. Bordons M, Zulueta M. Evaluacin de la actividad cientfica a travs de indicadores bibliomtricos. Rev Esp Cardiol. 1999;52(10):790-800.21. Camps D. Limitaciones de los indicadores bibliomtricos en la evaluacin de la actividad cientfica biomdica. Colomb Med. 2008:74-9.22. Cabezas-Clavijo . Estudio bibliomtrico de la produccin, la actividad y la colaboracin cientfica en grupos de investigacin: el caso de la Universidad de Murcia [Tesis Doctoral]. Granada, Espaa: Universidad de Granada; 2013.23. Torres-Salinas D. Diseo de un sistema de informacin y evaluacin cientfica. Anlisis ciencimtrico de la actividad investigadora de la Universidad de Navarra en el rea de ciencias de la salud. 1999-2005. Granada, Espaa: Universidad de Granada; 2007.24. de Moya-Anegn F, Sols Cabrera FM. Indicadores bibliomtricos de la produccin cientfica de Andaluca: Junta de Andaluca, Consejera de Innovacin, Ciencia y Empresa; 2005.25. Van Raan AFJ. Measurement of Central Aspects of Scientific Research: Performance, Interdisciplinarity, Structure. Measurement. 2005:1-19.26. Seglen PO. Why the impact factor of journals should not be used for evaluating research. Brit Med J. 1997;314:498-502.27. Garfield E. Citation indexing. Its theory and application in science, technology and humanities. New York: Wiley; 1979.28. Garfield E. The use of journal impact factors and citation analysis for evaluation of science. Cell Separation, Hematology and Journal Citation Analysis. Mini Symposium in tribute to Arne Byum Cell Separation. Rikshospitalet, Oslo: The Scientist; 1998.29. Garfield E. Journal impact factor: a brief review. Canadian Medical Association Journal. 1999;161(8):979-80.30. Aleixandre-Benavent R, Valderrama-Zurin JC, Gonzlez-Alcaide G. El factor de impacto de las revistas cientficas: limitaciones e indicadores alternativos. El profesional de la informacin. 2007;16(1):4-11.31. Waltman L, van Eck NJ. Source normalized indicators of citation impact: an overview of different approaches and an empirical comparison. Scientometrics. 2013;2013(96):699-716.32. Baiget T, Castro P, Aguillo I, Tramullas J. Editoriales OA estafadoras y sin escrpulos. Indicadores en Ciencia y Tecnologa. 2013 [citado 12 de marzo de 2014]Disponible en:https://digitum.um.es/jspui/handle/10201/3653633. Why eigenfactor. 2014 [citado 10 de marzo de 2014]. Disponible en:http://www.eigenfactor.org/whyeigenfactor.php34. Grupo Scimago. Scimago Journal & Country Rank: About us. 2014 [citado 10 de marzo de 2014]. Disponible en:http://www.scimagojr.com/aboutus.php35. Bergstrom CT. Eigenfactor measuring the value and prestige of scholarly journals. Colege & Research Libraries News. 2007:314-6.36. Bergstrom CT, West JD, Wiseman MA. The Eigenfactor metrics. J Neurosc. 2008:11433-4.37. Torres-Salinas D, Jimnez-Contreras E. Introduccin y estudio comparativo de los nuevos indicadores de citacin sobre revistas cientficas en Journal Citation Reports y Scopus. El profesional de la informacin. 2010;19(2):201-7.38. SJR. SCImago Journal & Country Rank. 2014 [citado 31 de mayo de 2014]; Disponible en:http://www.scimagojr.com/journalsearch.php?q=5100155014&tip=sid&clean=039.Falagas ME, Kouranos VD, Arencibia-Jorge R, Karageorgopoulos DE. Comparison of SCImago Journal Rank indicator with journal impact factor. The FASEB Journal. 2008;22:2623-8.40. Richardson M, Domingos P. The intelligent surfer: probabilistic combination of link and content information in PageRank. 2002 [citado 10 de marzo de 2014]. Disponible en:http://homes.cs.washington.edu/~pedrod/papers/nips01b.pdf41. Rizkallah J, Sin DD. Integrative approach to quality assessment of medical journals using impact factor, Eigenfactor and article influence. Scores PLoS ONE. 2010;5(4). e10204.42. Nader Ale E, Hadi S, Mohamed Amin E, Farid Habibi T, Hossein G, Seyed Mohammad M, et al. Effective strategies for increasing citation frequency. Internat Educ Stud. 2013;6(11):93-9.43. Vanclay JK. Factors affecting citation rates in environmental science. J Informetr. 2013:265-71.44. Yang K, Meho LI. Citation analysis: a comparison of Google Scholar, Scopus, and Web of Science. Austin, EE.UU. 69th Annual Meeting of the American Society for Information Science and Technology (ASIST); 2006.45. Jacso P. Calculating the h-index and other bibliometric and scientometric indicators from Google Scholar with the Publish or Perish software. Online Inf Rev. 2009;33(6):1189-2000.46. Jacso P. Savvy searching: software issues related to cited references. Online Inf Rev. 2007;31(6):892-905.47. Borrego . Altmetrics: nuevas formas de medir el impacto de la investigacin blok de bid. Barcelona, Espaa: Facultat de Biblioteconomia i Documentaci; 2013.48. Torres-Salinas D, Cabezas-Clavijo , Jimnez-Contreras E. Altmetrics: nuevos indicadores para la comunicacin cientfica en la Web 2.0. Comunicar. 2013;XXI(41):53-60.49. Declaracin de San Francisco de Evaluacin de la Investigacin. Rev Cubana Salud Pblica. 2014 [citado 4 de marzo de 2015];40(1). Disponible en:http://www.bvs.sld.cu/revistas/spu/vol40_1_14/spu17114.htm50. Chu H, He S, Thelwall M. Library and information science schools in Canada and USA: A Webometric Perspective. J Educ Libr Inform Sci. 2002;43(2):110-25.51. Torres-Salinas D, Robinson-Garca N, Cabezas-Clavijo . Compartir los datos de investigacin en ciencia: introduccin al data sharing. El profesional de la informacin. 2012;21(2):173-84.52. PlumX. Current List of metrics. 2014 [citado 4 de marzo de 2015]. Disponible en:http://www.plumanalytics.com/metrics.html53. RG Score. A new way to measure scientific reputation. 2014 [citado 25 de marzo de 2015]. Disponible en:https://www.researchgate.net/publicprofile.RGScoreFAQ.html