CIPECC - Analisis-Citaciones vs. Lecturas Analisis-Citaciones vs. Lecturas ¿Existe relación entre las citaciones y las lecturas a un artículo publicado.

Presentación del tema: "CIPECC - Analisis-Citaciones vs. Lecturas Analisis-Citaciones vs. Lecturas ¿Existe relación entre las citaciones y las lecturas a un artículo publicado."— Transcripción de la presentación:

1 CIPECC - Analisis-Citaciones vs. Lecturas Analisis-Citaciones vs. Lecturas ¿Existe relación entre las citaciones y las lecturas a un artículo publicado online en acceso abierto? II Conferência Ibero-Americana de Publicações Eletrônicas no Contexto da Comunicação Científica - CIPECC 2008 Rio de Janeiro - 17 a 21 de Novembro 2008 Ernesto Spinak spinaker@adinet.com.uy

2 CIPECC - Analisis-Citaciones vs. Lecturas Objetivo:Análisis de relación entre citaciones y patrones de lectura MuestraArtículos de dos revistas SciELO indizadas en Web of Science y Scholar Google en un período mayor a 5 años ConclusiónNo se percibe correlación Problemas Dificultades para obtener estadísticas en GS Falta de una teoría coherente

3 CIPECC - Analisis-Citaciones vs. Lecturas INTRODUCCIÓN Ernesto Spinak spinaker@adinet.com.uy

4 CIPECC - Analisis-Citaciones vs. Lecturas Las citaciones de la literatura científica han sido objeto de estudio por casi 40 años, las que fueron clasificadas taxonómicamente por su función y motivos Se desarrollaron metodologías para su contabilización, su obsolescencia, su impacto, etc., lo que dio lugar a la disciplina de la cienciometría y bibliometría que se llama análisis de citaciones Los factores de impacto han sido usados como variables proxy para medir la calidad, prestigio, influencia, importancia, popularidad, etc., de la fuente respecto al ámbito intelectual en el que opera y publica su información.

5 CIPECC - Analisis-Citaciones vs. Lecturas El problema de la definición de los términos es fundamental cuando se quiere determinar lo que se está midiendo y la validez de las conclusiones. ¿Qué significa importancia, influencia, popularidad …? ¿Se estará usando la herramienta adecuada para medir ese concepto, o se usa solamente porque no se dispone de otra? If all you have is a hammer, everything looks like a nail.

6 CIPECC - Analisis-Citaciones vs. Lecturas “los autores citan a ciertas obras pero la gente pide fotocopias y lee otras” Maurice Line Director General de la British Library editor Interlending and Document Supply Preguntas: Qué cosas miden unas y otras estadísticas respecto a importancia, influencia, popularidad Cómo afecta al patrón de lecturas de un documento, y con qué rapidez, el hecho de haber sido recientemente publicado, (¿inmediatez?)

7 CIPECC - Analisis-Citaciones vs. Lecturas Otras interrogantes – el efecto Slashdot Cuales son los efectos secundarios o residuales que se agregan a la vida {citada | leída} de un documento, por haber sido recientemente citado, o ingresado a una base de datos de acceso público. Cada vez que un documento es vuelto a citar por una tercera publicación, produce un efecto secundario de propagación, que con el tiempo se va agotando (obsolescencia o vida media útil). En Internet este concepto, generalizado a cualquier tipo de documento, se llama “efecto Slashdot” Se presume que hay una retroalimentación medible entre citación y descargas. Tanto las citaciones como las descargas se van aplanando o convergiendo a cero, lo que da la suma total de citaciones en su vida, así como la suma total de hits / downloads en su vida.

8 CIPECC - Analisis-Citaciones vs. Lecturas Vida útil (Brookes, 1974) analiza la vida de un documento como una función de utilidad midiendo el total de sus usos (citaciones, lecturas). La utilidad total de un documento = U, es la sumatoria de todos los usos que recibe un ítem a lo largo de su existencia, valor que va disminuyendo a lo largo del tiempo, llamado valor residual. La tasa de envejecimiento no es igual a lo largo del tiempo ni es la misma para diferentes disciplinas. Tomando en cuenta el intervalo de tiempo entre que un documento es publicado y comienza a ser {leído | citado}, y que las sucesivas citaciones podrían modificar los valores de lectura, la curva se asemeja a una hipérbola inversa dentada, con picos menores a lo largo del tiempo. Las gráficas siguientes, tomadas de The Slashdot Effect Internet Paper (Adler, 2000)

9 CIPECC - Analisis-Citaciones vs. Lecturas

10 las conjeturas pueden dividirse en varias preguntas ¿ Existe correlación entre las citaciones online de artículos de revistas científicas y las visitas/descargas? ¿Existe un efecto Slashdot en las publicaciones científicas online? ¿Influye en esta correlación el hecho de que esos artículos estén indizados en índices de citaciones tales como el WoS? ¿Influye en las citaciones y/o lecturas el hecho de que esos artículos estén indizados en buscadores generales o especializados, tales como Google, Yahoo!, Google Scholar, etc.?

11 CIPECC - Analisis-Citaciones vs. Lecturas las conjeturas pueden dividirse en varias preguntas ¿Existirán pautas de lectura, así como existen indicadores de citaciones? ¿Estas pautas serán diferentes si son revistas mainstream o revistas secundarias? Si estos indicadores son {homólogos | diferentes}, ¿será posible proponer una explicación o teoría que dé cuenta de la {similitud | diferencia} de esos comportamientos?

12 CIPECC - Analisis-Citaciones vs. Lecturas METODOS Ernesto Spinak spinaker@adinet.com.uy

13 CIPECC - Analisis-Citaciones vs. Lecturas criterios de selección de la revista Publicación electrónica con suficientes años antes del experimento, publicado una cantidad sustantiva de artículos. frecuencia de por lo menos seis números al año. archivos de actividad (log files) por lo menos cinco años continuados; accesos (hits) de cierta magnitud y consistencia que revelara que es leída y citada a lo largo del tiempo. Acceso abierto al texto completo de los artículos indizada en el Web of Science del ISI. indizada por Google Scholar. Revistas seleccionadas Brazilian Journal of Medical and Biological Research (BJMBR), http://www.scielo.br/scielo.php?script=sci_serial&pid=0100-879X&lng=es&nrm=iso http://www.scielo.br/scielo.php?script=sci_serial&pid=0100-879X&lng=es&nrm=iso Revista de Saúde Pública (RSP), http://www.scielo.br/scielo.php?script=sci_serial&pid=0034-8910&lng=en&nrm=iso

14 CIPECC - Analisis-Citaciones vs. Lecturas

15 Todas las consultas online para SciELO, GS y WoS fueron realizadas entre abril y agosto de 2007 Los datos se ordenaron en ránking descendente de acuerdo al siguiente algoritmo: Max(citas(Sci)|citas(GS)), citas(WoS), #hits De la lista ordenada se seleccionaron los primeros 10 artículos de BJMBR y los 9 primeros de RSP (ver articulos)ver articulos

16 CIPECC - Analisis-Citaciones vs. Lecturas BJMBR

17 CIPECC - Analisis-Citaciones vs. Lecturas RSP

18 CIPECC - Analisis-Citaciones vs. Lecturas RESULTADOS Ernesto Spinak spinaker@adinet.com.uy

19 CIPECC - Analisis-Citaciones vs. Lecturas No se percibe relación entre las lecturas y las citaciones No se percibe efecto slashdot, ni a nivel individual de artículos ni en agregado. Tendencias de lectura son diferentes para las diferentes revistas. Downloads y citaciones tienen diferentes patrones de obsolescencia. Cuando aumenta la antigüedad, la distribución de downloads no siempre se aproxima a la distribución de citaciones. La tendencia de lectura de RSP es estática la mayor parte del tiempo (propio de una comunidad cerrada y cautiva)

20 CIPECC - Analisis-Citaciones vs. Lecturas Problemas que se presentan al recopilar los datos Definir qué ese considera como lectura: –¿es lo mismo acceso al resumen (abstract) que al texto completo? –¿es lo mismo download del documento que el hit (eventualmente lectura en pantalla)? –Diferentes visitas de una misma IP contabiliza diferentes lecturas (¿forma de navegación?) –algoritmo que usa GS tiene ambigüedades Resultados de GS no son estables; varían periódicamente como resultado del recorrido de los robots y la reindización. WoS ingresa las citaciones por autor y GS por título (doficultad de consolidar las cifras)

21 CIPECC - Analisis-Citaciones vs. Lecturas Citationes de Google Scholar GS consolida en una referencia todos los sitios (URLs) que contienen copias del mismo documento original, all # versions Problemas: en algunos casos las diferentes copias de un mismo artículo citante se resuelve en varias direcciones, pero no son consolidadas y aparecen como más de una fuente. –caso por error del algoritmo, –caso de artículo publicado en más de un idioma, cuyas URLs difieren –se agrava en publicaciones o citaciones en alfabetos no latinos,

22 CIPECC - Analisis-Citaciones vs. Lecturas Google informa 20 citaciones, pero solo entrega 19... ¿  ? Aparecen duplicadas tres fuentes (vea tabla).vea tabla La cuenta original da 19 citaciones, cuando en realidad son solamente 16 documentos diferentes que lo están citando Citaciones en Chino tienen duplicaciones que solo se resuelven por control manual haciendo traducción (vea tabla)vea tabla BJMBR - vol 35 no.5 May 2002 HitsSciGSWoS 000500003 Antioxidant properties of natural compounds used in popular medicine for gastric ulcers. -- Repetto, M.G.; Llesuy, S.F. 4442116 (19/20) 21 Results 1 - 19 of about 20 citing Repetto: Antioxidant properties of … ulcers. (0.05 seconds)

23 CIPECC - Analisis-Citaciones vs. Lecturas DISCUSION Ernesto Spinak spinaker@adinet.com.uy

24 CIPECC - Analisis-Citaciones vs. Lecturas Los autores de artículos científicos son un subconjunto de los lectores  tienen comportamientos similares. No se percibe relación entre visitas y citaciones a los artículos, ni tampoco el efecto slashdot. Hay estudios sobre la sociología de las citaciones pero no hay análisis comparativo de la sociología de lectura de artículos científicos

25 CIPECC - Analisis-Citaciones vs. Lecturas Razones posibles por las diferencias de resultados Razones de definición de los términos (impacto, relevancia, visibilidad). –¿Qué significan en lecturas, se miden igual? Razones propias de la teoría del análisis de citaciones. –Teoría del análisis de citaciones concuerda con mainstream –Revistas marginales quedan fuera de los estudios –No se dispone de teoría que explique revistas de clase media –No hay teoria para revistas en Internet, pese a mayor visibilidad y facilidad de acceso. Razones instrumentales. –¿Varían los resultados para preríodos extensos de tiempo? –¿Serán iguales los comportamientos de lectura para revistas de pago y revistas open access? Razones del comportamiento de los agentes citantes y lectores. –Comportamiento de lectores es afectado por visibilidad y márketing –¿Citaciones son afectadas por esos mismos parámetros?

26 CIPECC - Analisis-Citaciones vs. Lecturas Trabajos futuros Distinguir en las cifras de lecturas (hits) entre abstract y artículo completo, hit y download. Consolidar las cifras del logfile por URL del visitante de manera de considerar como “una-lectura” a las múltiples visitas. Prolongar la serie de tiempo hasta 10 años para determinar la vida-media útil de la lectura de artículos. Determinar el lag-time de citación para las revistas de “clase media” y asociarlo al lag-time de publicación.

27 CIPECC - Analisis-Citaciones vs. Lecturas - Weinstock, M. (1971). Citation indexes. En: Encyclopedia of Library and Information Science. New York: Dekker; vol.5. pp.16-40. - Wallace, D.P. (1986). The relationship between journal productivity and obsolescence. Journal of the American Society for Information Science, 37(3):136-45. - Spinak, E (1996). Diccionario enciclopédico de bibliometría, cienciometría e informetría. -- Caracas; Colima : Unesco. 240p - Rousseau, R.; Spinak, E. (1996). Do a field list of internationally visible journals and their journal impact factors depend on the initial set of journals? A research proposal. Journal of Documentation 52(4):449-56. - Price, D. deSolla, (1970). Citation measures of hard science, soft science, technology and non-science. En: Nelson, C.C.; Pollock, D.E., editores. Communication among scientists and engineers. Lexington, Mass: D.C. Health and Co. p.2-22 - Pereira, J.C. (2006). Revista de Saúde Pública: forty years of Brazilian scientific production. Revista de Saúde Pública, 40(N esp) [consulta: 14 diciembre 2007] - Murugesan, P.; Moravcsik, M.J. (1978) Variation of the nature of citation measures with journals and scientific specialties. Journal of the American Society for Information Science, 29(3):141-7. - Moed, HF (2005). Statistical relationships between downloads and citations as the level of individual documents within a single journal. Journal of the American Society for Information Science, 56(10):1088-97. - Line, M.B. (1979). The influence of the type of sources used on the result of citation analyses. Journal of Documentation, 35(4):265-284. - Line, M.B. (1978). Rank lists based on citations and library uses as indicators of journal usage in individual libraries. Collection Management, 2(4):313-16. - Line, M.B. (1977). On the irrelevance of citation analysis to practical librarianship. En: EURIM II: an European conferece on the application on research in information sciences in libraries: W.E. Batten (ed.), Aslib, 51-3. - Kurtz, M.J. et al (2004). The bibliometric properties of article readership information. Journal of the American Society for Information Science, 52(2):111-28. - Griffitth, B.C. [et al] (1979). The aging of scientific literature: a citation analysis. Journal of Documentation, 35(3):179-96. - Garfield, E. (1979). Is citation analysis a legitimate evaluation tool? Scientometrics, 1(4):359-75. - Brookes, B.C. (1970b). The growth, utility, and obsolescence of scientific periodical literature. Journal of Documentation, 26:283-94. - Brookes, B.C. (1970a). Obsolescence of special library periodicals: sampling errors and utility contours. Journal of the American Society for Information Science, 21:320-9. - Bottle, R.T.; Gong, Y.T. (1987). A bibliometric study on the ageing and content typology relationship of the biomedical literature. Journal of Information Science, 13:59-63. - Bollen, J. et al (2005). Toward alternative metrics of journal impact: a comparison of download and citation data. Information Processing and Management, 41(6):1419-40. - Adler, S. (2000b). Addendum to The Slashdot Effect Internet Paper. [consulta: 22 julio 2007] BIBLIOGRAFIA - Adler, S. (2000a). The Slashdot Effect: an analysis of three Internet publications. [consulta: 22 julio 2007]

28 CIPECC - Analisis-Citaciones vs. Lecturas GRACIAS II Conferência Ibero-Americana de Publicações Eletrônicas no Contexto da Comunicação Científica - CIPECC 2008 Rio de Janeiro - 17 a 21 de Novembro 2008 Ernesto Spinak spinaker@adinet.com.uy