Un programa nacional de Información y los indicadores de producción e impacto

1. Un programa nacional de Información y los indicadores de producción e impacto Anna María Prat CONICYT-Chile

2. Informar resultados • Someter ideas y resultados al juicio de pares • Asegurar la prioridad del descubrimiento • Acumular conocimiento para usos futuros

3. La Comunicación Científica • La culminación de un proceso • De investigación, • De discusión, • De financiamiento, • De evaluación por pares • El inicio de un proceso • De premios y sanciones, • De búsqueda de visibilidad, • De permanencia

4. Producto de las actividades de investigación • El objetivo básico de la actividad de investigación es la creación de nuevo conocimiento o de nuevos productos y servicios. • El "producto" (output) de la actividad, adquiere diferentes formas y varía según cada disciplina: • Artículos en revistas científicas, libros, presentaciones a congresos, y todo tipo de publicaciones en general. • Patentes y otros productos relacionados con la posibilidad de aplicación y transferencia del conocimiento • Según la disciplina, diseños, desarrollo de software, material multimedia, y otros. • El producto de la actividad es, generalmente, cuantificable.

5. Resultados de las actividades de investigación • Además de los productos cuantificables, existen lo que se denomina "resultados" o "efectos" (outcomes) de la investigación: • Producción de graduados de alta calidad • Innovaciones tecnológicas • Ampliación de la capacidad de servicios de consultoría, servicios de investigación a contrata • Relaciones internacionales con potencialidad de intercambio, acceso a resultados, participación en redes, etc. • Es difícilmente cuantificable, requiere definir criterios de medición y evaluación

6. ¿Qué se mide al evaluar resultados de I+D? • Producción. Número de publicaciones individuales o de un grupo de investigación • Productividad. Número de publicaciones según la capacidad de investigación del grupo (generalmente relación con el número de JCE dedicadas a investigación, o cantidad de recursos invertidos) • Impacto. Número de veces que un trabajo es citado en las revistas incluidas en el WoS del ISI. Impacto NO es equivalente a calidad.

7. Consideraciones para la selección de bases y criterios • Tipos de literatura y otros productos a considerar, según cada disciplina • Evaluación de la base de información sobre la cual trabajar. WoS, Bases nacionales reconocidas, ¿otras según área disciplinaria? • Complementación de los indicadores bibliométricos con otros indicadores de I+D nacionales e internacionales • La perspectiva, nacional, disciplinaria e institucional

8. La corriente principal • Hoy se publican, en todo el mundo, más de 200.000 revistas de carácter científico. • Aplicando la Ley de Bradford: 150 revistas dan cuenta de la mitad de lo que se cita y un cuarto de lo que se publica • Un núcleo de aproximadamente 2000 revistas cubren el 85% de los artículos publicados y un 95% de los artículos citados • Hoy se considera “corriente principal” las revistas incluidas en bases de datos de ISI

9. Contenido de ISI • Número aproximado, por año, de títulos en las bases de datos de ISI: • Science Citation Index Expanded: 5.600 • Social Science Citation Index: 1.800 • Arts & Humanities Citation Index: 1.200 • Número aproximado de la llamada "corriente principal" en todas las áreas: 8.700 • Anualmente se revisan más de 2000 títulos para ser incorporados y se revisan los existentes para ser borrados

10. Elementos para evaluación • Cumplimiento de la periodicidad • Cumplimiento de normas editoriales internacionales que aseguren su recuperación: • Título informativo de la revista • Títulos, resúmenes y palabras clave de los artículos en inglés además de su idioma original • Referencias completas • Identificación de los autores y su filiación • Procesos de revisión por pares

11. Elementos para la evaluación • Alcance del tema y cobertura geográfica de la revista • Evaluación de las citas recibidas por la revista, sus autores y los miembros del comité editorial: Número de artículos, impacto e inmediatez • Relación de autocitas • Disponibilidad • Las revistas a ser incluidas son “observadas” por períodos de 2 a 3 años

12. Revistas Latinoamericanas en ISI

13. ¿Para qué entrar al ISI? • Prestigio. Entrar al club exclusivo de la "corriente principal" • Calidad reconocida internacionalmente (aunque se sabe que no todas las publicaciones de calidad están incorporadas) • Medida de calidad usada en sistemas de evaluación a nivel nacional e internacional

14. ¿Cómo se comunica en Chile? • En las ciencias exactas casi exclusivamente en revistas de corriente principal • En las ciencias naturales a través de revistas de corriente principal y revistas nacionales • En las ciencias aplicadas, mayoritariamente a través de revistas nacionales • En las ciencias sociales y humanas, casi exclusivamente en revistas nacionales

15. El porqué de una Revista en Chile • Dar a conocer resultados de investigación en un área o disciplina determinada • Apoyar la docencia y la difusión de conoci-miento en áreas determinadas • Difundir el quehacer de una unidad académica • Publicar trabajos no aceptados en otras revistas de mayor calidad • Servir de moneda de canje para obtener otras publicaciones similares

16. Algunos problemas para publicar en el país • Editores de buena voluntad • Número de autores para lograr una periodicidad mínima permanente • Pocos controles de calidad estrictos (comités editoriales que funcionen, sistemas de evaluación por pares) • Financiamiento estable • Tiraje • Distribución y sus costos • Almacenamiento

17. La realidad de las revistas científicas nacionales • En el país se publican aproximadamente 500 revistas "académicas", de las cuales un buen numero pueden ser consideradas buenas • Algunas, en la actualidad 11, están incorporadas en la "corriente principal" • Otras, a pesar de su calidad, nunca serán incorporadas debido a diferentes circunstancias • Muchas luchan por sobrevivir • Algunas deberían desaparecer

18. Algunas consideraciones • En muchos casos solo se consideran las publicaciones en revistas de corriente principal para la evaluación • En muchas áreas del conocimiento necesitamos buenas revistas nacionales • Necesitamos sistemas rigurosos para medir la calidad de éstas publicaciones • Es necesario fomentar políticas de edición en las universidades, sociedades científicas y otras instituciones de investigación • Deberíamos tener menos revistas, pero de calidad, y éstas necesitan apoyo

19. Objetivos de la política nacional de edición científica • Mantener publicaciones nacionales en áreas específicas • Mantener un alto nivel de calidad en las publicaciones nacionales • Promover su visibilidad en la comunidad científica internacional • Generar indicadores de producción complementarios a ISI. Una "corriente principal nacional" • Apoyar el libre acceso a la información producida a nivel nacional. "Open Access"

20. Programas para el fomento de la edición científica • Fondo Nacional de Edición Científica • Talleres para editores científicos • Red Internacional del ISSN y Base de Datos nacional de publicaciones seriadas • Participación en Latindex. Indice y Catálogo • Participación en SciELO. Red Regional de Revistas Científicas Electrónicas • Pautas nacionales para la evaluación de publicaciones. • Normas nacionales para publicaciones en serie y difusión de las internacionales

21. Programa de edición electrónica • Iniciado en 1998. Incluyó dos líneas: • Programa piloto para edición electrónica de una revista científica de alta calidad sólo en formato electrónico: Electronic Journal of Biotechnology. P. Universidad Católica de Valparaíso. El 2001 fue incorporada a ISI. • Creación de una biblioteca científica electrónica traspasando a formato electrónico revistas de alta calidad existentes en papel. Se adopta metodología SciELO

22. Programa de edición electrónica • SciELO-Chile se inicia en 1999 con la plataforma y metodología de BIREME-FAPESP • Principales objetivos: • Facilitar la visibilidad y accesibilidad de las revistas chilenas • Definir normas y criterios de evaluación para posicionar SciELO como medida de calidad • Ayudar a definir políticas editoriales en universidades, instituciones de investigación y sociedades científicas • Comprometerse con la iniciativa "Open Access"

23. SciELO-Chile • En la actualidad: • 45 revistas texto completo (muchas a partir de 1997) • Más de 7.600 artículos y 500 números • 600.000 visitas mensuales • 4 nuevas revistas chilenas incorporadas a ISI • Aceptado como herramienta de medicion para el Aporte Fiscal a las universidades • Se inició la transferencia de la plataforma a las universidades para la edición de sus propias publicaciones

24. ¿Qué sucede hoy en el mundo? • Monopolio y alto costo de las publicaciones científicas • Nuevas tecnologías disponibles • Nuevas formas de comunicación • Iniciativa de “acceso abierto” , Open Acces: Archivos de pre impresos Revistas de acceso gratuito, bancos de publicaciones, etc. • Nuevas formas de evaluación y definición de "revista científica" • Royal Society • ICSU, AAAS, UNESCO

25. CONICYT y las muchas dimensiones de la información • La información científica como insumo de la investigación y desarrollo • La comunicación científica como resultado de la actividad de I+D • La información científica como base de estudios y análisis de tendencias de la I+D • La información como indicador de la actividad de I+D para orientar las políticas nacionales

26. Un programa nacional de información • Que asegure el acceso a la información científica mundial, en forma equitativa, a todos los grupos de investigación del país • Que muestre la información generada en Chile, dé visibilidad a las revistas nacionales y las vincule con el resto del mundo • Que permita conocer, valorar y medir la actividad científica nacional y mejorar los procesos de gestión • Que aplique tecnologías emergentes para llevar a cabo análisis más complejos sobre la producción científica nacional

27. CINCEL SciELO SICTI OBSERVATORIO DE CYT Medición y evaluación del sistema Acceso a la información científica internacional Acceso a la información nacional Acceso a la información del sistema chileno de C&T Componentes del sistema de información científica.

28. El acceso a la información internacional • Creación de CINCEL, Consorcio para la adquisición de información científica electrónica. Participan 25 universidades con aporte fiscal y se ampliará próximamente a las privadas. • Primera fase: Suscripción conjunta del Web of Science de ISI • Segunda fase definición de un Programa Nacional de Acceso con tres subprogramas: Estudios de colecciones base, adquisición de textos completos, entrenamiento. Proyecto aprobado para este año.

29. El porqué del Web of Science • Base de datos altamente selectiva con características de búsqueda propias • De muy alto costo. Ninguna institución, por sí sola podía suscribirla • Indispensable para estudios de producción y productividad. Base de cálculo del Aporte Fiscal a las universidades • Base de producción de indicadores para la carrera docente en muchas instituciones

30. El acceso y visibilidad de la información generada en Chile • Programa SciELO Chile para la edición electrónica de revistas científicas publicadas en el país • Actualmente 45 revistas a texto completo, la mayoría desde 1997 hasta la fecha • Programa de identificación y evaluación permanente de las revistas nacionales • Sistema propio de indicadores para medir producción, impacto, co autorías • Base de datos incorporada

31. Criterios de evaluación • Aspectos formales (basado en Latindex) • Características básicas • Características de presentación de la revista • Características de gestión y política editorial • Características de los contenidos • Evaluación de contenido por pares • Últimos dos años de la revista • Se envía a tres especialistas • Evaluación permanente de la calidad. Medición de visitas, citas e impacto

32. SciELO y los indicadores • SciELO incluye un módulo de estadísticas: • De Uso (de las revistas y de cada artículo) • De citas (Impacto, vida media) • De Coautoría (a nivel nacional, regional e internacional) • Indicador de artículos y citas por instituciones y autores • Desde el año 2002 considerado, junto a ISI, medida de calidad de revistas chilenas • Se está transfiriendo a las universidades para la edición de sus publicaciones y mejorar red de información

33. Los enlaces • Están activos: • Enlaces entre artículos SciELO, currículos SICTI en Chile y Lattes de Brasil, entre referencias de artículos en SciELO Chile y SciELO Brasil, entre las referencias y bases de datos Medline y Lilacs • Están previstos • De currículos SICTI y SciELO a Web of Science de ISI • De publicaciones a textos completos y otras bases de datos secundarias, tales como CABI • Acceso desde • INIST/CNRS, Francia y OCLC, EE.UU

34. Algunos enlaces De SciELO Chile a Currículo SICTI

35. Algunos enlaces De SciELO Chile a Currículo en Brasil

36. Algunos enlaces Entre artículos SciELO Chile

37. Algunos enlaces De SciELO Chile a SciELO Brasil

38. Algunos enlaces De SciELO Chile a Medline y LILACS

39. Información sobre el sistema nacional de CyT • SICTI, Sistemade informaciónde ciencia, tecnologíae innovación. • Plataforma que comprende información de : • Currículos de personas relacionadas con programas de CTI • Proyectos de investigación y desarrollo • Instituciones científicas • Productos (publicaciones, patentes y otros) • Portal de Ciencia y Tecnología Nacional

40. Información sobre el sistema nacional de CyT • Módulos de apoyo a la gestión de CONICYT Incluye: • Un sistema de postulación en línea a los fondos y programas que administra la institución, • Un sistema de apoyo a la evaluación, seguimiento, control y término de los proyectos y programas. • Posibilidad de acceso a la información en cada una de las etapas. • Plataforma transferible a las universidades para facilitar su propia gestión

42. Observatorio de Ciencia y Tecnología • Nuevo proyecto desarrollado dentro del Programa Bicentenario de Ciencia y Tecnología, • Basado en la información producida y acumulada en el Programa Nacional y sus tres componentes • Aplicación de nuevas tecnologías de información para la obtención de indicadores y realización de estudios de prospectiva y vigilancia tecnológica (Colexis y Stanalyst)

43. Observatorio de Ciencia y Tecnología • Objetivos: • Producción de indicadores básicos de ciencia, tecnología e innovación, • Indicadores de Producción. Nuevos indicadores de “productos” (outputs), y de “efectos” (outcomes) de I+D, utilizando las bases de datos existentes y nuevas tecnologías • Generar una infraestructura tecnológica de soporte. • Llevar a cabo estudios sobre el estado de la CyT en el país

44. Los indicadores de producción hoy • Producción: • Web of Science: Artículos semanales, anuales • SciELO: Artículos en períodos de un año • A nivel de personas, instituciones, disciplinas • Productividad • Numero de artículos, por aportes del estado, por proyectos, número de investigadores, etc. • A nivel de personas, instituciones y disciplinas • Impacto • Journal Citation Reports de ISI. Impacto de las revistas, año a año • WoS. Indice de impacto a nivel individual

45. Algunas conclusiones • Estamos invirtiendo, proporcionalmente, mucho en I+D • Nuestra ciencia no puede seguir siendo una “ciencia oculta” • Debemos fomentar lo que se publica en el país para que tenga la mayor calidad científica y la mayor visibilidad posible • Debemos ayudarnos entre los países para mostrar la ciencia latinoamericana al mundo