Las evaluaciones internas del SNI: coherencias o coincidencias*

SNI Internal Evaluations: Coherence or Coincidences

Gerardo Reyes R. y Jordi Suriach

ABOUT THE AUTHORS:

Gerardo Reyes R. Researcher at the Economics and Business Faculty at Barcelona University (Ph. D. Actuarial Profiles). His area of research is academic evaluation and the National System of Science and Technology. His latest publications include: ngel Samaniego A., G. Reyes R. and Jordi Bachs F., "Coeficiente de pesimismo relativo," Contadura y Administracin, UNAM, no. 226, 2008, pp. 59-72; Gerardo Reyes R. and J. Suriach, "Los nuevos ingresos como candidato a investigador en el SNI, 1996 2003", Revista Perfiles Educativos, UNAM, vol. XXXII, no. 127, 2010.

Jordi Suriach, Researcher and professor at the Economics and Business Faculty at Barcelona University (Ph. D. in Economic Science). Member of the European Regional Science Association and of the Spanish Association of Regional Science of the RSAI. He is also co-director of the Regional Quantitative Analysis Research Group (Consolidated Research Group for the Generalitat de Catalua) and direct of the Institute for Research on Public and Regional Applied Economics (IREA). His work has been published in prestigious national (Revista de Economa Aplicada, Estadstica Espaola, ICE) and international journals (Annals of Regional Science, Papers in Regional Science, Economic Letters, International Journal of Development Planning and Literature, Urban Studies, Regional Studies, Applied Economics, etc).

Fecha de recepcin: octubre de 2010  Fecha de aceptacin: julio de 2011

Resumen

En el presente artculo se muestra la dinmica de las solicitudes recibidas por el SNI durante el periodo de 1997 a 2008. Este anlisis permite profundizar en las caractersticas de este proceso de evaluacin iniciado con el fin de mejorar el sistema de poltica cientfica mexicana. Se realiza un anlisis del porcentaje de investigadores que optan por la evaluacin, las respuestas favorables versus las desfavorables, las diferencias que se alcanzan por reas de conocimiento, as como los indicadores promedio que deben alcanzarse para obtener la evaluacin positiva en los distintos niveles del SNI. En consecuencia, se permite realizar una primera valoracin sobre los Criterios Internos de Evaluacin definidos por este sistema de investigacin mexicano.

Palabras clave: SNI, la ciencia en Mxico, poltica de investigacin, minera de datos y bibliometra.

Abstract

This article shows the dynamics of the applications received by SNI during the period from 1997 to 2008. This analysis explores the characteristics of this evaluation process begun to improve the Mexican scientific policy system. It analyzes a percentage of the researchers who submit to the evaluation, the favorable and unfavorable responses, the differences achieved by areas of knowledge and the average indicators that must be achieved to obtain a positive assessment at the various SNI levels. The article constitutes an initial assessment of the Internal Evaluation Criteria defined by the Mexican research system.

Key words: SNI, science in Mexico, research policy, data mining, bibliometrics.

INTRODUCCIN Y MOTIVACIN DEL TEMA

El capital humano, en una economa basada cada vez ms en el nivel de conocimiento, supone el elemento clave que permite el desarrollo tecnolgico, econmico y social de un territorio. Asimismo, ayuda a conocer si un pas o regin puede satisfacer sus procesos tecnolgicos e innovadores que se transforman en beneficios tangibles para la poblacin.¹ Por tanto, el nivel de conocimiento es bsico para permitir tanto la generacin de innovacin² como su adopcin por parte de terceros.

Indicadores que suelen utilizarse para medir el nivel de capital humano de un pas son el nmero medio de aos de estudios de la poblacin o el porcentaje de poblacin que dispone de estudios universitarios. Sin embargo, existen otros indicadores, basados en los outputs de investigacin, que permiten valorar el nivel de capacidad de un pas para generar y adoptar innovaciones. Dichos indicadores son los basados en el nmero de patentes generadas, el nmero de artculos publicados en revistas cientficas de primer nivel, o el nmero de proyectos internacionales competitivos alcanzados, entre otros.³

Mxico, como el resto de los pases que quieren progresar en su desarrollo, debe tomar medidas para mejorar su nivel cientfico, para poder seguir creciendo en un mundo basado en el conocimiento. De ah que se hayan tomado medidas para mejorar su sistema de ciencia y tecnologa, y surja la necesidad de conocer y evaluar el impacto de los programas de apoyo a la ciencia y la tecnologa.

Al da de hoy, el Consejo Nacional de Ciencia y Tecnologa (Conacyt) se ha consolidado en Mxico como la principal institucin que impulsa, promueve y fortalece la formacin de recursos humanos de alto nivel. Primero, porque es la institucin mexicana que ms apoyos otorga para realizar estudios de posgrado,⁴ ya sean estos en instituciones nacionales o en instituciones que se encuentran en el extranjero. Y segundo, porque contiene al organismo ms importante en Mxico, denominado Sistema Nacional de Investigadores (SNI), que promueve y reconoce, a travs de una evaluacin interna, la calidad de la investigacin cientfica y tecnolgica, as como la innovacin que se produce en el pas.

Demasiado se ha comentado en torno del SNI, desde la prdida de objetivos y la falta de compromiso de sus integrantes o sesgo en su productividad,⁵ vicios internos para conservar la permanencia⁶ (sin mencionar el fraude y el plagio), criterios internos que valoran ms la cantidad que la calidad⁷ o bien que se le aplican los mismos criterios a diferentes disciplinas,⁸ pasando por la inequidad de gnero⁹ y hasta su desaparicin.¹⁰ En fin, la lista puede ser extensa. Sin embargo, con el transcurso del tiempo (poco ms de 25 aos) el SNI se ha transformado de un simple estmulo econmico a una

pieza fundamental del sistema de educacin superior y cientfica del pas, de la evaluacin de los investigadores, de la acreditacin de los posgrados, del nivel de las universidades. Hoy, an ms que en la poca de su fundacin, el SNI es pieza fundamental de la economa personal de los investigadores miembros y signo distintivo de la calidad de su trabajo.¹¹

El SNI definitivamente no es responsable de la formacin acadmica de los recursos humanos que lo integran. Sin embargo, s es responsable de captar a los recursos humanos intelectuales con mejor vocacin para realizar investigacin en Mxico. La seleccin de una solicitud por parte del SNI indudablemente depender del factor humano. Por ello se justifica la existencia de una comisin evaluadora en cada una de las siete reas del conocimiento definidas por dicho sistema de investigacin. No obstante cmo ha sido esta seleccin de solicitudes?

En Mxico, pertenecer al SNI es una distincin que simboliza la calidad y el prestigio de las contribuciones cientficas realizadas por una persona con vocacin investigadora. En ese contexto nace la motivacin de este trabajo de investigacin. El objetivo es analizar las caractersticas propias e inherentes del proceso de seleccin que realiza el SNI de los investigadores mexicanos¹² que presentan su solicitud a algunas de sus convocatorias para con ello conocer los criterios de evaluacin, sus resultados e inferir una valoracin sobre todo el proceso.

La poltica del SNI de conocer y reconocer a los investigadores que demuestran tener una verdadera vocacin para realizar investigacin en Mxico es, sin lugar a dudas, adecuada. Pero hasta el da de hoy no existen estudios que aborden el objeto de este trabajo, relacionado con la poltica de evaluacin seguida de los investigadores que se presentan a sus convocatorias.

El periodo de estudio ser el comprendido entre los aos 1997 y 2008. El anlisis se efectuar para cada rea del conocimiento definida por el SNI. Asimismo, y con el fin de conocer ms a detalle el procedimiento realizado, se analizar el proceso de evaluacin para los distintos niveles o categoras de investigadores. Por ltimo, tambin se analizarn los resultados diferenciales entre los investigadores que obtienen una evaluacin positiva respecto a los que no la alcanzan.

La metodologa a utilizar se basar principalmente en el tratamiento descriptivo de la informacin,¹³ lo que permitir obtener ratios, porcentajes y probabilidades asociados a los distintos perfiles de investigadores y reas. El anlisis permitir determinar los perfiles productivos (promedio) de los investigadores que acceden a esta elite de investigacin mexicana, que indudablemente se derivan de las evaluaciones internas realizadas por cada comisin evaluadora definida en dicho sistema. Somos conscientes, sin embargo, de que para proceder a una valoracin ms completa del SNI se debera comparar la informacin aqu presentada con otra ms cualitativa o incluso de otras fuentes (como las del isi–web of knowledge), por lo que el objetivo final del artculo es avanzar con unos resultados iniciales que permitan tener un buen punto de partida del procedimiento de evaluacin seguido, pero que necesariamente deber completarse en el futuro.

El presente artculo lo hemos estructurado de la siguiente manera: tras esta introduccin, en la segunda seccin se describen las bases de datos utilizadas as como la metodologa seguida. En la tercera se presenta brevemente al SNI y sus principales caractersticas. En la cuarta seccin se presenta el conjunto de resultados derivados del proceso de evaluacin del SNI. Finalmente, en la quinta seccin el artculo sintetiza y reflexiona sobre algunos de los principales resultados obtenidos. Con todos ellos se pretende, por un lado, dar a conocer a los investigadores mexicanos el proceso y las prcticas que deben llevar a cabo para ingresar/permanecer en el SNI y, por otro, en su caso, fortalecer el sistema de poltica cientfica mexicana para valorar su proceso de evaluacin. Conocer y hacer ms eficiente al SNI es mejorar la poltica de investigacin en Mxico.

METODOLOGA

En este trabajo se dan por entendidos dos hechos que son innegables: el primero es que los dictmenes emitidos por las comisiones evaluadoras del SNI son dados, es decir, congruentes o no, son considerados como irrefutables e irrepetibles. El segundo, que los nombramientos otorgados, correctos o no, son perfectibles.¹⁴ Por lo tanto, la seleccin y el nivel asignado a una solicitud presentada al SNI depender del factor humano; en concreto, depender del criterio del evaluador, adems de la informacin recogida en la memoria del investigador evaluado.

La informacin de base utilizada es la proporcionada por el propio SNI para los aos 1997–2008, referida a los investigadores incluidos en l, las solicitudes presentadas anualmente al SNI, as como sus dictmenes, y la informacin histrica de los investigadores que alguna vez pertenecieron a dicha elite de investigacin.

Se analiza la evolucin de las solicitudes presentadas al SNI por los investigadores mexicanos durante el periodo de 1997 a 2008, as como los resultados de la evaluacin de cada candidatura. Este anlisis permitir conocer y justificar las promociones a un nivel superior dentro del SNI, as como analizar su evolucin a lo largo del periodo de estudio. Tambin permitir conocer la probabilidad total y condicional para un nombramiento en cada una de las reas del conocimiento definidas por dicho sistema. Como corolario se determinar el nivel medio exigible asociado a cada solicitud para ser positivamente evaluada por cada comisin evaluadora del SNI.

Para conocer tanto la evolucin como el rigor y la coherencia de los dictmenes realizados por el SNI se efectuar, en primer lugar, la dinmica de las solicitudes aprobadas y promovidas a un nivel superior durante los aos de 1997 a 2008 para el colectivo de investigadores mexicanos con una situacin de reingreso vigente.¹⁵ En segundo lugar se examinar tanto la produccin cientfica de los aspirantes (perspectiva del solicitante) como los dictmenes de evaluacin de dicha institucin (perspectiva de las comisiones evaluadoras del SNI).

Asimismo, para conocer el estndar acadmico (promedio) de todos los investigadores que ingresaron al SNI se llevar a cabo un anlisis bibliomtrico. Este anlisis utiliza la base de datos proporcionada por el mismo SNI, la cual concentra informacin referente a la produccin cientfica reportada por cada investigador aceptado en dicho sistema durante el periodo de 1997 a 2003. La delimitacin del periodo de estudio para este anlisis en particular se debe, por una parte, a que la informacin recabada por el SNI presenta datos consistentes a partir del ao 1996 y, por otra, porque en el momento de realizar este artculo el SNI tan slo dispona de informacin en medio magntico hasta el ao 2003.¹⁶

La produccin cientfica reportada al SNI por cada investigador aprobado durante los aos de 1997 a 2003 tambin servir como insumo para realizar otro anlisis bibliomtrico y mostrar los aspectos que ms influyeron (o los conceptos que las comisiones evaluadoras toman ms en consideracin, al menos desde el punto de vista cuantitativo, para asignar un nombramiento) para que una solicitud fuese aceptada y/o promovida en dicho grupo de investigacin. Este anlisis permitir conocer el estndar del perfil productivo (promedio) con el cual fueron aceptados, para todos los niveles, dichos investigadores mexicanos en el sistema. Adems, este anlisis bibliomtrico permitir conocer la correspondencia que existe entre el nivel asignado dentro de dicho crculo de investigacin y la produccin cientfica reportada por cada investigador aprobado.

EL SISTEMA NACIONAL DE INVESTIGADORES¹⁷

El SNI es un subprograma del Programa de Fomento a la Investigacin Cientfica establecido por el gobierno federal, cuya conduccin y operacin, as como el establecimiento de sus objetivos y funciones, organizacin y reglamentacin interna estn a cargo del Conacyt.¹⁸ El SNI de Mxico tiene por objeto promover y fortalecer, a travs de una evaluacin, la calidad de la investigacin cientfica y tecnolgica y la innovacin que se produce en el pas.¹⁹

El ingreso a este sistema de investigacin mexicano es voluntario y gratuito para el solicitante. Una vez analizada su solicitud por las comisiones evaluadoras de cada una de las siete reas del conocimiento definidas por el SNI, se le comunica al solicitante su valoracin positiva o negativa y, en el primer caso, un nombramiento como miembro del SNI con la adscripcin a un nivel (candidato, nivel I, nivel II o nivel III),²⁰que adems tiene asociada una compensacin econmica variable. Pertenecer al SNI, en el contexto nacional, supone un reconocimiento a la calidad y prestigio acadmico del investigador, resultado de una produccin cientfica de considerable trascendencia a escala nacional y, en algunos casos, tambin en el mbito internacional.

 

En el subperiodo 1997 a 2006,²¹ tal como muestra la grfica 1,

el nmero de investigadores del SNI en equivalente de tiempo completo,²² permaneci relativamente constante, situndose alrededor de 30%. Es decir, en un lapso de diez aos uno de cada tres investigadores en equivalente de tiempo completo de Mxico fue miembro del SNI. Sin embargo, y para este subperiodo de tiempo, dicho porcentaje constante esconde un fuerte crecimiento del nmero total de investigadores miembros del SNI, que ha sido de 115% (vase grfica 2).

Estos resultados muestran que en trece aos el SNI ha ms que duplicado el nmero de sus investigadores, y que el nivel predominante en l es el denominado investigador nacional nivel I.

Actualmente existen siete reas²³ de conocimiento definidas por el SNI, y la distribucin promedio de estas, para los investigadores vigentes durante el periodo de 1997 a 2008, se presenta en la grfica 3.

Las reas del SNI con mayor nmero de investigadores son las denominadas Fsico–Matemticas y Ciencias de la Tierra y la de Biologa y Qumica.

Para finalizar esta breve presentacin, cabe sealar que el Distrito Federal concentr, durante todo el periodo de 1997 a 2008, el mayor nmero de investigadores con registro en el SNI (vase grfica 4).

Es claro que en la capital de la repblica mexicana se ha concentrado, con el paso del tiempo, el mayor nmero de investigadores con registro en el SNI, siendo la razn Distrito Federal vs. estados, de 1.1:1 para los aos de 1997 a 2008.

RESULTADOS Y DISCUSIN

Evolucin de las solicitudes evaluadas por el SNI en los periodos 1997–2002 y 2003–2008

En este apartado se analiza la evolucin de todas las solicitudes presentadas, en cada convocatoria anual, al SNI por los investigadores mexicanos durante el periodo de 1997 a 2008. La definicin de los dos subperiodos se llev a cabo con la finalidad de que ambos tuviesen el mismo nmero de aos y de esta manera hacerlos comparables entre s.

Las solicitudes que recibi el SNI entre 1997 y 2008 ascendieron a un total de 53 848, de las cuales 40 520 (75.2%) fueron solicitudes aprobadas y 13 328 (24.8%) no aprobadas. La proporcin anual de solicitudes aprobadas para el subperiodo de 1997 a 2002 fue de 77.5%, y para el sub–periodo de 2003 a 2008 dicha proporcin fue de 74.1%. Estos resultados muestran una poltica bastante continuista en cuanto al porcentaje de evaluaciones aprobadas entre los dos subperiodos, con un ligero sesgo a la baja (criterio de evaluacin ms restrictivo).

Este ligero descenso del porcentaje de solicitudes aprobadas no supone que progresivamente se aprueben menos solicitudes, dado que el nmero de ellas ha ido aumentando. Lo que sucede es que, durante todo el periodo de 1997 a 2008, el nmero de solicitudes aprobadas ha crecido 278.1%, mientras que las aprobadas slo crecieron 135%. Ello corresponde con un crecimiento medio anual de las solicitudes aprobadas de 10.4%, frente a 18% anual de las evaluadas negativamente. Es decir, las solicitudes aprobadas por el SNI se reproducen con una tasa promedio anual menor que las solicitudes no aprobadas. Es decir, el SNI ha "endurecido" sus resultados, haciendo cada vez ms selectiva su pertenencia o permanencia en l.²⁴ En cualquier caso, destaca el elevado porcentaje de evaluaciones positivas realizadas, cercanas a 75% en el promedio del periodo (vase grfica 5).

Dicha conclusin se confirma en la grfica 6,

donde la evolucin de la probabilidad de ser aceptada una solicitud presentada al SNI durante el periodo de 1997 a 2008 muestra una tendencia descendente, mientras que el comportamiento de la probabilidad para una solicitud de no ser aprobada presenta una tendencia creciente.

El SNI recibi casi el triple de solicitudes en el ao de 2008 (7 259) respecto del nmero de solicitudes recibidas en 1997 (2 734). Con referencia al total de solicitudes recibidas por el SNI de 1997 a 2008, en la grfica 7

 se muestra la evolucin de las aprobadas y de las no aprobadas por dicho sistema de investigacin mexicano. Como se ha comentado anteriormente, en el periodo 1997 a 2008 la tendencia absoluta respecto al nmero de solicitudes aprobadas fue creciente, pero no en trminos relativos, dado que el nmero de solicitudes presentadas aun fue mayor. Tambin resalta la estrecha relacin que existe entre las solicitudes aprobadas y el total de solicitudes evaluadas por el SNI durante el correspondiente periodo de estudio, la cual se ve reflejada en un coeficiente de correlacin simple de 0.986.

Por reas del conocimiento, la definida como Fsico–Matemticas y Ciencias de la Tierra fue la que mostr, durante el periodo de 1997 a 2008, una mayor probabilidad de aceptar una solicitud (88.1%). En contraparte, el rea denominada Biotecnologa y Ciencias Agropecuarias mostr, durante este periodo, la mayor probabilidad de rechazar una solicitud (33%).

Los criterios internos de evaluacin sin duda se han transformado, pero sobre todo se han adecuado a las caractersticas propias productivas de cada rea del SNI,dado que no todos los mbitos de conocimiento se rigen por los mismos parmetros de publicacin. Es lgico que quien hace investigacin en matemticas, medicina o ingeniera no publique muchos libros, a diferencia de los investigadores en Humanidades y Ciencias Sociales, que es en los libros donde pueden mostrar un avance slido del conocimiento, ms all de los aportados en artculos. Pero ms que referirse a un endurecimiento en trminos generales de los criterios a evaluar,²⁵ los resultados se inclinan a que son los evaluadores los que se han tornado ms selectivos al momento de aprobar/promover una solicitud.²⁶

La dinmica por tipo de situacin de las solicitudes presentadas al SNI para cada subperiodo de estudio se presenta en la grfica 8.

De los resultados se desprende que en el segundo subperiodo (20032008) se produce tanto un incremento de las solicitudes rechazadas (de 22.7 a 26.1%) como de los nuevos ingresos (de 15.5 a 20.3%). Ello parece indicar un mayor nivel de los investigadores de nuevo ingreso respecto al comportamiento de los ya integrantes del SNI.

Del total de solicitudes aprobadas (40 520) durante los aos de 1997 a 2008, 61% correspondi a la categora de reingreso vigente; 24% a nuevo ingreso y el restante 15% fue para los investigadores denominados de reingreso no vigente. Esta dinmica demuestra que los investigadores mexicanos que no han dejado de pertenecer al SNI (reingreso vigente) son aquellos que ms probabilidad tienen de permanecer en dicha elite de investigacin mexicana. Por su parte, los nuevos ingresos tienen mejores oportunidades de ser aceptados en el SNI que los reingresos no vigentes, es decir, que aquellos investigadores mexicanos que alguna vez formaron parte de dicha elite pero que debido a ciertas circunstancias dejaron de pertenecer a este sistema por algn determinado periodo de tiempo.

Con respecto al tipo de nivel del SNI obtenido en cada subperiodo de estudio, en la grfica 9 se muestra la distribucin de las evaluaciones realizadas por las comisiones evaluadoras. Para el periodo de 2003 a 2008 el crecimiento del rechazo de las solicitudes presentadas (de 23 a 26%) ha sido a costa del descenso en el porcentaje de evaluacin positiva de los dos niveles ms bajos de los investigadores que ya estaban en el SNI (mayor descenso cuanto menor era el nivel del investigador).

Por su parte, y para ambos subperiodos de estudio, se aprecia que los niveles de candidato (14.8 y 16.3%) y nivel I (45.6 y 41.9%) son los que predominan en el SNI. A su vez, los dos niveles superiores son otorgados con mucha ms reserva, permaneciendo casi constantes en ambos periodos de tiempo (alrededor de 12.5% el nivel II y del 3.6% el nivel III). En referencia a los datos mostrados en las grficas 8 y 9, se puede deducir que el nico nombramiento que ha mostrado un incremento significativo de un periodo a otro ha sido el de candidato a investigador, y muy en particular el de los nuevos ingresos.

Por reas de conocimiento del SNI, la que ms solicitudes aprob en ambos periodos de estudio fue la denominada Fsico–Matemticas y Ciencias de la Tierra (rea que adems tiene el mayor nmero de investigadores en el sistema), con una proporcin, respecto al total de solicitudes evaluadas por esta rea en cada subperiodo de estudio, de 87.9% para los aos de 1997 a 2002 y de 88% para el subperiodo de 2003 a 2008. Es decir, la proporcin de solicitudes aprobadas en esta rea de conocimiento ha permanecido muy estable durante ambos periodos de tiempo (grfica 10).

En concordancia con estos resultados, en el cuadro 1 se presenta la probabilidad para el subperiodo de 1997 a 2008 de que una solicitud aprobada obtuviese una evaluacin positiva en cada rea del conocimiento definida por el SNI.

En el mencionado cuadro 1 se aprecia que la probabilidad condicional para una solicitud aprobada en el SNI fue siempre mayor en el denominado nivel I. Este resultado implica que si una solicitud era aprobada por el SNI, independientemente del rea en donde haya sido evaluada, entonces era ms probable que se le asignase el nombramiento de investigador nacional nivel I. Si no se le asignaba dicho nombramiento, entonces el dictamen variaba segn el rea donde se llev a cabo la evaluacin de la solicitud. Pero sin lugar a dudas, el nivel III se otorg con mucha ms reserva en todas las reas del SNI.

En lo que se refiere a las solicitudes no aprobadas desglosadas por reas de conocimiento, en el cuadro 2 se presentan sus principales caractersticas. Es evidente que para ambos subperiodos de tiempo, y en todas las reas de conocimiento del SNI, tanto los nuevos ingresos como los investigadores que en algn momento pertenecieron al SNI (reingreso no vigente) fueron los que menos oportunidad tuvieron de pertenecer o de reingresar a dicho sistema. El rea de Humanidades y Ciencias de la Conducta fue la que mayor participacin relativa promedio present en el subperiodo de 1997 a 2002 para dichas situaciones, con 77.3 por ciento.

Por su parte, el rea denominada Sociales fue la que mayor dificultad relativa (85.2%) tuvo en estos conceptos para su ingreso/reingreso en los aos de 2003 a 2008. En cambio, en el primer subperiodo, el rea con mayor ratio de ingresos/ reingresos fue la de Medicina y Ciencias de la Salud, mientras que en el segundo sub–periodo fue la de Biologa y Qumica.

Los resultados de estos dos subperiodos tambin muestran la escasa probabilidad de perder la condicin de miembro del SNI cuando se alcanza sobre todo los niveles II y III.²⁷ Este resultado abre la duda sobre si esta estabilidad se sustenta con los resultados obtenidos por los investigadores de esos niveles, o si puede considerarse como cuasidefinitiva la adscripcin al SNI cuando se alcanzan estos niveles, sin que se justifique dicha posicin con el mantenimiento de elevados resultados en publicaciones cientficas.

Indudablemente este anlisis abre una nueva lnea de investigacin, la cual debera analizar si un mayor nivel asignado en el SNI corresponde a una mayor (pero sobre todo mejor) produccin cientfica.

Las evaluaciones de los investigadores del SNI con una situacin de reingreso vigente de 1997 a 2008

En este apartado se procede a analizar la evaluacin que realiza el SNI para el colectivo sobre el cual se conoce a priori informacin sobre sus caractersticas personales previas, y que han continuado en el SNI (y por tanto han obtenido una evaluacin positiva) tanto en el mismo nivel como varindolo. Es decir, son los llamados investigadores con una situacin de reingreso vigente. La finalidad de este apartado es justificar los dictmenes realizados a estos investigadores mexicanos. Este anlisis evidencia la importancia que el SNI le otorga a la trayectoria de los investigadores, considerados de alto rendimiento, que han dedicado y demostrado una continuidad para innovar e implementar ciencia y tecnologa en Mxico.

43% del total de solicitudes aprobadas (24 685) por el SNI con una situacin de reingreso vigente, se concentr en el subperiodo 1997–2002, mientras que el restante 57% correspondi al subperiodo comprendido entre los aos de 2003 y 2008. Estas cifras son congruentes dado que el nmero de solicitudes y evaluaciones ha crecido a lo largo del periodo 1997–2008.

Los resultados de los dictmenes de las comisiones evaluadoras del SNI correspondientes al periodo de 1997 a 2008 se presentan en la grfica 11.

En la grfica 8 se observ que el porcentaje de evaluaciones positivas (que continan en el SNI) son mayoritarias. Ahora, en la grfica 11 se observa que las evaluaciones son conservadoras en el sentido de que mayoritariamente mantienen en el mismo nivel a los investigadores evaluados. Este comportamiento se produce en ambos subperiodos (vase cuadro 3).

Partiendo del supuesto de una evaluacin objetiva por parte del SNI, el resultado obtenido viene a confirmar que pocos investigadores reducen su actividad investigadora: poco ms de 25% mejoran de categora y la gran mayora (70%) consigue mantener su permanencia, sin que se produzcan mejoras en su nivel investigador que le permitan aumentar de categora.

El detalle de las solicitudes de reingreso vigente aprobadas por el SNI segn el nivel al cual fueron promovidas, as como su participacin relativa respecto al tipo de solicitud, se presenta en el cuadro 4.

Como se desprende de la informacin integrada en dicho cuadro, los investigadores de reingreso vigente promovidos a un nivel superior del SNI, en relacin con el total de reingresos vigentes aprobados, se incrementaron de un periodo a otro, aunque de manera poco significativa (1.5%, de 27.05 a 28.52%). sin embargo, este porcentaje de solicitudes evaluadas que permiten mejorar la posicin relativa de los investigadores dentro del SNI, han ido disminuyendo respecto al total de solicitudes aprobadas, y ms an, respecto al total de solicitudes recibidas y evaluadas por dicho sistema de investigacin. Es decir, en el segundo subperiodo analizado, la evaluacin ha sido ms rigurosa de cara a tener un porcentaje de investigadores con una mejor posicin relativa en el SNI.

As, cabe resaltar que el ascenso de nivel I a nivel II fue el movimiento que ms participacin porcentual present de un subperiodo de estudio a otro (1.77%), en referencia al total de reingresos vigentes aprobados. El segundo colectivo con mayor incremento (0.45%) fueron los investigadores que pasaron del nivel II al nivel III.

Como complemento al cuadro 4, la grfica 12 permite concluir que el nombramiento de investigador nacional nivel III es otorgado con muchas reservas, y tambin es claro que para acceder a dicho nombramiento se tiene que transitar por el nivel inmediato anterior, es decir, por el nivel II. El paso ms habitual es del nivel candidato al nivel I, y de este al nivel II. Por tanto, es claro que en el SNI existe una ruta, perfectamente definida, para poder acceder al mximo nivel (nivel III), es decir, comenzar desde cierto nombramiento y despus, con la ayuda del tiempo, ascender nivel por nivel.

Por subperiodos, los investigadores con nivel II tuvieron una evaluacin ms favorable para ser promovidos al nivel III en el SNI durante el periodo de 2003 a 2008, al igual que para los investigadores con nombramiento de nivel I fue ms probable que obtuvieran un ascenso al nivel II. En cambio, en este segundo subperiodo fue ms difcil alcanzar el nivel I, siendo candidato.

Finalmente, cabe mencionar que durante el periodo comprendido entre los aos de 1997 y 2008, el rea del SNI que otorg con ms frecuencia el nombramiento de investigador nacional nivel III fue la denominada Fsico–Matemticas y Ciencias de la Tierra. Por su parte, el rea del SNI que se reserv ms para otorgar este nombramiento fue la denominada Ingeniera y Tecnologa.

Posibles ponderaciones para una solicitud aprobada por rea de conocimiento y nivel del SNI, 1996–2003

Las solicitudes aprobadas por el SNI inevitablemente permiten detectar el perfil productivo (promedio) de los investigadores que fueron evaluados positivamente. En este apartado se muestra informacin sobre los outputscientficos que fueron ms relevantes para obtener una evaluacin positiva durante las promociones de 1996 a 2003.

En primer lugar, en la grfica 13 se presenta el porcentaje de outputs que aparecen al menos una vez en las solicitudes evaluadas positivamente. Los conceptos que requieren una mayor frecuencia de outputs para obtener una evaluacin positiva son el nmero de citas (36%), las invitaciones a congresos (17.6%), el nmero de artculos (16.8%) y las tesis dirigidas (9.1%).

Al realizar el anlisis para cada una de las siete reas de conocimiento del SNI, y como se puede apreciar en lagrfica 14, aunque a grandes rasgos los promedios son similares para las distintas reas, pero existen algunas diferencias significativas sobre el nmero promedio de outputs necesarios para obtener una evaluacin positiva.

Destaca la elevada variabilidad del out–put "citas", ya que aparece en alrededor de 50% de las solicitudes evaluadas positivamente en las reas experimentales y de Salud (reas I a III), mientras que en Humanidades y Ciencias Sociales (reas IV y V) slo se requiere en 15% de las solicitudes aprobadas. Lo que s queda claro es que en todas las reas definidas por el SNI el nmero de citas, las invitaciones a congresos, el nmero de artculos y las tesis dirigidas son los rubros que en un mayor nmero de casos deben estar presentes para ser evaluados positivamente durante los aos de 1996 a 2003.

En segundo lugar, en el cuadro 5 se resumen las frecuencias medias requeridas de los distintos tipos deoutputs, segn el nivel del SNI. Los outputs requeridos en mayor nmero son las citas, los artculos, las invitaciones a congresos y las tesis dirigidas. sorprende que en la mayora de los tems no se produzca un crecimiento de los outputs promedio requeridos a medida que el investigador alcanza un nivel superior. Todo lo contrario, sorprende que el nmero de artculos, desarrollos tecnolgicos, distinciones, estancias de investigacin, posdoctorados, invitaciones a congresos, libros, tesis dirigidas... y otros tengan un comportamiento decreciente a medida que aumenta el nivel del investigador. La nica excepcin relevante es el nmero de citas. Ello puede indicar o que los criterios se han ido "endureciendo" con el paso de los aos, que los nuevos candidatos tienen una preparacin y un nivel de investigacin superior a la que en su da tenan los investigadores del SNI del mismo nivel o que la calidad de la investigacin se mide sobre todo con la cantidad de citas.²⁸

En este contexto es importante mencionar la relevancia que tiene el nmero de citas. En el caso que el nmero de citas y de artculos (considerado en la evaluacin por el SNI) fuera el de todo el historial del investigador evaluado, y dado que las publicaciones recientes no tienen tantas citas como las publicaciones que ya se hicieron hace unos aos, sera lgico esperar que los investigadores con ms experiencia tuvieran una probabilidad mayor de ser citados.²⁹ En cambio, si el nmero de citas y publicaciones que se contabilizan son las del ltimo trienio, como es el caso del SNI, todos los investigadores estn en igualdad de condiciones y, por lo tanto, la diferencia sera la calidad de la investigacin (reflejada por el nmero de citas). Este criterio de la importancia de las citas en la evaluacin sugiere que la pauta evaluatoria no es tanto la cantidad como la calidad. El hecho de que los artculos promedio decrezcan a medida que aumenta la clasificacin del nivel del investigador, podra estar indicando tambin el primar la calidad frente a la cantidad (en el caso de que los investigadores mejor evaluados publiquen menos, pero en revistas de mayor calidad).

Realizando el anlisis por reas, vase grfica 15, se corrobora este cambio en la importancia que los distintosoutputs tienen en la evaluacin de los diferentes niveles del SNI. A medida que el nivel evaluado crece, tambin lo hace la importancia del nmero de evaluaciones que ha requerido tener "citas" asociado a sus trabajos.³⁰ En cambio, decrecen los artculos, las distinciones recibidas, las invitaciones a congresos, las memorias a congresos y las direcciones de tesis.

Por ltimo, la grfica 15 confirma las diferencias de outputs (y de requerimientos promedio) entre reas de conocimiento para ser evaluado positivamente. Es una confirmacin ms de la heterogeneidad en cuanto a los productos de las tareas investigadoras entre reas distintas que, al menos parcialmente, son recogidas por el SNI en sus evaluaciones.

COMENTARIOS A MANERA DE CONCLUSIONES

En este artculo se ha realizado un anlisis sobre los resultados del sistema de evaluacin que el SNI lleva a cabo en Mxico con el objetivo de captar y promocionar a los principales investigadores. El objetivo de dicha poltica no es otra que mejorar la calidad de la investigacin en Mxico. Los resultados muestran que el porcentaje de investigadores que forman parte de dicha elite se mantienen alrededor de 30% de los potenciales recursos humanos con una verdadera vocacin para crear y desarrollar ciencia y tecnologa en el territorio nacional. sin embargo, este promedio no debe esconder que el porcentaje fue creciente hasta 2001 y que desde entonces observa un claro descenso.

Esta evolucin decreciente habida en la dcada del 2000 es el resultado de la confluencia de varios factores. Por un lado, de un mayor rigor en los criterios de evaluacin aplicados, puesto que para el periodo de 1997 a 2008 las solicitudes aprobadas por este sistema de investigacin mostraron una tasa promedio anual de crecimiento menor a la de las solicitudes no aprobadas. Es decir, las solicitudes no aprobadas por el SNI han crecido ms rpidamente que las aprobadas, durante el mencionado periodo de estudio. Adems, la probabilidad de ser aceptado en dicho sistema pas de 79% en 1997 a 70.1% para el ao de 2008.

Otros factores potencialmente explicativos de dicha evolucin podran ser la limitacin presupuestaria en cuanto a investigadores a financiar y/o la menor calidad global de los candidatos que se presentan a los procesos de evaluacin del SNI, tanto debido a un crecimiento cuantitativo (pero no cualitativo) de la calidad de la investigacin en Mxico, como a una mayor peticin de evaluacin, al ser progresivamente ms conocido dicho programa.

En contraposicin a la caracterstica anterior, debe sealarse que una vez que se entra en el SNI la permanencia se hace muy longeva, sobre todo en los dos niveles superiores, ya que el sistema termina por mantener, en la gran mayora de sus dictmenes, el mismo nivel a una solicitud de reingreso vigente. Ello introduce ciertas dudas sobre el mantenimiento de la rigurosidad en la evaluacin en estos niveles, sobre todo cuando se observa que el nmero de artculos, desarrollos tecnolgicos, distinciones, estancias de investigacin, posdoctorados, invitaciones a congresos, libros, tesis dirigidas, etc., no aumenta a medida que se evala a los investigadores de niveles cada vez ms altos.

En cualquier caso, y para los aos de 1997 a 2008, se observa que los niveles de candidato y nivel i son los nombramientos que predominan en el SNI y son estos mismos los que con mayor probabilidad seguirn abandonando dicho sistema. En cambio, los dos nombramientos superiores, nivel II y nivel III, son otorgados con mucha ms discrecin. Es por ello que slo los investigadores mexicanos que han demostrado, con el paso del tiempo, una verdadera vocacin y compromiso para crear, desarrollar e implementar ciencia y/o tecnologa en Mxico, alcanzan esos niveles de privilegio. Aunque cuando llegan a ellos, es difcil que los abandonen (aunque quiz no mantengan el nivel en cuanto a indicadores de investigacin).

Otro elemento que debe resaltarse es la cultura de la evaluacin que ha conseguido introducir la poltica iniciada por el SNI entre los investigadores mexicanos. El programa del SNI ha conseguido que progresivamente se vea la evaluacin de mritos como algo consustancial a la labor investigadora. Ello ha conducido a que los investigadores que optan por este programa vayan creciendo a lo largo de los ltimos quince aos. Probablemente esta cultura poltica permitir, en una segunda fase, fijar mejor los criterios para optar (y mantenerse) en los distintos niveles existentes.

Tambin los resultados mostrados en este artculo demuestran que pertenecer al SNI no es ninguna casualidad. Por el contrario, este sistema realiza una secuencia bastante coherente desde el preciso momento en que aprueba una solicitud. Esta congruencia se detecta incluso al promover una solicitud con registro vigente, ya que difcilmente un investigador mexicano que cuenta con poca experiencia para realizar investigacin podr acceder, en el corto plazo, a los niveles superiores del SNI.

Finalmente, merecen destacarse las diferencias que existen en cuanto a criterios de evaluacin entre las distintas reas de conocimiento. La investigacin realizada muestra que los outputs requeridos son similares entre reas, pero no coincidentes. Es un ejemplo de flexibilidad y de reconocimiento que no toda la investigacin es igualmente sistematizable en la misma cantidad de indicadores outputs de investigacin.

FUENTES CONSULTADAS

Hemerografa

Campus, suplemento universitario, Milenio, ciudad de Mxico.   

El Universal, ciudad de Mxico.     

La Jornada, ciudad de Mxico.         

La Jornada Semanal, ciudad de Mxico.        

Nexos, ciudad de Mxico.         

Proceso, ciudad de Mxico.        

BIBLIOGRAFA

Aguilar, Jos Antonio, "Grisuras del Conacyt", Nexos, 2011, p22.         

lvarez M., G. et al., Los efectos indeseados del SNI y la necesidad de su transformacin, Departamento de Investigaciones Educativas–Cinvestav, Mxico 2010, pp. 1–20.       

CONACYT, Informe general del estado de la ciencia y la tecnologa, Mxico, 2008 y 2009.     

–––––––––––, Posicin institucional relativa a la evaluacin especfica de desempeo 2009 del programa: S 191 Sistema Nacional de Investigadores. Institucin evaluadora: C–230, Consultores, S. C., Mxico, 2009.    

Foro Consultivo Cientfico y Tecnolgico y Academia Mexicana de Ciencias, Una reflexin sobre el Sistema Nacional de Investigadores a 20 aos de su creacin, Mxico, 2005.     

Gonzalez Brambila, C., Exploring Academic Scientific Productivity for the Design of Public Policies, Department of Engineering and Public Policy, Carnegie Mellon University, Pittsburgh, PA, 2005.

Licea de Arenas, J. y E. G. Santilln–Rivero, "Bibliometra para qu?", Biblioteca Universitaria, nueva poca, vol. 5, nm. 1, 2002, Mxico, pp. 3–10.  

Pallan, Carlos, "ASF y SNI", segunda y ltima parte, Campus, suplemento universitario, Milenio, nm. 405, 2011, p. 2.      

Prez, Ruy, "Para mejorar el SNI", Nexos, 1997, pp. 31–34.    

Pea, Jos Antonio de la, "El Sistema Nacional de Investigadores: mitos y realidades", Campus, suplemento universitario, Milenio, nm. 367, 2010, p. 8.   

Reyes, Carlos, "Debe el SNI actualizar sus criterios de acceso y permanencia", Campus, suplemento universitario, Milenio, nm. 367, 2010, p. 10.        

Samaniego Alcntar, A., "Bsqueda de los factores que influyen en las decisiones de los inversionistas del mercado de valores sobre empresas que reportan un gasto en I+D", tesis de doctorado, Facultad de Economa y Empresa–Universidad de Barcelona, Espaa, 2011.        

Schneider, J. W. y P. Borlund, "Introduction to Bibliometrics for Construction and Maintenance of Thesauri",Journal of Documentation, vol. 60, nm. 5, 2004, pp. 524–549.        

Sheridan, Guillermo, "El SNI debe desaparecer", La Jornada Semanal, 1997.      

Veloso, F., C. Brambila y G. Reyes, La ciencia mexicana en el contexto global. Un estudio de la Carnegie Mellon University y del ITAM, ITAM, Mxico, 2006.       

Zubieta, J. y R. Rueda, "La ciencia y la tecnologa en el Mxico del maana: Habr con quin?", Instituto de Investigaciones Sociales–UNAM, Mxico, 1998, pp. 1–37.       

Pginas web

Conacyt, Convocatoria del SNI, en lnea <http://www.conacyt.gob.mx/SNl/2011/Documents/1_ingreso%20permanencia–2011.pdf>. [Consulta: junio de 2011.         

–––––––––––, Criterios internos de evaluacin del SNI (2011), en lnea <http://www.conacyt.gob.mx/SNi/SNi_CriteriosInternosdeEvaluacion/Paginas/default.aspx>. [Consulta: junio de 2011.] Los criterios internos de los aos 1997, 2002, 2003 y 2008 fueron consultados en forma impresa.        

–––––––––––, CVU (curriculum vitae nico) solicitado por el SNI, en lnea <http://hrmsepws.main.conacyt.mx:9092/psp/REGCYT2/?cmd=login&languageCd=ESP>. [Consulta: junio de 2011.      

–––––––––––, Glosario de trminos bsicos del SNI, en lnea <http://www.conacyt.gob.mx/SNl/Paginas/SNi_Glosario.aspx>. [Consulta: junio de 2011.        ]]

–––––––––––, Pgina Web del SNI <http://www.conacyt.gob.mx/sni/Paginas/default.aspx>         

NOTAS

* Los autores agradecen al Ministerio de Educacin su ayuda, mediante el proyecto ECO2009–12678, asimismo las sugerencias y comentarios de los dictaminadores annimos, los cuales sin lugar a dudas ayudaron a enriquecer este trabajo.

¹ CONACYT, Informe, 2008, p. 37.

² Una idea muy interesante sobre la innovacin en Mxico es la que se propone en la tesis doctoral de Samaniego, "Bsqueda", 2011.

³ Se reconoce que existen otros indicadores que sirven para medir el nivel de capital humano de un pas, como por ejemplo el gasto federal en ciencia y tecnologa, el gasto interno en investigacin y desarrollo experimental, total de artculos publicados en revistas de prestigio internacional, factor de impacto, total de investigadores por cada mil integrantes de la poblacin econmicamente activa, total de graduados con doctorado, nmero de becas otorgadas, etc. Sin embargo, no es la finalidad de este artculo posicionar a Mxico en el contexto global.

⁴ En 1997 el CONACYT otorg 5 929 becas nuevas (nacionales y al extranjero) y 15 211 en 2008. Es decir, los apoyos para estudios, en su gran mayora de posgrado, tuvieron un incremento de 157% durante el periodo de 1997 a 2008.

⁵ Palln, "ASF y SNI", 2011, p. 2.

⁶ Un testimonio interesante es el narrado por el doctor Jorge Membrillo Hernndez en la recopilacin realizada en Foro, Reflexin, 2005, p. 102.

⁷ Laura Poy, "Llaman cientficos y acadmicos a transformar el Sistema Nacional de Investigadores", La Jornada, 9 de mayo de 2010, Mxico; Prez, "Mejorar", 1997, pp. 31–34; Aguilar, "Grisuras", 2011, p. 22.

⁸ Reyes, "Debe", 2010, p. 10.

⁹ lvarez et al., Efectos, 2010, p. 10.

¹⁰ Sheridan, "SNI", 1997.

¹¹ Pea, "Sistema", 2010, p. 8.

¹² El investigador no necesariamente tiene que ser mexicano por nacimiento, sin embargo, en el art. 3 del reglamento del SNI, publicado en el Diario Oficial el martes 26 de septiembre de 2006, se dice al respecto: En caso de que el aspirante no tenga nacionalidad mexicana, deber contar con adscripcin en alguna institucin del territorio nacional, con antigedad mnima de un ao al inicio de su nombramiento en el SNI. Deber, adems, demostrar su residencia en el pas con documentos oficiales. En consecuencia, sus investigaciones son imputables a Mxico, incluso aquellas investigaciones que son realizadas en el extranjero, por lo que sin prdida de generalidad, se hablar de investigadores mexicanos.

¹³ No obstante, algunos resultados se obtuvieron mediante las tcnicas denominadas minera de datos y bibliometra.

¹⁴ Es por ello que existen subcomisiones evaluadoras, que tienen por objetivo evaluar las solicitudes de inconformidad y pueden emitir un dictamen diferente al de la comisin evaluadora correspondiente.

¹⁵ Se limit el estudio a este tipo de investigadores porque para ellos se conoce perfectamente su nivel inmediato anterior al momento de solicitar su permanencia en dicho sistema de investigacin mexicano. Por su parte, para los investigadores con una situacin de nuevo ingreso no se define tal criterio y para los investigadores con una situacin de reingreso no vigente difcilmente se cont con dicha informacin. Adems los investigadores con una situacin de reingreso vigente representaron, de 1997 a 2008, 75.2% respecto del total de solicitudes evaluadas en el SNI, por lo que son un conglomerado muy significativo para evidenciar los dictmenes realizados por los evaluadores durante dicho periodo de estudio.

¹⁶ Este anlisis hubiera sido ms rico si el SNI dispusiera de informacin para las solicitudes no aprobadas en todas sus modalidades.

¹⁷ Los autores agradecen al SNI de Mxico por toda la informacin proporcionada para poder realizar este trabajo.

¹⁸ Lineamientos de la Junta de Honor del SNI, en lnea <http://www.conacyt.gob.mx/SNl/SNI_Reglamentacion/Documents/LINEAMIENTOS–JUNTA–DE–HONOR.pdf>. [Consulta: junio de 2011.]

¹⁹ CONACYT, Reglamento vigente del Sistema Nacional de Investigadores, 2008 en lnea <http://www.conacyt.gob.mx/SNI/SNI_Reglamentacion/Documents/SNI_Reglamento_2008.pdf>. [Consulta: junio de 2011.] Los reglamentos de 1997 a 2006 fueron consultados en forma impresa.

²⁰ En un sentido estricto el SNI contempla dos categoras: candidato a investigador nacional e investigador nacional y este ltimo contempla tres niveles, a decir: investigador nacional nivel I, nivel II y nivel III.

²¹ Hasta el ao 2006 se dispuso del dato correspondiente al total de investigadores de Mxico en equivalente de tiempo completo. Se entiende que este nmero integra tanto al sector pblico como al privado a escala nacional.

²² Los reglamentos vigentes del SNI durante los aos de 1997 a 2006 solicitaban, generalmente en su cap. IX y art. 32, realizar actividades de investigacin cientfica o tecnolgica de tiempo completo.

²³ Para los aos de 1996 a 1999 en el SNI existan nicamente cuatro reas del conocimiento, posteriormente se incrementaron a siete, por lo que para estos aos se adecuaron las cifras a siete reas con base en la disciplina asociada al rea de conocimiento del SNI.

²⁴ Un aspecto a resaltar es que desde el ao 1996 se modific el reglamento interno del SNI y se exige el grado acadmico de doctor para ingresar por vez primera a dicha elite de investigacin. En consecuencia muchos investigadores tuvieron que "abandonar" dicha elite de investigacin mexicana por no cumplir con ese requerimiento. Adems, el nombramiento de candidato a investigador pas a ser nico y por tan slo tres aos, aunque hoy en da depender de la comisin evaluadora correspondiente si otorga o no una prrroga.

²⁵ Los criterios internos de evaluacin de las nuevas reas I, II, III, vI y vII del SNI, de 1997 y 2008, no hacen referencia a ningn aspecto cuantitativo para ingresar y/o permanecer en dicho sistema. En cambio, las reas IV y V tienen perfectamente bien definidos los aspectos cuantitativos para cada nivel y tipo de situacin. Por lo que definitivamente, y en trminos generales, se le da mucho peso al criterio subjetivo del evaluador para aprobar/promover una solicitud. En consecuencia, un comparativo cuantitativo carecera de sentido alguno.

²⁶ Dos casos, por citar tan slo algunos muy representativos, pueden verificarse en Ricardo Cern, "Cuestiona criterios de evaluacin", El Universal, 22 de agosto de 2007, y en la carta del investigador Carlos Aguirre Rojas publicada en la revista Proceso, nm. 1663, 14 de septiembre de 2008.

²⁷ Este resultado est en correspondencia con el encontrado por Zubieta y Rueda, "Ciencia", 1998, p. 30, y el cual se refiere a que "de llegar al nivel III, la probabilidad de mantenerse como tal es la mayor de todas las probabilidades calculadas en una matriz de transicin mediante un proceso estocstico o proceso de Markov". Adems, estando en el nivel II, es ms probable promoverse que descender al nivel I.

²⁸ Las citas se refieren a la mencin por parte de terceros en algn producto de investigacin cientfico con ficha bibliogrfica bien determinada de alguna aportacin, resultado, idea, construccin, desarrollo, etc. aparecida dentro de algn producto de investigacin (libro, artculo, etc.) con ficha bibliogrfica bien determinada realizada o atribuible al investigador o grupo de coautores dentro del cual se encuentra incluido el investigador. Adems el rubro de artculos hace referencia a la suma de artculos enviados, artculos aprobados y artculos publicados.

²⁹ Para mayor informacin al respecto consultar Licea y Santilln–Rivero, "Bibliometra", 2002.

³⁰ El nmero de citas es uno de los instrumentos ms habituales para valorar la calidad investigadora, aunque tambin est sujeto a problemas (acuerdos entre autores para realizar citaciones cruzadas, o diferencias entre reas respecto a la prctica de proceder a citaciones, entre otras).

INFORMACIN SOBRE LOS AUTORES:

Gerardo Reyes R. Investigador en la Facultad de Economa y Empresa de la Universidad de Barcelona (doctorado perfil Actuariales). Su rea de investigacin es la evaluacin acadmica y el Sistema Nacional de Ciencia y Tecnologa. Entre sus ltimas publicaciones destacan: ngel Samaniego A., G. Reyes R. y Jordi Bachs F., "Coeficiente de pesimismo relativo", Contadura y Administracin, UNAM, nm. 226, 2008, pp. 59–72; Gerardo Reyes R. y J. Suriach, "Los nuevos ingresos como candidato a investigador en el SNI, 1996–2003",Revista Perfiles Educativos, UNAM, vol. XXXII, nm. 127, 2010.

Jordi Suriach. Investigador y catedrtico en la Facultad de Economa y Empresa de la Universidad de Barcelona (doctorado en Ciencias Econmicas). Es miembro de la European Regional Science Association y de la Asociacin Espaola de Ciencia Regional, de la RSAI. Es tambin codirector del Grupo de Investigacin Anlisis Cuantitativo Regional (Grupo Consolidado de Investigacin por la Generalitat de Catalua) y director del Instituto de Investigacin en Economa Aplicada Regional y Pblica (IREA). Ha publicado en revistas de reconocido prestigio tanto en el mbito nacional (Revista de Economa Aplicada, Estadstica Espaola, ICE), como internacional (Annals of Regional Science, Papers in Regional Science, Economic Letters, International Journal of Development Planning and Literature, Urban Studies, Regional Studies, Applied Economics, etctera).