Métricas de éxito de un congreso académico: qué medir

Decidir qué significa el éxito

Una reunión de una sociedad puede aspirar a la asistencia de socios, un simposio especializado a la calidad científica y un evento universitario a la participación estudiantil. Elija de tres a cinco objetivos antes de abrir la convocatoria y métricas que muestren el avance hacia ellos.

Métricas por etapa

Defina cada una por escrito para que el equipo del año próximo la cuente igual.

• Envíos: número recibido, por línea temática y etapa de carrera; proporción de autores que envían por primera vez.
• Revisión: revisiones por resumen, proporción completada a tiempo, tasa de aceptación, tiempo desde el cierre hasta la decisión.
• Inscripción: total de inscritos por categoría; conversión de ponentes aceptados a inscritos; proporción con tarifa anticipada.
• Asistencia: número de presentes, asistencia a sesiones donde se cuente, asistencia a la sesión de pósteres.
• Satisfacción: puntuaciones medias de la encuesta, tasa de respuesta y temas más frecuentes en el texto libre.
• Comunicación: volumen de preguntas de asistentes y proporción resuelta sin personal.
• Finanzas: ingresos y costes por categoría y resultado neto frente al presupuesto.

Vigilar las definiciones

La tasa de aceptación, por ejemplo, cambia de significado según se cuenten o no los resúmenes retirados. La asistencia puede ser inscripciones, lecturas de credencial o asientos ocupados. Anote la definición junto a cada cifra y use la misma cada año.

Comparar con cuidado

Compare ediciones solo cuando el formato sea comparable: misma duración, tipo de sede similar, misma estructura de cuotas. Anote las diferencias, como una nueva línea o un cambio de país, junto a las cifras para que el lector juzgue la tendencia.

Un resumen de métricas que puede copiar

Un resumen de una página permite al comité ver la reunión de un vistazo. Las cifras siguientes son inventadas y muestran el diseño, con una columna de comparación para la edición anterior y una nota breve que explica los valores inusuales.

Métrica Este año Año pasado Nota Resúmenes enviados 412 365 Se añadió una línea Tasa de aceptación 68 % 71 % Sin contar retirados Revisiones completadas a tiempo 91 % 84 % Se introdujo calendario de recordatorios Días del cierre a la decisión 23 31 Ponentes aceptados inscritos a tiempo 89 % 82 % Total de participantes 387 341 Reunión en una nueva ciudad Tasa de respuesta a la encuesta 34 % 28 % Satisfacción general (1–5) 4,2 4,0 Resultado neto frente al presupuesto +6.400 EUR –2.100 EUR

Definiciones y fórmulas

Escriba la fórmula junto a cada métrica para que cualquiera pueda reproducir la cifra. Estas son las que fijaríamos primero.

• Tasa de aceptación = resúmenes aceptados ÷ resúmenes enviados, sin retirados ni duplicados. Ejemplo: 280 aceptados de 412 enviados, menos 8 retirados, es 280 ÷ 404 = 69 %.
• Puntualidad de la revisión = revisiones entregadas en plazo ÷ revisiones asignadas.
• Tiempo hasta la decisión = días entre el cierre del envío y el envío de las cartas de decisión.
• Conversión de ponentes = resúmenes aceptados con ponente inscrito ÷ resúmenes aceptados.
• Coste por participante = costes totales ÷ participantes presentes.
• Tasa de respuesta a la encuesta = encuestas completadas ÷ participantes invitados.

Fijar una línea de base y objetivos

Una cifra significa poco sin comparación. El primer año, trate cada métrica como línea de base y anote las definiciones. En los años siguientes, fije objetivos modestos sobre los que pueda influir, por ejemplo reducir el tiempo hasta la decisión de 31 a 25 días, y evite objetivos que dependan de cosas fuera de su control, como el número de envíos en un año en que se celebra una reunión competidora. Revise los objetivos tras la reunión y pregunte qué impulsó cada cambio.

Evidencia cualitativa

Algunos de los resultados más importantes no son cifras. Recoja algunos comentarios de asistentes, ponentes invitados y revisores, las notas de la evaluación del comité y las colaboraciones o proyectos que comenzaron en la reunión. Un breve párrafo sobre lo que la gente dice haber ganado suele convencer a un financiador o a la junta de una sociedad mejor que una tabla. Registre la fuente y la fecha de cada comentario y pida permiso antes de citar a alguien por su nombre.

Medidas financieras

El panorama financiero debe ser lo bastante sencillo para que cualquier miembro del comité lo lea. Compare presupuesto y ejecución en cada categoría de ingresos y costes y muestre el resultado. Divida los costes en fijos y por persona, para ver qué parte del resultado procede de la asistencia. Añada el coste y el ingreso por participante y señale las partidas puntuales. Compruebe si patrocinios, cuotas y subvenciones se comportaron como estaba previsto y anote las lecciones para el presupuesto del año próximo.

Alcance y diversidad de la participación

A muchas sociedades les importa quién asiste y quién falta. Cuente los participantes por país, etapa de carrera y, cuando lo recoja legítimamente y las personas acepten compartirlo, por género u otras características. Informe solo de cifras agregadas y tenga cuidado con los grupos pequeños que podrían identificar a personas. Use las cifras para hacerse preguntas, por ejemplo si las exenciones llegaron a quienes debían, y no para clasificar a los participantes.

Medidas de comunicación

Las preguntas de los asistentes son una señal de lo bien que funcionó la información. Cuente las preguntas recibidas por correo, chat y en el mostrador y agrúpelas por tema. Un número alto de preguntas sobre el mismo asunto significa que el sitio web o el programa no eran claros. Siga la proporción resuelta por autoservicio, como un chatbot o una página de preguntas frecuentes, y compárela con la edición anterior para ver si la información es cada vez más fácil de encontrar.

Un plan de recogida de datos

Las métricas son fáciles de prometer y difíciles de recoger a posteriori. Decida desde el principio de dónde saldrá cada cifra: el sistema de envío y revisión para resúmenes y revisiones, el sistema de inscripción para participantes y pagos, los registros contables para los costes, la herramienta de encuestas para la satisfacción y el registro de asistencia o chat para las preguntas. Asigne cada fuente a un responsable y fije una fecha de exportación de datos, antes de que el equipo se disperse.

Evite las métricas de vanidad

Algunas cifras impresionan y dicen poco: visitas de página sin objetivo, impresiones en redes sociales, número de personas «interesadas». Pueden tener cabida en un informe, pero no deben orientar decisiones. Prefiera medidas vinculadas al propósito de la reunión. Si el objetivo era crear comunidad, mire la asistencia repetida y las nuevas colaboraciones; si era la calidad científica, mire los resultados de la revisión y las publicaciones posteriores a la reunión.

Usar las cifras en el traspaso

Incluya en el traspaso a la siguiente presidencia un resumen de una página con las métricas, los resultados de la encuesta y tres recomendaciones. Las cifras que no llevan a una decisión se olvidan; las que provocan un cambio merecen recogerse.