La contribución de la inteligencia artificial a la búsqueda de literatura biomédica: ¿revolucionando o complicando?

Hay un número creciente de artículos sobre IA conversacional (es decir, ChatGPT) para generar revisiones y resúmenes de literatura científica. Sin embargo, la evidencia comparativa retrasa su amplia adopción por parte de muchos médicos e investigadores. Exploramos la utilidad de ChatGPT para la búsqueda de literatura desde una perspectiva del usuario final a través de la lente de médicos e investigadores biomédicos. Comparamos cuantitativamente las versiones básicas de la utilidad de ChatGPT con métodos de búsqueda convencionales como Google y PubMed. Además, probamos si las herramientas de soporte al usuario de ChatGPT (es decir, complementos, función de navegación web, ingeniería de indicaciones y GPT personalizados) podrían mejorar su respuesta en cuatro escenarios comunes y prácticos de búsqueda de literatura: (1) temas de alto interés con abundante información, (2) temas de nicho con información limitada, (3) generación de hipótesis científicas y (4) para preguntas emergentes de prácticas clínicas. Nuestros resultados demostraron que las funciones básicas de ChatGPT tenían limitaciones en consistencia, precisión y relevancia. Las herramientas de soporte al usuario mostraron mejoras, pero las limitaciones persistieron. Curiosamente, cada escenario de búsqueda bibliográfica planteó diferentes desafíos: abundancia de fuentes de información secundaria sobre temas de gran interés y literatura poco convincente sobre temas nuevos o especializados. Este estudio analizó ejemplos prácticos que destacan tanto el potencial como las dificultades de integrar la IA conversacional en los procesos de búsqueda bibliográfica y subrayan la necesidad de realizar evaluaciones comparativas rigurosas de las herramientas de IA en la investigación científica.

Resumen del autor

A medida que las herramientas de Inteligencia Artificial (IA) generativa se vuelven cada vez más funcionales, la promesa de esta tecnología genera un gran entusiasmo y anticipación en todo el mundo, incluyendo a la comunidad científica y biomédica en general. A pesar de este creciente entusiasmo, los investigadores que buscan hallazgos robustos, fiables, reproducibles y revisados ​​por pares han expresado su preocupación por las limitaciones actuales de la IA, en particular en la difusión y promoción de desinformación. Esto subraya la necesidad de continuar el debate sobre cómo emplear adecuadamente la IA para optimizar las prácticas de investigación actuales. Nosotros, como miembros de la comunidad científica y usuarios finales de herramientas de IA conversacional, buscamos explorar incorporaciones prácticas de la IA para optimizar las prácticas de investigación. En este estudio, investigamos si las tareas de investigación basadas en texto (minería de literatura científica) pueden externalizarse a ChatGPT y en qué medida podría ser necesaria la evaluación humana. Probamos diferentes modelos de ChatGPT, así como complementos como plugins y GPT personalizado en diferentes contextos de búsqueda de literatura biomédica. Nuestros resultados muestran que, si bien actualmente ChatGPT no cumple con el nivel de fiabilidad necesario para su adopción generalizada en la búsqueda de literatura científica, como las herramientas de IA conversacional avanzan rápidamente (una tendencia destacada por el desarrollo de aumentos en este artículo), prevemos un momento en el que ChatGPT puede convertirse en un gran ahorro de tiempo en las búsquedas bibliográficas y hacer que la información científica sea fácilmente accesible.

 El trabajo

Yip R, Sun YJ, Bassuk AG, Mahajan VB (2025) Artificial intelligence’s contribution to biomedical literature search: revolutionizing or complicating?. PLOS Digital Health 4(5): e0000849.

Disponible en https://n9.cl/e7t7s