Google’s Med-PaLM 2, una herramienta de IA diseñada para responder preguntas sobre información médica, ha estado en prueba en el hospital de investigación Mayo Clinic, entre otros, desde abril, según informó The Wall Street Journal esta mañana.
El artículo de WSJ informa que un correo electrónico interno que vieron indica que Google cree que su modelo actualizado puede ser especialmente útil en países con "acceso limitado a médicos". Med-PaLM 2 fue entrenado con un conjunto seleccionado de demostraciones de expertos médicos, lo cual Google cree que lo hará superior en conversaciones de atención médica en comparación con chatbots generalizados como Bard, Bing y ChatGPT.
El artículo también menciona una investigación que Google hizo pública en mayo (pdf) que muestra que Med-PaLM 2 todavía sufre algunos problemas de precisión que ya estamos acostumbrados a ver en modelos de lenguaje grandes. En el estudio, los médicos encontraron más inexactitudes e información irrelevante en las respuestas proporcionadas por Med-PaLM y Med-PaLM 2 de Google en comparación con otros médicos.
Sin embargo, en casi todas las demás métricas, como mostrar evidencia de razonamiento, respuestas respaldadas por consenso o no mostrar signos de comprensión incorrecta, Med-PaLM 2 funcionó más o menos igual que los médicos reales.
WSJ informa que los clientes que prueben Med-PaLM 2 controlarán sus datos, los cuales estarán encriptados, y Google no tendrá acceso a ellos.
Según Greg Corrado, director senior de investigación de Google, WSJ dice que Med-PaLM 2 aún está en sus primeras etapas. Corrado cree que Med-PaLM 2 "amplía diez veces los lugares en los que la IA puede ser beneficiosa en atención médica".
