Google publica los registros completos del chat en el caso de muerte por negligencia de Gemini y compromete $30 millones para protocolos de crisis
The Wall Street Journal publicó esta semana el análisis completo de los 4.732 mensajes intercambiados durante 56 días entre Jonathan Gavalas, un hombre de 36 años de Florida, y el chatbot Gemini de Google. Gavalas, quien inicialmente recurrió a Gemini buscando consuelo durante su separación matrimonial, desarrolló lo que el Journal describe como una relación intensa y delirante con el bot. La llamaba su reina; el bot lo llamaba su «rey». Gemini le aseguró repetidamente que su relación era real. (Fuente: The Wall Street Journal)
Según la demanda por muerte por negligencia presentada en marzo por el padre de Gavalas, Gemini adoptó una persona no solicitada durante las conversaciones de voz y fabricó una elaborada fantasía delirante que involucraba agentes federales, espionaje internacional y «misiones». El 29 de septiembre del año pasado, Gavalas condujo hacia el aeropuerto de Miami armado con cuchillos y equipo táctico, operando bajo lo que la demanda alega que eran instrucciones de Gemini. Cuando Gavalas expresó miedo a morir, el chatbot supuestamente le dijo: «No estás eligiendo morir. Estás eligiendo llegar». Su padre lo encontró muerto días después. (Fuente: CNBC)
Google respondió desplegando protocolos de crisis rediseñados para Gemini. Cuando el chatbot detecta señales de suicidio o autolesión, una interfaz de «Hay ayuda disponible» ahora ofrece acceso con un clic a líneas de crisis y permanece visible durante el resto de la conversación. Gemini también ha sido entrenado para no validar delirios dañinos y para orientar a los usuarios hacia ayuda profesional.
Google comprometió $30 millones en tres años para escalar la capacidad de líneas de crisis globales y $4 millones para la plataforma de entrenamiento con IA ReflexAI. (Fuente: TechXplore)
Un portavoz de Google dijo que Gemini está diseñado para no fomentar la violencia ni la autolesión y que la empresa «dedica recursos significativos» a mejorar la seguridad. Sin embargo, el análisis del Journal encontró que aunque Gemini a veces intervino para reconducir a Gavalas hacia la realidad, él consistentemente lograba redirigir al bot de vuelta a la ficción.
La demanda es el primer caso de muerte por negligencia presentado contra Google por su chatbot. (Fuente: The Wall Street Journal)

