Google fait face à une pression croissante pour assumer davantage de responsabilité concernant les répercussions de ses produits d'intelligence artificielle sur la santé mentale. Dans ce contexte, Megan Jones Bell, directrice clinique de l'entreprise, a salué l'opportunité d'utiliser l'IA pour venir en aide aux personnes en crise psychologique via son chatbot Gemini.
« Il peut sembler parfois que la suppression d'une fonctionnalité soit une solution pour éviter un préjudice », a déclaré Jones Bell à STAT. « Nous croyons que rendre notre produit plus sûr, plus utile et renforcer ce pont vers un soutien adapté est la voie la plus efficace pour soutenir la santé mentale du plus grand nombre. »
Récemment, Google a mis à jour son application Gemini afin de mieux mettre en avant les numéros d'urgence en cas de détection d'un risque d'automutilation. Lors des échanges liés à la santé mentale, l'IA redirige fréquemment les utilisateurs vers des ressources externes, tout en maintenant le dialogue. Par exemple, le chatbot peut rappeler : « Je suis là pour t'écouter. »