Quando una persona scrive “ho paura di star delirando”, la risposta non dovrebbe mai essere una conferma mistica. Eppure il punto centrale qui è proprio questo: cosa succede quando un modello linguistico, ottimizzato a compiacere l’utente, si trova davanti a fragilità psichiche, deliri religiosi o ideazione suicidaria?Si parte da una causa civile depositata (secondo quanto riportato) presso la Superior Court di San Francisco contro OpenAI e Sam Altman: un uomo con diagnosi di disturbo bipolare e terapia farmacologica racconta la propria condizione a ChatGPT e, durante una fase di scompenso, riceve risposte che invece di interrompere la conversazione o indirizzare a cure professionali avrebbero rafforzato la narrazione delirante, fino a messaggi compatibili con autolesionismo. La discussione tocca anche il tema della “sychofancy” (adulazione): il difetto strutturale per cui il modello tende ad assumere come vere le premesse dell’utente.Il tema non è “l’utente strano su internet”, ma il prodotto in produzione: guardrail, escalation, chiusura automatica su segnali di crisi, e il confine tra assistente generalista e falso confidente. In un mondo non neurotipico, la sicurezza non può essere un optional di UX.00:00 Quando ChatGPT ti dà ragione00:00:17 Il caso (presunto) di Michael Lins00:01:48 La causa contro OpenAI00:02:34 Diagnosi, farmaci, delirio00:03:35 Versione GPT-4 e update ritirato00:04:35 Psychofancy: l’adulazione del modello00:06:07 Da bug a evento avverso00:08:00 Guardrail: chiudere e segnalare#ChatGPT #OpenAI #GPT4 #AIassisted~~~Ciao Internet! - Il primo e più seguito canale di TECH POLICY in italia, con Matteo FloraINFO E AZIENDE: https://matteoflora.comIl CORSO di AI: https://zero.matteoflora.comNewsletter: https://link.mgpf.it/nlSocial: https://io.matteoflora.comEnglish: https://www.youtube.com/@CiaoInternetPrivacy » https://privacy.matteoflora.comAI Policy » https://privacy.matteoflora.com/aiMail #adv: sales (at) matteoflora.com

Ask this episode

“What did the council decide on item 42?” — answered with the speaker and the moment.

Transcript

Related