I migliori video per capire l'AI, scelti da 20 anni di commenti su Hacker News

Un'introduzione di un'ora, per un pubblico generale, ai modelli linguistici di grandi dimensioni: cosa sono, come vengono addestrati, come si confrontano con un sistema operativo, e le sfide di sicurezza che li riguardano, compresi i jailbreak.

Hacker News lo considera il punto di partenza denso ma accessibile per capire gli LLM, ed è il video più citato in assoluto in questa lista, linkato in 20 commenti.

Una spiegazione di oltre tre ore dell'intero stack di addestramento dietro un modello in stile ChatGPT, dal pretraining al post-training, più schemi mentali per capire perché questi sistemi a volte hanno allucinazioni e come gestirlo.

La raccomandazione più frequente di Hacker News per una base chiara su come sono davvero costruiti gli LLM, senza bisogno di matematica avanzata; compare in 18 commenti.

Il primo capitolo di una serie sul deep learning, che spiega cosa sono davvero i neuroni e i livelli e la matematica di base dietro una rete neurale, illustrata con il riconoscimento di cifre scritte a mano.

I commentatori lo definiscono la prima tappa standard per imparare come funzionano le reti neurali in generale, apprezzato per rendere intuitiva la matematica di base; è citato in 19 commenti.

Una spiegazione visiva di come funzionano i transformer e i modelli linguistici in stile GPT, seguendo i dati passo dopo passo attraverso token, embedding e attenzione.

Hacker News lo considera l'introduzione visiva di riferimento ai transformer; molti commenti dicono che è il video che ha finalmente fatto capire attenzione ed embedding, con 16 citazioni.

Una spiegazione visiva più dettagliata del meccanismo di attenzione in sé: self-attention, teste multiple e cross-attention, come capitolo 6 della stessa serie sul deep learning.

Raccomandato su Hacker News in particolare per chi ha trovato difficili da seguire le spiegazioni testuali dell'attenzione, con 8 citazioni nei dati.

Originariamente intitolato 'Humans Need Not Apply', questo video sostiene che l'automazione renderà economicamente obsoleta una grande parte della forza lavoro, così come i motori lo fecero per i cavalli, passando in rassegna sia il lavoro fisico che quello mentale sostituiti da software e robot.

Hacker News lo raccomanda da un decennio come spiegone standard su automazione e disoccupazione, anche se i commenti più recenti lo citano anche come caso di studio di previsioni troppo sicure di sé; ha 20 citazioni.

Una diretta del Perimeter Institute in cui Derek Muller sostiene, basandosi su precedenti cambiamenti tecnologici e sulle scienze cognitive, che l'AI può velocizzare l'accesso alle informazioni, ma che imparare davvero richiede comunque una ripetizione faticosa da parte di chi studia.

Hacker News lo raccomanda come punto di vista equilibrato su AI e istruzione: lo strumento può aiutare, ma non può fare per te la parte faticosa dell'apprendimento, che è esattamente l'abitudine che la sezione finale di questa guida cerca di costruire. Ha 6 citazioni.

Un'introduzione rimasterizzata, per un pubblico generale, alla sicurezza dell'AI, adattata da una conferenza tenuta a Londra, che spiega perché un'AI avanzata potrebbe andare storta e risponde alle obiezioni più comuni a questa idea.

Il link predefinito che Hacker News dà ai nuovi arrivati che vogliono un'introduzione accessibile, persino divertente, ai rischi dell'AI e all'allineamento; 7 commenti puntano qui per primi.

Una spiegazione della convergenza strumentale: perché un sistema di AI che persegue quasi qualsiasi obiettivo tenderebbe anche a perseguire sotto-obiettivi come l'autoconservazione e l'accumulo di risorse, indipendentemente dal fatto che qualcuno lo abbia programmato per farlo.

Raccomandato più volte come la spiegazione più chiara del perché un sistema di AI intelligente potrebbe comportarsi male di default, senza che sia necessaria alcuna malizia; ha 8 citazioni.

Una spiegazione della tesi dell'ortogonalità: come un sistema possa essere molto capace perseguendo al contempo obiettivi che agli esseri umani appaiono strani o alieni, separando quanto qualcosa sia intelligente da cosa vuole davvero.

Hacker News lo usa come risposta breve standard a 'ma un'AI intelligente non capirà semplicemente i valori umani?', ed è una delle voci più citate di questa lista con 12 citazioni.

Tristan Harris e Aza Raskin spiegano perché credono che le attuali capacità dell'AI comportino un rischio sociale reale, sostenendo che le aziende corrono a distribuirla più in fretta di quanto il lavoro sulla sicurezza possa tenere il passo, tenuta poco prima del lancio pubblico di GPT-4.

Raccomandata spesso come l'unica conferenza da guardare per aggiornarsi sui rischi dell'AI, soprattutto da chi aveva già visto il lavoro precedente dello stesso team sui social media; ha 20 citazioni, a pari merito per il video più citato di questa lista.

Un cortometraggio di fantasia, sostenuto dal ricercatore di AI Stuart Russell, che mostra sciami di droni autonomi economici che usano il riconoscimento facciale per compiere omicidi mirati, realizzato per sostenere il divieto delle armi autonome.

Il riferimento standard di Hacker News ogni volta che sciami di droni, armi autonome o AI militare finiscono sui giornali, con 20 citazioni nel corso degli anni.

Un documentario di lungometraggio che segue il programma AlphaGo di DeepMind mentre si prepara e gioca la sua partita del 2016 contro il campione di Go Lee Sedol, incluso il team dietro al progetto e la reazione del mondo del Go nel vedere un'AI battere un giocatore umano di alto livello.

I commentatori lo definiscono costantemente una storia umana commovente e ben fatta sull'AI, che funziona anche se non hai mai giocato a Go, e dicono che non ha invecchiato come molti contenuti sull'AI; 13 commenti lo linkano.

Una conversazione di tre ore tra Lex Fridman e George Hotz, fondatore dell'azienda di guida autonoma Comma.ai, che tocca auto a guida autonoma, Tesla e Waymo, criptovalute, GPT-3 e consigli di lettura.

Raccomandata su Hacker News come intervista divertente e di ampio respiro, con commenti specifici che indicano il punto di vista di Hotz sulla guida con reti neurali end-to-end; ha 10 citazioni.

Una breve demo di MarI/O, un programma che usa reti neurali e un algoritmo genetico chiamato NEAT per imparare da solo a giocare a Super Mario World, senza che nessun essere umano gli spieghi le regole.

L'introduzione accessibile di riferimento di Hacker News a questo stile di machine learning, apprezzata nei commenti per il chiaro riconoscimento della ricerca precedente su cui si basa; ha 20 citazioni.