-
Notifications
You must be signed in to change notification settings - Fork 0
/
Copy pathun-video-introduttivo-di-andrej-karpathy-sugli-llm.html
86 lines (77 loc) · 5.62 KB
/
un-video-introduttivo-di-andrej-karpathy-sugli-llm.html
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
<!DOCTYPE html>
<html lang="it">
<head>
<meta charset="utf-8" />
<meta name="viewport" content="width=device-width, initial-scale=1.0" />
<meta name="generator" content="Pelican" />
<title>Un video introduttivo di Andrej Karpathy sugli LLM</title>
<link rel="stylesheet" href="/theme/css/main.css" />
<meta name="description" content="Un video per tutti su come funzionano i large language models" />
</head>
<body id="index" class="home">
<header id="banner" class="body">
<h1><a href="/">Che forma ha la polvere sotto il divano <strong>Sulla scuola, sulla fisica, sulla matematica e sui computer</strong></a></h1>
<nav><ul>
<li><a href="/pages/chi-sono.html">Chi sono?</a></li>
<li><a href="/pages/seminari-e-convegni.html">Seminari e convegni</a></li>
<li><a href="/category/fisica.html">Fisica</a></li>
<li class="active"><a href="/category/ia.html">IA</a></li>
<li><a href="/category/matematica.html">Matematica</a></li>
</ul></nav>
</header><!-- /#banner -->
<section id="content" class="body">
<article>
<header>
<h1 class="entry-title">
<a href="/un-video-introduttivo-di-andrej-karpathy-sugli-llm.html" rel="bookmark"
title="Permalink to Un video introduttivo di Andrej Karpathy sugli LLM">Un video introduttivo di Andrej Karpathy sugli LLM</a></h1>
<a href="https://twitter.com/share" class="twitter-share-button" data-count="horizontal" data-via="@S_Conradi">Tweet</a><script type="text/javascript" src="https://platform.twitter.com/widgets.js"></script>
</header>
<div class="entry-content">
<footer class="post-info">
<abbr class="published" title="2023-11-29T00:00:00+01:00">
Published: Mer 29 Novembre 2023
</abbr>
<address class="vcard author">
By <a class="url fn" href="/author/simone-conradi.html">Simone Conradi</a>
</address>
<p>In <a href="/category/ia.html">IA</a>.</p>
<p>tags: <a href="/tag/ia.html">IA</a> <a href="/tag/intelligenza-artificiale.html">intelligenza artificiale</a> <a href="/tag/llm.html">LLM</a> <a href="/tag/chatgpt.html">ChatGPT</a> </p>
</footer><!-- /.post-info --> <p>Lascio la presentazione di Andrej Karpathy al suo <a href="https://karpathy.ai">sito web</a>, rischierei di omettere qualcosa.
Pochi giorni fa Karpathy ha pubblicato sul suo canale <a href="https://www.youtube.com/@AndrejKarpathy">youtube</a> un video chiaro e illuminante sui Large Language Models.</p>
<p>Si tratta di una sintesi completa e accessibile sui modelli linguistici che stanno alla base di agenti conversazionali generativi come <em>ChatGPT</em>. </p>
<p>Se avete un'ora di tempo guardatelo, soprattutto se sapete poco o nulla dell'intelligenza artificiale che si nasconde dietro software come <em>OpenAI ChatGPT</em>, <em>Google Bard</em>, M<em>eta Llama2</em> ecc ecc...</p>
<iframe width="560" height="315" src="https://www.youtube.com/embed/zjkBMFhNj_g?si=nfI4WhhfLB3elDVu" title="YouTube video player" frameborder="0" allow="accelerometer; autoplay; clipboard-write; encrypted-media; gyroscope; picture-in-picture; web-share" allowfullscreen></iframe>
<p>E' molto interessante il parallelismo proposto da Karpathy tra l'agire dell'IA generativa e il pensiero umano, riferendosi al libro di Daniel Kahneman <a href="https://books.google.it/books/about/Pensieri_lenti_e_veloci.html?id=jvKStgAACAAJ&redir_esc=y"><em>Pensieri lenti e veloci</em></a>. Kahneman, nobel per l'economia, nel suo libro si rifà alle teorie psicologiche di Keith Stanovich e Richard West che coniarono i termini <strong>Sistema 1</strong> e <strong>Sistema 2</strong> per identificare le due modalità di pensiero umano.</p>
<blockquote>
<ul>
<li>
<p>Sistema 1. Opera in fretta e automaticamente, con poco o nessuno sforzo e nessun senso di controllo volontario.</p>
</li>
<li>
<p>Sistema 2. Indirizza l’attenzione verso le attività mentali impegnative che richiedono focalizzazione, come i calcoli complessi. Le operazioni del sistema 2 sono molto spesso associate all’esperienza soggettiva dell’azione, della scelta e della concentrazione.</p>
</li>
</ul>
</blockquote>
<p>Il libro di Kahneman merita assolutamente una lettura e ve lo consiglio. Tornando a parlare di LLM sono sicuro che molti degli utenti di ChatGPT saranno sorpresi dal sapere che ChatGPT non possiede alcun meccanismo assimilabile al Sistema 2, ma opera soltando con una modalità analoga al nostro Sistema 1!</p>
</div><!-- /.entry-content -->
</article>
</section>
<section id="extras" class="body">
<div class="social">
<h2>social</h2>
<ul>
<li><a href="https://twitter.com/S_Conradi">Twitter</a></li>
<li><a href="https://github.com/profConradi">Github</a></li>
<li><a href="mailto:[email protected]">Gmail</a></li>
</ul>
</div><!-- /.social -->
</section><!-- /#extras -->
<footer id="contentinfo" class="body">
<address id="about" class="vcard body">
Proudly powered by <a href="https://getpelican.com/">Pelican</a>, which takes great advantage of <a href="https://www.python.org/">Python</a>.
</address><!-- /#about -->
<p>The theme is by <a href="https://www.smashingmagazine.com/2009/08/designing-a-html-5-layout-from-scratch/">Smashing Magazine</a>, thanks!</p>
</footer><!-- /#contentinfo -->
</body>
</html>