Насколько LLM умны и креативны

Выступление на конференции T1 Impulse 2025

Transcript

1. Насколько LLM умны и креативны Дмитрий Сошников Доцент, НИУ ВШЭ/МАИ Тех.руководитель лаборатории генеративного ИИ Школы дизайна НИУ ВШЭ, ex-Microsoft http://soshnikov.com – @shwars
5. Что такое LLM?
7. Понимает ли нейросеть смысл?
8. GPT-3 Британские исследователи университета им. Джона Леннона в Ливерпуле на прошлой неделе закончили исследования, посвященные влиянию вируса на музыкальные предпочтения английской молодёжи. Они обнаружили, что у людей, заражённых вирусом иммунодефицита человека, музыкальные вкусы изменились. В результате, по мнению специалистов, в будущем, как минимум, половина британцев будет слушать музыку с преобладанием рок-мелодий. В исследовании принимали участие более 100 молодых британцев в возрасте от 14 до 18 лет. В результате оказалось, что среди участников эксперимента, заражённых вирусом иммунодефицита, рок-музыку слушали только 13%, а в группе, заражённой не-ВИЧ-вирусом - только 7%. По словам профессора Гарварда Майкла О'Салливана, результаты исследования говорят о том, что музыкальное развитие молодых людей в Великобритании находится в прямой зависимости от наличия у них вируса иммунодефицита человека. «Наше исследование показывает, что если у людей, заражённых вирусом иммунодефицита человека, музыка будет преобладать в жизни, то у тех, у кого его нет, она не будет иметь особого значения. И наоборот, если у молодых людей будет преобладать рок-музыка, то в будущем их музыкальные вкусы, вероятно, изменятся», - сказал профессор.
9. Предсказание слов Британские исследователи университета им. Джона Леннона в Ливерпуле на прошлой неделе закончили исследования, посвященные влиянию вируса на музыкальные предпочтения английской молодёжи. Они обнаружили, что у вирусы мозг люди пациенты людей пациентов вируса молодых , без с заражённых людей любителей
10. Предсказание слов Британские исследователи университета им. Джона Леннона в Ливерпуле на прошлой неделе закончили исследования, посвященные влиянию вируса на музыкальные предпочтения английской молодёжи. Они обнаружили, что у 0.1 люди 0.05 рибофлавин 0.00 по 0.03 иногда 0.01 британские учёные =
11. Эмбеддинги
12. Внутреннее внимание The animal didn’t cross the street because it was too tired The animal didn’t cross the street because it was too wide
13. Внутреннее внимание Вася любил овощи, поэтому он заказал кабачки с колбасой Вася любил овощи поэтому он заказал кабачки с колбасой Вася любил овощи поэтому он заказал кабачки с колбасой Вася любил овощи поэтому Вася заказал кабачки с колбасой K подлежащее V Вася Q подлежащее Эмбеддинги
14. GPT Контекст …. 0,10 помидорами 0,11 колбасой 0,03 салом 0,00 зефир 0,00 навозом 0,05 беконом 0,001 персиками 0,00 ерундой Вася любил овощи поэтому он заказал кабачки с
15. Пространство смыслов Британские исследователи университета им. Джона Леннона в Ливерпуле на прошлой неделе закончили исследования, посвященные влиянию вируса на музыкальные предпочтения английской молодёжи. Они обнаружили, что у 0.1 люди 0.05 рибофлавин 0.00 по 0.03 иногда 0.01
16. Стохастический попугай
17. Понимает ли нейросеть смысл?
18. Примеры совмещения смыслов Придумай слово, которое бы совмещало кошку и песочные часы Хронофелис / Хронофелия: Хроно- (время) + фелис (кошка, от лат. Felis). "Хронофелис" звучит как биологический вид, "Хронофелия" — как любовь ко времени или состояние. Что общего у кошки и песочных часов? "Жидкое" состояние: Песочные часы: Песок внутри ведет себя как жидкость — он течет, принимая форму сосуда. Кошка: Знаменитая способность кошек протискиваться в невероятно узкие пространства и принимать причудливые, расслабленные позы породила мем о том, что кошки — это не твердое тело, а жидкость. Эта "текучесть" и способность заполнять предоставленный объем — забавная параллель с песком в часах.
19. Философский зомби и психопат
20. Писать на самом деле очень просто. Ты просто садишься перед пишущей машинкой и начинаешь истекать кровью
21. Может ли ИИ придумать что-то новое?
22. Придумай совершенно бессмысленные слова Лорфиплю Взгломзик Черпаклюн Треволдин Мурзикав Плинтрасил Гваркноп Зумбалик Флерспит Омбрелиг
23. Very realistic photograph of living computer in the dark shadowy forest, matte colors, low key photography, Canon EOS 5D, Winner of photo contest, HD, 8K, highly detailed
24. Теория креативности Exploration Exploitation vs.
25. Галлюцинации, креативность и температура t=∞ t=0 Пой инд ар кра сча ноль и она воск кре, на сил ве име кор талв апр нужн цел Я считаю, что это хорошо, что это хорошо, что это хорошо… t=1 По моему мнению, это прекрасно, когда люди подходят ответственно….
27. Естественный удобритель – раздробленные скорлупы яиц можно использовать в качестве кальциевого удобрения для садовых растений. Основа для декора – чистые скорлупы яиц можно окрашивать, лакировать и использовать для создания мелких декоративных элементов, например, ваз для миниатюрных цветов или небольших пасхальных поделок. Чистящее средство – измельченная скорлупа, смешанная с немного воды, хорошо подходит для чистки труднодоступных мест или предметов с шероховатой поверхностью, например, грязной посуды. Средство от вредителей – рассыпанная вокруг растений измельченная скорлупа яиц может отпугивать некоторых вредителей, таких как слизни и улитки. Наполнитель для подушек – тонко измельченная скорлупа яиц может быть использована как один из компонентов наполнителя для декоративных подушек. Компонент для изготовления мозаики – использование фрагментов скорлупы в качестве мозаичных камней при создании картин или украшений. Основа для миниатюрных садов – половинки скорлупы можно использовать как контейнеры для выращивания мелких растений или трав. Плавающие свечи – половинки чистых скорлуп можно заполнить воском и фитилем, создав оригинальные плавающие свечи для украшения водоемов или ванны. Упаковочный материал – измельченная скорлупа может служить защитным буферным материалом при упаковке хрупких предметов. Натуральная косметика – порошок из скорлупы яиц можно использовать в домашних скрабах для лица или тела, благодаря его абразивным свойствам.
28. Эгглет Скорлупелье
29. Дивергентная креативность AUT: Alternative Usage Test Koivisto, M., Grassini, S. Best humans still outperform artificial intelligence in a creative divergent thinking task. Sci Rep 13, 13601 (2023). TCTT: Torrance Test for Creative Thinking • скорость генерирования идей • степень уникальности • уровень проработанности Erik E. Guzik et al, The Originality of Machines: AI Takes the Torrance Test., Journal of Creativity (2023). • 2700 студентов • ChatGPT входит в top 1% по скорости и оригинальности ответов
30. Мораль 1: Нейросети крутые, понимают смысл и могут дивергентно креативить лучше многих людей. Надо их уважать!
31. Системы мышления Система 1 Система 2 Сколько будет 12*11? 100 с небольшим Сколько будет 12*11? Ага, попробую умножить. 12*10=120 + 12 = 132.
32. Агентные технологии: мета-рассуждения Пункт 1 Задача от пользователя Reason План Выпол- нение Результат Ответ Act Observe LLM LLM+Tools Память ReAct Agent
33. Мораль 2: Рассуждающие нейросети и агенты ещё лучше могут решать задачи.
34. Психологическое влияние LLM Творческая лень LLM – мыслительный экзоскелет Перенос мотивации и легкий дофамин С внутренней (радость творчества) на внешнюю (радость результата) Кризис идентичности и синдром самозванца Кто автор произведения? Что ценного я могу привнести? Галина Пушкарь, доц. МГУ/МГИМО
35. Творческая лень: LLM делает нас глупее? Kosmyna, Nataliya, et al. "Your brain on ChatGPT: Accumulation of cognitive debt when using an AI assistant for essay writing task." arXiv preprint arXiv:2506.08872 4 (2025). LLM Поиск Мозг 3x
36. Творческая лень: LLM делает нас глупее? Kosmyna, Nataliya, et al. "Your brain on ChatGPT: Accumulation of cognitive debt when using an AI assistant for essay writing task." arXiv preprint arXiv:2506.08872 4 (2025). LLM Поиск Мозг 3x LLM Мозг
37. Перенос мотивации: эксперимент Деси Deci, E.L. (1995). Why we do what we do: The dynamics of personal autonomy. New York: G. P . Putnam’s Sons.
38. Человек и ИИ Уникален Обучался по индивидуальной траектории Эмоционален Усреднённый Обучался примерно на одном и том же Безэмоционален Вежлив до отвращения
39. Мораль 3: Надо осознать свою уникальность и понять, как встроиться в ткань жизни, чтобы приносить ценность вместе с нейросетями
40. Есть ли душа в творчестве человека / ИИ?
41. Валера и Наташа Черкашины
42. Обученная нейросеть в стиле Черкашиных
43. Валера ИИ Наташа ИИ Митя Нейросеть, конечно, не может сама создать произведение - она лишь делает заготовку, "матрицу" - в которую мы затем можем вдохнуть жизнь, "одухотворить" её, чтобы получилось законченное произведение. Но мы очень впечатлены возможностями ИИ (как мы его называем, "Иван Иваныча"), можно сказать, что он даже дал некоторый новый импульс нашему искусству. Валера Черкашин, Художник, перформансист
44. Применим научный подход! Van Hees J. et al. Human perception of art in the age of artificial intelligence //Frontiers in Psychology. – 2025. – Т. 15. – С. 1497469. How Did You Do on an AI Turing Test (2024) * Точность распознавания: ~60% * Даже ИИ-скептики предпочитали ИИ
45. А как сказываются предубеждения? Bellaiche L. et al. Humans versus AI: whether and why we prefer human- created compared to AI-created artwork //Cognitive research: principles and implications. – 2023. – Т. 8. – №. 1. – С. 42. (Springer)
46. Мораль Нейросети крутые, понимают смысл и могут дивергентно креативить лучше многих людей. Надо их уважать! Роль души сильно преувеличена. Рассуждающие нейросети и агенты ещё лучше могут решать задачи. Надо осознать свою уникальность и понять, как встроиться в ткань жизни, чтобы приносить ценность вместе с нейросетями ❶ ❷ ❸
47. http://soshnikov.com http://t.me/shwarsico http://vk.com/shwars