Нейросети в картинной раме

Выступление на большой сцене Нового кампуса МГТУ им. Баумана в рамках цикла Москва 2030. Я делюсь проектами на стыке ИИ и искусства (Черкашины, выставка Нейросеть: кто кого.., многоагентное рисование и др.), размышляем об авторстве и творческих способностях нейросетей.

Transcript

1. 2 СЕНТЯБРЯ | 17:00 Дмитрий Сошников, НИУ ВШЭ/МАИ/Yandex Cloud Нейросети в картинной раме МОСКВА 2030
2. 2 Личная история МОСКВА 2030
4. 4 Личная история МОСКВА 2030
5. 5 Как к этому относиться? МОСКВА 2030 Кто автор? Это искусство? Творчество? Это коллаж из существующих картин или что-то новое?
6. 6 Пример из жизни МОСКВА 2030 Very realistic photograph of living computer in the dark shadowy forest, matte colors, low key photography, Canon EOS 5D, Winner of photo contest, HD, 8K, highly detailed Дмитрий Сошников + Leonardo.ai «Eye of the Forest», 2023
7. Как работают нейросети 7
8. Паттерны нижнего уровня 8
9. Многоуровневая свёртка 9
10. 10 Как нейросеть видит кошку МОСКВА 2030 Siamese Cat, p=0.92 Zebra, p=0.89
11. 11 Генеративные сети - 2014 МОСКВА 2030
12. 12 Ответы на важные вопросы МОСКВА 2030
13. 13 Как это работает: обратная диффузия МОСКВА 2030
14. 14 Языковые модели МОСКВА 2030
15. 15 Эмбеддинги: смысл слов МОСКВА 2030
16. 16 GPT МОСКВА 2030
17. 17 GPT МОСКВА 2030
18. Text to Image 18
19. Единое пространство смыслов 19
20. YandexART 20 кошка-пилот, сидящая в шлеме в кабине самолёта и летящая над облаками
21. YandexART 21 On my way home… Studio portrait of a man, CANON EOS-5D 50mm Lens
22. Prompt Engineering 22
24. Валера и Наташа Черкашины 24
25. Валера и Наташа Черкашины 25
26. Валера и Наташа Черкашины 26
27. Валера и Наташа Черкашины 27
28. Человек и нейросеть: кто кого создаёт? 28
29. Дарья Неретина, “Тайная жизнь” 29 Гербарии Анны Голубкиной, коллекция Третьяковской Галереи
30. Дарья Неретина, “Тайная жизнь” 30 Генерация обученной нейросетью, Stable Diffusion XL / Dreambooth Training
31. Алгоритмическое искусство 31
32. Два подхода к использованию генеративного ИИ 32
33. Многоагентное рисование 33 Yandex ART. Промпт: Бедность.
34. Многоагентное рисование 34 Вася: Ты - художник, который хочет нарисовать картину с помощью генеративного ИИ. Ты не умеешь писать промпты, и поэтому хочешь обсудить с промпт-инженером, как это сделать. Ваша задача совместными усилиями нарисовать картину на тему: {topic}. Твоя задача - говорить, что должно быть изображено на картине, но не надо писать промпт для нейросети - просто говори, что бы ты хотел видеть. Коля: Ты - промпт-инженер, который умеет составлять промпты для генеративных моделей. Твоя задача – помочь художнику нарисовать картину. В случае необходимости задавай ему вопросы, а когда ты поймёшь (и **только когда поймёшь**), что промпт уже готов - напиши фразу ГОТОВО:, и за ней получившийся промпт. Не пиши промпт и фразу "ГОТОВО", если ты не выяснишь все детали у художника, делай это только после того, как всё обсудил. Фраза ГОТОВО: и промпт должны быть единственным, что есть в твоем окончательном ответе, после которого диалог прекращается. Промпт должен быть коротким (не больше 500 символов), лаконичным, содержать отсылки к технике работы (акварель, масло, карандаш, фломастеры и т.д), и возможно к художественным стилям и приёмам.
35. Многоагентное рисование 35 Вася: Добрый день! Я хочу нарисовать картину про бедность. Вы поможете мне составить промпт? Коля: Здравствуйте! Давайте начнём. Вы хотите нарисовать картину про бедность в определённом стиле или технике? Хотите ли вы использовать какие-то конкретные элементы, например, людей, здания или определённые цвета и оттенки? Я бы хотел получить более чёткое представление о том, что вы хотите увидеть на своей картине. После того как мы обсудим детали, я составлю промпт. Вася: Хочу, чтобы на картине была изображена бедность так, как её видит художник-реалист. Картина должна быть выполнена в мрачных тонах, изображая унылые городские трущобы с обшарпанными стенами и разбитыми окнами. В центре композиции — несколько бездомных людей, которые собрались у костра. Они греются, а вокруг них — сырость и мрак ночи. Лица этих людей усталые и задумчивые, одежда грязная и изношенная. Этот контраст между теплом огня и холодом окружающей ночи должен подчёркивать чувство безысходности и тоски. На фоне этой сцены виднеется силуэт большого города с небоскрёбами, который будто бы равнодушен к судьбам тех, кто оказался на обочине жизни. Коля: ГОТОВО: нарисуй в стиле реализма картину «Бедность»: в мрачных тонах изображён вечер в трущобах с обшарпанными стенами и разбитыми окнами. У костра греются бездомные люди в изношенной одежде, их усталые задумчивые лица освещены пламенем. На фоне виднеется силуэт равнодушного города с небоскрёбами. Техника — акварель.
36. Многоагентное рисование 36 Город забытых надежд Перед зрителем предстаёт мрачная и тревожная картина, которая заставляет задуматься о контрасте между бедностью и богатством, между отчаянием и надеждой. Разрушенные здания и обветшалые дома символизируют упадок и безысходность, которые охватывают целые районы и жизни людей. В то же время вдалеке виднеются современные постройки, словно напоминание о том, что прогресс и развитие существуют параллельно с бедностью и разрушением. Это противоречие создаёт ощущение диссонанса и подчёркивает глубину проблемы. Картина вызывает чувство сострадания и тревоги за судьбы людей, которые оказались в трудной жизненной ситуации. Она заставляет задуматься о том, как важно не оставаться равнодушным к проблемам бедности и неравенства, и о том, что каждый из нас может внести свой вклад в улучшение жизни окружающих.
37. Может ли ИИ придумать что-то новое? 37 Напиши 10 абсолютно бессмысленных слов
38. Креативность ИИ 38
39. Тестируем нашу креативность 39 Придумайте несколько необычных и разнообразных способов использовать куриные яйца не по назначению (не в пищу)
40. Ответы ChatGPT 40
41. Дивергентная креативность 41 Koivisto, M., Grassini, S. Best humans still outperform artificial intelligence in a creative divergent thinking task. Sci Rep 13, 13601 (2023).
42. Дивергентная креативность 42 Erik E. Guzik et al, The Originality of Machines: AI Takes the Torrance Test., Journal of Creativity (2023). TCTT: Torrance Test for Creative Thinking • скорость генерирования идей • степень уникальности • уровень проработанности • 2700 студентов • ChatGPT входит в top 1% по скорости и оригинальности ответов
43. 43 Мораль МОСКВА 2030
44. МОСКВА 2030 http://t.me/shwarsico Облачный адвокат