Возможности взаимодействия с ИИ в перформативном искусстве
Hello Hi There (Энни Дорсен, 2010) [2]
Концепция
Новые технологии всегда моментально подхватывались художниками в целях их деконструкции, критики, создания новой эстетики. Так происходило и с новыми способами записи и трансляции видео, и с новинками робототехники, и с онлайн-платформами для общения. Произошедший в 2012 году на конкурсе ImageNet революционный прорыв в области нейронных сетей и машинного обучения принес миру новые удобства и страхи, а художникам — пищу для их осмысления посредством своих работ и новый инструмент для самовыражения. Однако, нейросети и их производное — так называемый «искусственный интеллект», создают совершенно новые проблемы и возможности, из-за чего искусство, применяющее их и ставящее их в центр обсуждения, становится уникальным и не имеющим аналогов в истории искусства.
Особенность нейросетей заключается в их главной способности — самообучении на основе заданного массива данных. Посредством обучения они обретают возможность имитировать процессы, ранее доступные только человеческому сознанию, как-то: написание текстов и общение, создание изображений, анализ речи и движений и прочее. Да, человек-инженер по-прежнему сам создает модель нейросети или используют уже обученную, но впоследствии она действует автономно и выдает результаты, похожие на результат работы упрощенного человеческого разума. Разумеется, важно помнить, что современный искусственный интеллект де-факто интеллектом не является, оставаясь лишь сложным алгоритмом с развешанной сетью данных, имеющих разный вес. Тем не менее этого вполне достаточно, чтобы Deep learning системы воспринимались людьми как отдельные искусственные сознания, отражающие цифровой след человечества, на котором они были обучены. Все это позволяет технологии в искусстве (в частности, перформативном) впервые стать актором практически наравне с человеком.
Нейросетевой ИИ — наиболее автономная и близкая к человеку искусственная сущность на сегодняшний день, открывающая новую глубину взаимодействия художника и машины в искусстве.
Изучив (кибер)перформансы, использующие искусственный интеллект или отсылающие к нему, я могу выделить пять основных видов отношений между художником-человеком и нейросетью. Некоторые из них были возможны и с роботами или программами, использующими менее продвинутые алгоритмы для работы, однако Deep learning системы выводят эти отношения на новый уровень. В своем исследовании я выделил следующие виды взаимодействия человека и ИИ: • ИИ как контекст (когда технология неотъемлема для понимания работы, но используется скорее как фон); • ИИ как соавтор (когда технология проводит перформанс вместе с человеком); • ИИ как автономный исполнитель (когда человек только задает изначальные параметры, а алгоритм действует самостоятельно); • ИИ как демиург (когда ИИ создает условия перформанса, подчиняет художника-человека); • ИИ как противник (когда художник-человек пытается заменить ИИ или соревноваться с ним). В исследовании я хочу рассмотреть их подробнее и обозначить комплекс проблем, которые затрагивает каждая из категорий отношений, а также отследить динамику зарождающихся отношений человека и ИИ.
ИИ как контекст
В работах этой категории ИИ выступает как создатель общей атмосферы или как абсолютно ведомый человеком помощник. Он меняет смысл и эстетическую составляющую произведения, но не становится одним из главных действующих лиц. Нейросеть используется только как инструмент, как еще одна технология для помощи в работе художника, ей не придается видимость личности и собственной воли. Машина абстрактна и не становится отдельной сущностью.
ΔNFANG (Марко Доннарумма, 2018) [3]
В этом театральном перформансе из цикла Humane Methods (Гуманные методы) Марко Доннарумма и его группа исследуют, как сближение человека с ИИ создает новый мир алгоритмического насилия. В этих работах ИИ анализирует биометрию перформеров и на ее основе меняет характер освещения и создает музыку. Коллаборация присутствует, но ИИ скорее задает настроение и тему, а основная роль достается человеку.
Manifesto (Билл Ти Джонс, 2019) [4]
В перформансе «Манифест» используются модели отслеживания движений и распознавания речи для создания на экране движущегося полотна текста. Попробовать повторить его можно на сайте через с помощью своей вебкамеры. ИИ лишь обрабатывает входящие данные для создания текста, упор на взаимодействие с машиной не ставится — важна скорее эстетика.
Перформанс-коллаборация «Pattern Recognition» художника Мемо Актена и хореографа Александра Уитли (2016) задействует алгоритмы отслеживания движений для исследования темы восприятия машины и человека. ИИ управляется движениями человека и направляет прожекторы в соответствии с ними, но не становится самостоятельным актором.
ИИ как соавтор
Симуляция мышления на основе алгоритмов позволяет сделать ИИ участником перформанса наравне с человеком. Такие работы зачастую исследуют возможности взаимодействия «человек-машина» в мире, где у технологий появляется возможность имитировать осознанную речь и креативное мышление. Появляются вопросы о том, что считать интеллектом и свободной волей, можно ли называть работу нейросетей креативностью, где граница между сознанием и не-сознанием.
Conversations with Bina48 (Стефани Динкинс, 2014-…) [5]
В серии документируемых перформансов художница разговаривает с социальным роботом на темы семьи, расизма, одиночества, а также обсуждает с ним его отношение к использованию людьми его «сородичей» как инструментов.
discrete figures (Rhizomatiks Research, Кайл Макдональд, 2018) [6]
На одной сцене совмещают цифровых танцоров, подчиняющихся генерируемым в реальном времени движениям, и реальных. Можно ли считать это коллаборацией человека с ИИ, или же это только совместная работа человека-инженера и человека-художника?
Ultrachunk (Мемо Актен, 2018) [7]
Подобный вопрос содержится и в этом перформансе, где Мемо Аткен организует совместную вокальную импровизацию Дженнифер Уолш и ее цифрового доппельгангера, обученного на ее же выступлениях.
GOD MODE (ep.1) (дуэт dmstfctn, 2022) [8]
В этом сложном многослойном киберформансе художники путешествуют от лица ИИ по симуляции продуктового магазина, используемой для обучения систем в магазинах без продавцов. Текст, проговариваемый ИИ, генерируется, художники модулируют его голос. Зрители с помощью мобильного приложения влияют на происходящее в симуляции, ломая ее, внося человеческий хаос и показывая границы возможностей цифровой симуляции реального пространства.
ИИ как автономный исполнитель
Логичным следствием возможности использования ИИ как исполнителя перформанса вместе с человеком становятся попытки провести перформанс без участия человека вовсе, ограничившись только сущностью, управляемой нейросетью. Как, в таком случае, разделять авторство работы? Идея перформанса все еще принадлежит человеку, но исполняется он частично непредсказуемым синтетическим «разумом».
The Zizi Show (Джейк Элвес, 2020) [9]
В этом интерактивном киберформансе Джейк Элвес предлагает зрителю примерить на созданных с помощью deepfake технологий дрэг-перформеров движения, основанные на изучении моделью движений артистов. Иногда цифровые актеры принимают сложные или невозможные позиции, которые ломают изображение. Работа демистифицирует нейросети, поднимает проблему отсутствия в стандартных датасетах квир-персон и ощупывает границы возможного для самостоятельного выступления ИИ на виртуальной сцене.
AGNES (Сесиль Б. Эванс, 2013-2014) [10]
АГНЕС — автоматический спам-бот, который сопровождал посетителей на цифровых выставках и статьях галереи Serpentine. Она не только давала комментарии происходящему на экране и подсовывала пользователю видео и изображения с других ресурсов, но и была заинтересована в самих пользователях, задавала им личные вопросы. Существует несколько интервью с ней и live-выступление, где она обсуждает возможность своей «смерти». Этот многослойный нет-арт и киберформанс задает вопрос о возможности эмоционального общения и с ИИ и восприятия его как самостоятельную личность.
ИИ как демиург
Раз, в теории, ИИ способен исполнять перфоманс автономно, можем ли мы пойти дальше и сделать ИИ главной движущей силой работы, а человека — второстепенной? И не происходит ли это уже в некоторых сферах нашей жизни? Ведь уже сегодня наш цифровой след моментально попадает в руки больших компаний, продающих его потом в датасеты для обучения тех же нейросетей.
24h HOST (Лорен Ли Маккарти, 2019) [11]
В этом 24-часовом перформансе ИИ берет бразды правления над «хозяином» вечеринки. С помощью установленных в комнате сенсоров и устройств гостей машина пытается создать психологические портреты и на их основе выдает человеку-хосту инструкции: кого с кем познакомить, о чем поговорить, кому дать какой предмет или предложить коктейль, приготовленный по сгенерированному рецепту. Задачи весьма монотонны, но машина продолжает передавать их хосту несмотря на его усталость. В каком-то смысле, в этом перформансе меняются роли человека и машины, мы видим полностью отраженный и искаженный процесс взаимодействия с компьютером. ИИ проникает в социальную сферу и диктует свои решения человеку.
Training Poses (Сэм Лавин, 2018) [12]
Из огромной библиотеки описанных изображений Microsoft’s COCO случайным образом выбирается фотография, которая была использована для тренировки алгоритма определения позы. Художник должен повторить позу с фотографии с заданной точностью, после чего программа автоматически делает совмещает его фото и исходное изображение. Диктуя человеку его движения, ИИ позволяет заглянуть в особенности машинного зрения. Каково чувствовать себя постоянно анализируемым машиной?
Five Dollars Can Save Planet Earth (Александер Ребен, 2018) [13]
Человек снова становится марионеткой в руках нейросети, написавшей собственное выступление на основе просмотренных лекций платформы TED. Всякий контроль над словами уходит в руки машины, человек становится киборгом с аугментированным речевым аппаратом, нужным только чтобы донести «мудрость» ИИ. Выступающий даже не открывает рот, вместо него открывается накладной механический, синхронизированный с записанным текстом. Единственное, что остается под контролем человека — жестикуляция.
Yesterday Tomorrow (Энни Дорсен, 2015) [14]
Но на такую коллаборацию-управление есть и позитивные взгляды. В этом перформансе-мюзикле певцы исполняют слова и мелодию, сгенерированные эволюционными алгоритмами для плавного перехода из песни Beatles «Yesterday» в песню из мюзикла «Annie» «Tomorrow», а также следуют прописанным ИИ партитурам движения. Мы теряем старый и понятный мир Вчера и стараемся оптимистично смотреть в будущий мир Завтра, где человек неотделим от машины.
ИИ как противник
Описанная в предыдущих разделах эволюция отношений человека и ИИ в искусстве в частности и в жизни в целом не может не создавать возражений и неприятных вопросов, как минимум у технопессимистов. Уже на данном этапе развития технологий нейросетей интернет пестрит публикациями, отражающими страх замены человека алгоритмами в самых разных сферах. Действительно ли это возможно? Может, это и к лучшему?
SOMEONE (Лорен Ли Маккарти, 2019) [15]
I.A. Suzie (Лорен Ли Маккарти и Дэвид Леонард, 2019) [16]
В киберформансах серии LAUREN художник пытается заменить голосовых помощников по типу Alexa для группы людей (SOMEONE) и пожилого человека (I.A. Suzie). Работы дают задуматься об неоднозначности нахождения дома псевдосознания с непрозрачной архитектурой, созданной большой корпорацией, которое слушает каждое наше слово и собирает данные о своих хозяевах. Насколько сложно подобную работу было бы исполнять человеку?
Zizi & Me (Джейк Элвес, 2020) [17]
Уже упомянутый Джейк Элвес ставит на одной сцене дрэг-квин и ее цифрового двойника, исполняющих дуэтную песню Anything You Can Do (I Can Do Better), пытаясь таким образом высмеять мнение о том, что выступление человека и ИИ можно спутать. Выступление ставит под вопрос нарратив о всемогуществе нейросетей, продвигаемый цифровыми гигантами.
Вывод
Перформанс и киберформанс представляют собой особенный вид искусства, в рамках которого по-настоящему можно раскрыть вопросы взаимодействия человека с человеком, а теперь и человека с машиной. Изучив их, можно заметить определенную структуру в видах отношений между художником-человеком и ИИ. Они разделяются на категории с не вполне четкими, но определенно видимыми границами. ИИ можно использовать как еще один инструмент, машину, не наделяя его самостью вследствие свойственного человеку магического мышления. Но чем больше развиваются технологии, тем больше «воли» и влияния на человека способна оказывать нейросеть: от соавтора и компаньона она переходит к самостоятельной сущности с заданными параметрами, а затем начинает сама управлять человеком, продолжая изучать его. Такое развитие не может не вызывать волнения, поэтому появляются перформансы, ставящие ИИ в позицию антагониста. Подобное разделение в отношениях с ИИ наблюдается и в обществе в целом.
Проект перформанса
Разговор
Идея: киберформанс, который должен состоять из наслоения возможностей взаимодействия с нейросетями. Пусть нейросеть управляет исполнителями, а зрители в это время управляют нейросетью. Кто в таком случае находится в контроле — художник-демиург, исполнители, нейросеть или зрители? Кто будет соавтором, а кто — нет? Как будут вести и чувствовать себя участники процесса?
Исполнение: в замкнутом помещении с белыми стенами и отсутствием обстановки по центру стоят два стула так, чтобы сидящие на них исполнители смотрели друг на друга. За спинами у них стоят телесуфлёры, видимые сидящему напротив. Процесс запечатлевает и транслирует в прямой эфир в интернет камера. На протяжении получаса на телесуфлёры с помощью сложной нейросети, способной меняться на лету в зависимости от вводимых данных, выводится текст спора, который исполнители должны озвучивать так, будто они спорят друг с другом. Зрители прямой трансляции могут писать в чат команды по изменению настроения и характера фраз или слова, которые должны быть в них включены. Команды и слова, которые были повторены минимум 3 раза, повлияют на нейросеть.
Пример: сгенерированные с помощью нейросети Яндекса «Балабоба» фрагменты диалогов [18]
