Евгений Махина – Лабиринты будущего. Как увидеть завтра уже сегодня (страница 9)

Говоря об автоматизации чего-то, мы и вовсе часто не договариваемся об определениях. Национальное управление по безопасности дорожного движения США, например, решило навести порядок47 в терминологии, касающейся беспилотных автомобилей. Управление выделило несколько уровней автоматизации, где 0 – это полноценное управление водителем (автоматизированные системы только информируют человека), 5 – водитель становится пассажиром (управление полностью передано автоматике). На каком уровне находятся существующие автомобили с тем, что мы называем «автопилотом»? Между 2 и 3. Описание уровня 3 гласит: «Система активно участвует в управлении автомобилем, но водитель должен быть готов в любой момент принять управление на себя». В ноябре 2023 года суд округа Риверсайд (Калифорния) постановил48, что система автопилота на автомобиле Tesla не виновна в смертельном ДТП, произошедшем в 2019 году. По версии истцов, автопилот заставил машину съехать с дороги и врезаться в дерево. Водитель погиб. Пассажиры получили травмы. В ходе процесса были озвучены два тезиса, важных для нашего рассуждения:

1) Автопилот Tesla – это «лишь продвинутый круиз-контроль».

2) Система Full Self-Driving предупреждала водителя о необходимости следить за дорогой.

Резюме: говоря об автомобилях, которые сами себя водят, мы на самом деле имеем в виду контур типа «Человек над системой», или третий уровень автоматизации (ответственным за управление остается человек). Ни о каком полноценном автопилоте речь, по сути, пока не идет, но не все об этом задумываются, когда читают новости.

Вернемся к кураторам на нашем онлайн-курсе. Да, автоматическая проверка ДЗ – привлекательная опция. Какую форму взаимоотношений человека и системы вы бы выбрали? Человек внутри системы / над системой / вне системы? Что будет, если наш «нейрокуратор» в своем ответе выдаст ученику какую-нибудь ерунду? Человек либо усвоит неправильную норму, либо потеряет доверие к онлайн-школе. В этой связи я бы выбрал конструкцию «человек над системой»: пусть машина проверяет ДЗ и автоматически генерирует основную часть комментария, а человек смотрит его перед отправкой, при необходимости корректируя или добавляя что-то от себя. Другой вариант устранения проблемы – обязать онлайн-школы маркировать обратную связь от «нейрокураторов». Собственники онлайн-школ должны быть готовы к тому, что рекламируемый ими разбор домашних заданий будет меньше цениться в случае его автоматизации. Если сейчас во многих онлайн-школах проверка ДЗ входит в более премиальные пакеты, то в будущем, возможно, проверка ДЗ с включением человека станет тем, за что люди захотят дополнительно заплатить.

Когда мы попадаем во власть нарратива о скорой смерти многих профессий, связанных с умственной работой, мы забываем о штуке под названием «ответственность».

• Да, нейросеть может сгенерировать кучу вариантов логотипов для клиента, но кто возьмет на себя ответственность за выбор того, который будет использоваться в рекламной кампании стоимостью в несколько миллионов рублей?

• Да, нейросеть можно попросить перевести текст, но кто возьмется сразу этот текст копипастить какую-нибудь резолюцию ООН или иной важный документ? Вы бы подписали договор о поставках с иностранным партнером, зная, что после автоматического перевода он никак не проверялся? Выше я писал о том, что сам использую нейросети для перевода. Я позволяю себе это благодаря тому, что сам знаю английский. Я все равно смотрю оригинальный текст и сверяю его с переводом, внося необходимые мне правки.

• Да, нейросеть можно использовать для подготовки документов за юриста, но кто будет отвечать за правовые последствия их использования?

Это не то же самое, что заменить телефонистку автоматом. Кстати, вы знаете, откуда вообще появилась эта идея? Элмон Строуджер был владельцем похоронного бюро в Канзас-Сити. Его бизнес терпел убытки из-за недобросовестной конкуренции. Причиной проблемы были телефонистки, которые соединяли клиентов не с его компанией, а с конкурирующей49. Это и натолкнуло Строуджера на идею исключить человека из процесса соединения, чтобы никто не мог совершать подобных манипуляций. Так он создал систему прямого соединения абонентов. Как видите, Строуджером двигало не альтруистическое желание избавить людей от этого труда. Эта профессия не считалась бременем. Даже наоборот – именно возможность устроиться телефонисткой позволяла многим женщинам в ХХ веке хорошо зарабатывать. Кто знает, как бы эта индустрия развивалась дальше, если бы не перешла дорогу предприимчивому и изобретательному владельцу похоронного бюро.

Когда мы слышим, что нейросети заменят всех так же, как в свое время автоматизация заменила телефонисток, мы попадаем в ловушку, потому что не сравниваем подобное с подобным. Мы сравниваем работу в условиях низкого уровня неопределенности и невысокой цены ошибки (Строуджер бы с этим поспорил) с прямо противоположным набором условий.

В публичное поле легко просачиваются и быстро распространяются новости об успехах нейросетей. Мне все больше кажется, что самый простой способ стать спикером на какой-нибудь модной московской конференции в 2023 году – это заявить тему в стиле «Я уволил своего эсэмэмщика и заменил его на нейросеть». Такое привлекает внимание. Люди не публикуют статьи в стиле «Я попросил нейросеть написать за меня экспертную статью, она сделала какую-то ерунду, в итоге я отказался от идеи и написал сам».

Вернемся к теме юристов. Уже есть случаи проникновения нейросетей в их работу. И не все так гладко, как хотелось бы. В США прецедентное право: суды во многом опираются на вынесенные ранее решения по аналогичным делам. В этой связи важной задачей в рамках подготовки правовой позиции является поиск прецедентов.

Питер ЛоДука, юрист из Нью-Йорка, был пойман на использовании фальшивых ссылок на решения других судов по аналогичным делам50. Когда стали разбираться, выяснили, что исследованием вопроса занимался его коллега – Стивен Шварц. Когда его допросили, выяснилось, что тот… прибегнул к помощи ChatGPT. Эта нейросеть широко известна своей способностью «выдумывать» ссылки на несуществующие источники. В этом случае она и предоставила юристу ссылки на дела, которых никогда не было. Информацию не перепроверили, юридическая фирма нажила себе проблемы. При этом мы говорим о ситуации, в которой человек все еще находился над контуром управления, то есть сгенерированные нейросетью материалы автоматически не направлялись в суд. В Техасе судья по имени Брэнтли Старр и вовсе обязал всех выступающих в суде открыто заявлять, если в процессе подготовки они использовали нейросети51.

Давайте я попробую предложить другой нарратив для осмысления тех же происходящих сейчас процессов, а вы наблюдайте, как меняется ваше отношение к перспективам человечества.

Один из самых видных философов ХХ века Маршалл Маклюэн в своей работе «Понимание медиа: внешние расширения человека52» предлагает воспринимать прогресс как процесс расширения границ наших тел. Он пишет: «Расширение наших телесных поз и движений посредством вынесения их наружу постоянно вытекает из нашего стремления к увеличению власти и могущества. Вся суть утвари и инструмента состоит в капитуляции между этим телесным напряжением посредством расширения тела вовне».

Проиллюстрирую эту мысль примерами:

• Скорость наших ног ограничена, но у нас есть потребность к быстрому перемещению. Мы выносим ее вовне, создавая колесо. Человек не может бежать со скоростью 200 км/час. «Феррари» до такой скорости разогнаться может. В понимании Маклюэна не стоит разграничивать водителя и «Феррари». «Феррари» в данном случае выступает в роли продолжения тела ее водителя.

• Мы не можем крикнуть так, чтобы нас услышали на соседнем континенте. Но потребность в передаче указаний есть. Так человечество изобрело письменность и носители, на которые можно что-то записать и отправить с гонцом.

• У нас есть потребность в обогреве, но способность наших тел сохранять тепло ограничена. Мы «выносим эту потребность вовне», создавая одежду.

Этот процесс «расширения тела вовне» продолжается до сих пор. Получившие в ХХ веке распространение новые способы коммуникации и передачи информации Маклюэн считал инструментами расширения нашей центральной нервной системы.

Если хотите более современный пример, то давайте поговорим о памяти человека. Она ведь тоже выносится вовне. Ваша память в сегодняшнем мире – это ваша голова + память вашего компьютера + память вашего телефона + облачное хранилище и т. д. Эти элементы образуют целостную систему. Память наших дальних предков в этом смысле была в разы меньше.

Для понимания тезиса предложу простой мысленный эксперимент: представьте, что вы полностью очистили память телефона и домашнего компьютера. Как ощущения? Некоторые люди говорят, что это бы воспринималось как ампутация, и логика в их словах есть. Ощущение действительно может быть такое, будто бы человека лишили важной части тела. Кстати, ровно из-за этого Илон Маск уже называет людей киборгами. Он считает, что ими нас делает тот самый факт передачи части нашей памяти компьютерам53.

Создание нейросетей – это, по сути, акт еще одного расширения нашего тела. Мы нашли способ вынести вовне черновую мыслительную работу. Вот и все. Поэтому нужно думать не о битве ИИ и человека за одно и то же рабочее место. Нужно думать о том, что: