Глава 12. Время решений

Пришло время выбирать свою команду.

На написание этой книги меня вдохновили работы огромного количества людей, выразивших аналогичные опасения, и я могу только надеяться, что эта книга поможет сосредоточить внимание мирового сообщества на вопросах о цели и этике технологий – и этике тех, кто их изобретает и продвигает.

Люди и технологии все чаще пересекаются, сближаются или даже сходятся – выбор слов во многом зависит от того, как вы относитесь к этому факту. В любом случае, как было сказано в самом начале этой книги, вот в чем я не сомневаюсь: я уверен, что человечество, скорее всего, больше изменится за следующие 20 лет, чем за предыдущие 300.

Грядущее слияние человека и машины принесет человечеству удивительные победы и одновременно станет угрозой. Теперь нам необходимо намного осторожнее распоряжаться нашими изобретениями и их последствиями, если мы хотим процветать.

Да, технологический прогресс кажется неудержимым, потому что в природе людей – колдовать, тестировать и направлять нашу технику (наши инструменты). И наконец, мы достигли точки, когда ориентированные на человека политика и стандарты, цифровая этика, социальные контракты и глобальные соглашения о гуманизации этих экспоненциальных технологий будут столь же важны, как и договоры о нераспространении ядерного оружия.

В самом ближайшем будущем речь уже будет идти не о том, могут ли технологии что-то сделать (ответ почти всегда будет положительным), но о том, должны ли они что-то делать и зачем.

Опасность заключается в том, что если мы не будем тратить столько времени и ресурсов на андроритмы (на те качества, которые делают нас людьми), сколько мы тратим на алгоритмы, то технологии в конечном итоге не только будут управлять нашей жизнью, но и нас самих также вынудят, обманом или иным образом, стать технологиями. Мы станем «инструментами для наших инструментов».

Обратите внимание, что под «технологиями, управляющими нашей жизнью» я не имею в виду роботов-повелителей Terminator Genisys²⁰⁰. Скорее, я обеспокоен тем, что мы скоро можем стать совершенно бесполезными без технологий: медленными, несовершенными, тупыми, убогими, ленивыми и страдающими ожирением.

Представьте себе, что произойдет, если мы продолжим искоренять и в конечном счете устраним главные человеческие качества, такие как конфиденциальность, тайна, анонимность, эмоции, спонтанность, удивление, интуицию, воображение и духовность – только для того, чтобы мы могли идти в ногу с машинами.

Если мы не хотим сами стать технологиями; если не хотим слиться в мощный вихрь, созданный мегасдвигами; если хотим оставаться «естественными людьми», несмотря на мощные приманки волшебных технологий; если хотим сохранить то, что действительно делает нас счастливыми, а не только то, что заставляет функционировать, мы должны принять меры, пока еще есть пространство для маневра. Пришло время!

Мы должны прежде всего задать вопрос «зачем», после – «кто» и «почему», а не только «если» и «как». Необходимо думать о цели, а не только о прибыли. Мы должны все чаще задавать вопросы лидерам отрасли и особенно технологам и фирмам, которые их нанимают. Мы должны заставить их всех принять более целостный подход, рассмотреть как хорошие, так и не очень хорошие последствия того, что они предлагают. Мы должны также попросить их признать эти непредвиденные последствия и принять меры, а также включить внешние факторы, которые они создают, в свои бизнес-планы и модели доходов.

Мы должны на каждом шагу призывать к ответственности создателей и финансистов завтрашнего дня – и, конечно же, нас самих, как пользователей и потребителей. Нам нужно начать отказываться быть клиентами тех компаний, которым это все безразлично, и мы должны перестать быть контентом для тех платформ, которые стремятся автоматизировать нас. Мы должны перестать быть молчаливыми участниками машинного мышления, потому что все остальное не так удобно.

Если мы не хотим положить конец тому, что я называю сожалением Оппенгеймера, названным в честь известного физика Дж. Роберта Оппенгеймера, чьи изобретения сделали атомную бомбу реальностью и кто потом пожалел о своих действиях и их последствиях, – мы должны взять на себя обязательство быть в «команде людей», чтобы поставить человечество на первое место и выше всего остального.

Поэтому я предлагаю попытаться сформулировать несколько основополагающих правил для этой грядущей эпохи машин, определив, какие технологии, вероятно, будут способствовать процветанию человека и поэтому должны применяться, а какие – нет. Мы должны также чаще задавать вопросы «когда, почему и кто» и думать о том, кто в действительности будет контролировать соблюдение этих правил.

Это, безусловно, будет огромной задачей и, естественно, чревато неопределенностью относительно того, сможем ли мы договориться даже о самых элементарных правилах для человечества.

Тем не менее, если мы хотим справиться с неизбежными столкновениями между людьми и машинами, описанными в этой книге, нам понадобится новый вид глобального управления, подкрепленный все более дальновидными прогнозами. Нам нужно, чтобы основополагающие правила были решительными, но достаточно гибкими, чтобы не препятствовать прогрессу. Пугающе? Да. Невозможно? Нет. Есть ли альтернативы? Нет.

Девять принципов

Для того чтобы способствовать обсуждению наилучших путей продвижения вперед, я сформулировал девять принципов. Они отражают суть основных аргументов, которые я представил на страницах этой книги, но все еще находятся в стадии разработки и далеки от полного или окончательного варианта.

1. Нам необходимо лучше понимать экспоненциальность и ее значение для будущего человечества. Мы должны представлять экспоненциальные и комбинаторные изменения и учиться жить с ними. В нашем ближайшем будущем «поживем – увидим» будет так же опасен, как «просто сделаем это». «Постепенно, а затем внезапно» – это действительно новая норма, и мы не должны упускать возможность воспользоваться взлетно-посадочными полосами в будущее, пока они все еще перед нами. Также необходимо напомнить себе, что наше будущее – это то, что мы постоянно сами определяем и создаем, а не то, что просто происходит с нами.

Для того чтобы достичь этого, нам необходимо быть любознательными и открытыми, представлять себе свою жизнь при различных вариантах развития событий, понимать, каково было бы на самом деле жить в этом будущем… Связаться с людьми, которые делают будущее возможным, повысить нашу общую осведомленность о духе времени, окружающем нас, меньше предполагать, больше узнавать и отказаться от тех токсичных предположений, которые так хорошо работали в прошлом, принять резкий прогресс науки, но всегда видеть его в контексте общей человеческой цели. Технологии могут быть раем, или адом, или и тем и другим (#hellven), поэтому мы должны быть активными и осторожными в зависимости от того, что, где и когда поставлено на карту.

2. Самые сложные задачи часто являются самыми невероятными возможностями (и наоборот). Наше будущее во многом зависит от этого разумного баланса магического и маниакального (но, надеюсь, не токсичного) использования технологии. Потому что, как предполагает Уильям Гибсон, технологии являются морально нейтральными до тех пор, пока мы не применяем их²⁰¹. Достижение баланса будет больше связано с управлением приложениями и воплощением технологий, чем с предотвращением или даже регулированием самих изобретений. Будущее не скажет нам «да» или «нет», оно ответит нам «по-разному». Я уверен, что, если мы можем позволить чаще озвучивать вопросы «почему?» и «с какой целью?», появится сбалансированный подход.

3. Нам необходимо гораздо лучше распоряжаться будущим человечества. Каждый бизнес-лидер, пионер технологий и государственный чиновник должен взять на себя ответственность за формирование будущего человечества и действовать в соответствии с ней. Гражданские и политические лидеры должны выработать глубокое понимание технологий и личную технологическую перспективу в контексте человечности и самим распоряжаться нашим общим будущим. Во всех секторах всех отраслей нам потребуется новый вид сверхвзаимодействия, а не сверхконкуренции, и нам нужно будет думать целостно обо всех этих традиционно отдельных областях.

4. У технологий нет этики, но общество без этики обречено. Мы находимся на пути к будущему, где буквально на все вокруг нас обрушится цунами технологических достижений. Однако то, как мы создаем мир, как мы оцениваем, что правильно или неправильно, как мы решаем, использовать ли определенные технологии или нет, все еще основано на прошлом опыте, на старых стандартах и, что хуже всего, на линейном мышлении.

Наша этика – и многие наши законы и правила в том числе, – по-прежнему создавалась в мире, развивающемся линейно, и основывалась на «том, что раньше работало», прежде чем мы достигли точки поворота на экспоненциальной кривой. С тех пор как интернет стал обладать значительной коммерческой силой, мы, кажется, сосредоточились в основном на использовании его экономического и коммерческого потенциала. Мы слишком мало времени уделяли рассмотрению его влияния на наши ценности и этику – и это в конце концов становится очевидным, когда мы вступаем в эпоху искусственного интеллекта (ИИ), робототехники и редактирования генома человека.

В последнее время все чаще обсуждается концепция создания думающих машин, которые могли бы воспроизводить человеческую этику. При том что это интересный поворот, он поражает меня, потому что это еще один шаг к полностью смоделированной эпохе машин, и еще одна причина, по которой нам необходимо создать Глобальный совет по вопросам цифровой этики. По мере того как мы движемся к сингулярности и точке, в которой компьютеры достигают или превосходят возможности человеческого мозга и связываются посредством гигантской глобальной сети, нам срочно нужен четкий этический контекст, с которым сможет согласиться большинство из нас. Это непростая задача, но тем не менее решаемая.

5. Будьте бдительны! Экспоненциальные технологии часто быстро переходят от магии к маниакальной токсичности – достижение баланса имеет большое значение.

Если вы думаете, что зависимость от интернета, игр, смартфонов или «ловушек удовольствия» социальных сетей уже стала большой проблемой, то вы заблуждаетесь: все только начинается! Просто дождитесь, когда мы сможем полностью погрузиться в технологии, пока технологии захватят нас дополненной и виртуальной реальностью, интерфейсами «мозг – компьютер», имплантатами и нейронными интерфейсами.

Небо – буквальный предел с точки зрения того, что экспоненциальный прогресс может сделать возможным. Поэтому теперь мы должны научиться использовать технологии целостно и с гораздо большим уважением к человеческой жизни и потребностям. Нам также необходимо, чтобы те, кто изобретает, продает и продвигает новые заманчивые технологические решения, отвечали за новые экосистемы, которые они наделяют полномочиями, и искали эффективные способы обуздать или ограничить непреднамеренные последствия. Поставщики технологий должны начать включать внешние факторы в свои бизнес-модели и помогать формированию новых социальных контрактов, которые смогут устранить токсичные последствия.

6. Мы должны обучать как базовым естественнонаучным/техническим знаниям, так и ГЛАВНЫМ человеческим навыкам (состраданию, оригинальности, взаимности и сопереживанию). Технологии и человечество должны быть включены в учебную программу; действительно, наука и философия должны находиться в одном классе. Сбалансированное общество потребует опыта в обеих областях; в противном случае мы продолжим «наклонять игровое поле» в сторону машинного мышления.

Кроме того, все больший объем научной работы в конечном итоге будет выполняться ИИ и умными машинами, поэтому мы должны сконцентрироваться на развитии только человеческих навыков и возможностей. Творчество, понимание, переговоры, вопросы, эмоции, интуиция и воображение будут играть более важную роль, чем когда-либо прежде: все, что не сможет быть оцифровано, автоматизировано или виртуализировано, станет чрезвычайно ценным.

7. Нам нужно сохранить четкое разграничение между тем, что реально, и тем, что является копией или моделированием. Полное взаимодействие, думающие машины, умное облако и когнитивные вычисления – это наше неизбежное будущее, но мы не должны отказываться от разграничения между (компьютерным) моделированием и бытием (dasein), между вычислениями и чувством, между сообществом машин (machine-kind) и человечеством. Погружение в мир удивительных моделей может быть очень полезно для обучения, развлечения или работы, но должно ли это становиться образом жизни в целом?

Могут ли эти технологии стать своего рода универсальным лекарством, которое мы будем постоянно принимать, чтобы сделать нашу жизнь более полной? Нужны ли нам ограничения и регулирование того, сколько нам разрешено использовать и насколько далеко мы можем зайти? Если технологии действительно не то, что мы ищем, а то, как мы ищем, нам, наверное, понадобится помощь, чтобы продолжать разграничивать эти инструменты и нашу истинную цель? Выстраивание отношений с людьми должно оставаться более важным, чем выстраивание отношений с машинами. Используйте технологии, но не становитесь ими.

8. Нам необходимо начать спрашивать, «почему» и «кто», а не только «если» или «как». Будущие стратегические решения, касающиеся разработки и внедрения технологий, должны в большей степени ориентироваться на осмысление, контекст, цель, значение и актуальность, а не просто концентрироваться на осуществимости, стоимости, масштабе, прибыли и вкладе в развитие. Вопрос «как» нужно заменить вопросом «почему».

9. Мы не должны позволить Кремниевой долине, технологам, военным или инвесторам управлять человечеством, независимо от того, в какой стране они находятся. Те, кто финансирует, создает и продает экспоненциальные технологии, вряд ли захотят ограничить свою власть или масштабы потенциальных применений. Те, кто строит машины для войны, не станут теми, кто сосредоточится на человеческом счастье. Те, кто вкладывает средства в разрушительные технологии для получения стократной отдачи, не будут вкладывать средства в построение будущего подлинно человеческого общества ради коллективного блага. Те, кто создает инструменты, имеют свою собственную повестку дня, и это в основном касается монетизации и власти, – где же в процессе принятия решений представительство тех, кто использует эти инструменты?

Оценка экспоненциальных технологий: семь важных вопросов

С учетом того, что большая часть этой книги посвящена тому, как человечество может победить в предстоящей битве с экспоненциальными технологиями, здесь представлены семь вопросов, которые, я считаю, мы должны задать при оценке масштабов радикальных изменений. Я понимаю, что во многих случаях правильный ответ может быть либо «оба», либо «по-разному». Однако я считаю, что, просто остановившись, чтобы задать эти вопросы, мы могли бы более четко понять их плюсы и минусы.

1. Будут ли технологии непреднамеренно или специально умалять человечность? Будут ли они стремиться заменить важное взаимодействие между людьми, которое не должно быть ими опосредовано? Будут ли они автоматизировать что-то уникально человеческое, что действительно не должно быть автоматизировано? Эти технологии освободят нас от ненужных и бесполезных тягот или соблазнят нас пропустить действительно нечто человеческое? Это червоточина или катализатор?

2. Будут ли эти технологии способствовать истинному человеческому счастью? Заставит ли это нас больше довольствоваться тем, что есть, позволит ли нам достичь эвдемонизма и сделать больше вклад в него? Будет ли это выходить далеко за рамки простого предоставления гедонических удовольствий, или, если это в основном гедонический инструмент, будет ли он стремиться привести нас к путанице с более глубоким чувством счастья?

3. Есть ли у этих технологий какие-либо случайные и потенциально катастрофические побочные эффекты? Отнимут ли они у нас у всех власть, или же они наделят нас властью? Окажут ли они значительное воздействие на экосистемы, имеющие решающее значение для многих людей, и если да, то включат ли они учет этих внешних факторов в свои бизнес-модели?

4. Будут ли технологии наделять чрезмерными полномочиями себя и другие алгоритмы, боты и машины? Появится ли у пользователей соблазн отказаться от своих полномочий, используя их? Будут ли нас подстрекать к передаче наших мыслей на аутсорсинг? Будут ли эти технологии служить нам, или они в основном окажутся самообслуживанием, т. е. будут в основном получать, а не повышать ценность?

5. Позволят ли нам эти технологии выйти за их пределы, или они сделают нас зависимыми от них? Заставят ли технологии людей выполнять подчиненную роль – специально или случайно? Превзойдут ли технологии наши возможности настолько, что мы будем вынуждены беспрекословно следовать их указаниям и решениям?

6. Понадобится ли людям существенно измениться или дополниться, чтобы в действительности использовать эти технологии? Ведут ли эти технологии нас к обновлению нашего тела или чувств, или они работают в существующих пределах того, кем мы являемся? Заставит ли это нас модернизироваться и дополняться, если мы хотим получить доступ к рабочим местам, образованию и здравоохранению?

7. Будут ли эти технологии в открытом доступе, или они будут в собственности? Сможем ли мы изменять их, или они будут заблокированы? Будут ли они доступны для всех, или только для 1 % элиты? Увеличат ли они неравенство или уменьшат его? Как мы узнаем уровень богатства, накопленного доминирующими поставщиками, если технологии будут контролировать наш доступ к информации?

Вы в команде людей?

Я впервые услышал об этой перспективной идее от Дугласа Рашкоффа²⁰² и сразу подумал, что это было бы отличным девизом на пути к будущему.

Вот что значит «быть в команде людей» для меня:

• Поставить коллективное процветание человечества на первое место и выше всех других проблем.

• Позволить андроритмам, этим уникальным человеческим качествам, таким как воображение, случайности, ошибки и неэффективность, и далее играть важную роль, даже если они нежелательны или несовместимы с технологиями.

• Бороться с распространением машинного мышления, т. е. не менять то, за что мы боремся и в чем нуждаемся как люди, потому что иначе это может облегчить задачу порабощения человечества технологиями, окружающими нас.

• Не поддаваться искушению предпочесть технологическое волшебство, т. е. великолепное моделирование реальности, самой реальности и не увлекаться технологиями.

• Не отдавать предпочтение отношениям с экранами и машинами вместо отношений, которые у нас могут быть с реальными людьми.

Как я уже говорил в начале, моя цель состояла в том, чтобы привлечь внимание к проблеме, начать обсуждение и спровоцировать энергичный ответ. Что вы сделаете, чтобы продолжить разговор в вашей организации, сообществе, семье и дружеском кругу?

Со своей стороны, я продолжу исследовать, что значит «быть в команде людей», в ходе моей текущей работы в качестве лектора, советника, писателя и режиссера. Пожалуйста, присоединяйтесь к обсуждению на сайте книги www.techvshuman.com и на специализированном сайте www.onteamhuman.com.