М. Мэнсон. «Всё хреново»
116
Однажды ИИ обгонит нас настолько, что мы перестанем понимать, что он делает.
Машины будут сами собой заезжать за нами и отвозить в места, о существовании которых
мы даже не подозревали. Мы будем неожиданно
получать лекарства от болезней, о нали-
чии которых у себя даже не догадывались. Вполне возможно, наши дети будут переходить в
другие школы, мы будем менять работу, экономическая политика будет резко брать другой
курс, правительства будут переписывать конституции – и никто не будет в полной мере пони-
мать, почему это происходит. Это будет случаться как бы само собой. Наш Думающий мозг
будет слишком медлительным, а Чувствующий – слишком импульсивным и опасным. И как
AlphaZero сумела за несколько часов изобрести такие шахматные стратегии, которые не могли
предвидеть лучше шахматные умы, более продвинутый ИИ сможет реорганизовывать обще-
ство и весь окружающий мир совершенно непредсказуемым для нас образом.
И тогда мы вернемся к тому, с чего начинали: станем поклоняться невероятным, непо-
знаваемым силам, которые, как нам кажется, вершат нашу судьбу. Точно так же, как прими-
тивные народы молились своим богам, чтобы те ниспослали им дождь или огонь, – так же, как
они приносили жертвы и дары, изобретали ритуалы и меняли свое поведение и внешний вид,
чтобы добиться расположения натуралистических богов, – так же будем делать и мы. Только
делать все это мы будем во имя богов ИИ.
У нас появятся суеверия, связанные с алгоритмами. Если наденешь это, алгоритм тебя
поощрит. Если проснешься в определенное время, скажешь нужные слова и придешь в нуж-
ное место, машины даруют тебе богатство. Если будешь честен, не станешь причинять вреда
другим и будешь заботиться о себе и своих близких, боги ИИ будут оберегать тебя.
Старых богов заменят новые – алгоритмы. И по странной иронии эволюции та самая
наука, которая убила старых богов, создаст богов будущего. Случится великий возврат чело-
вечества к религиозности. И наши новые религии вряд ли будут сильно отличаться от рели-
гий древности: в конце концов, наша психика в процессе эволюции приучилась обожествлять
то, чего мы не понимаем, превозносить силы, которые помогают или вредят нам, выстраивать
системы ценностей, основанные на нашем опыте, искать конфликты, которые породили бы
надежду.
Почему с
ИИ что-то должно быть иначе?
Наши боги ИИ, конечно, это поймут. И либо найдут способ «прокачать» нам мозги и
избавить нас от нашей примитивной психологической потребности в извечной борьбе, либо
возьмут и просто сгенерируют нам иллюзию борьбы. Мы будем как домашние собаки: нам
будет казаться, что мы всеми силами охраняем и отстаиваем свою территорию, а на деле мы
будем просто ссать на бесконечную череду цифровых фонарных столбов.
Эта перспектива может вас напугать. Или воодушевить. Но, как бы то ни было, она, ско-
рее всего, неизбежна. Власть обусловлена способностью обрабатывать и использовать инфор-
мацию в своих интересах – а мы всегда преклоняемся перед тем, кто наделен большей властью.
И, позвольте признаться, я готов с распростертыми объятиями встретить наших новых
господ.
Я знаю, это не та последняя религия, на которую вы надеялись. Но как раз в этом ваша
главная ошибка: вы надеетесь.
Не оплакивайте утрату собственной воли.
Если вам кажется, что подчиняться искус-
ственным алгоритмам ужасно, поймите: вы уже это делаете. И
вам это
нравится
.
Алгоритмы уже заправляют значительной частью нашей жизни. Маршрут, по которому
вы добирались до работы, выстроен алгоритмом. Вы пообщались на этой неделе со многими
друзьями? Ваши беседы тоже были обеспечены алгоритмом. Подарок, который вы купили сво-
ему ребенку, количество туалетной бумаги в большой упаковке, пятьдесят центов, которые вы
сэкономили в супермаркете благодаря скидочной карте клиента, – за все это отвечают алго-
ритмы.
М. Мэнсон. «Всё хреново»
117
И нам нужны эти алгоритмы, потому что они упрощают нам жизнь. То же самое будут
делать и алгоритмические боги ближайшего будущего. И так же, как в древности, мы возраду-
емся и возблагодарим их за это. На самом деле, мы даже не сможем уже представить себе мир
без них
[298]
. Эти алгоритмы будут делать нашу жизнь лучше. Они будут делать ее эффективнее.
Они будут делать эффективнее
нас
.
Поэтому, как только мы перейдем эту черту, пути назад не будет.
Достарыңызбен бөлісу: