16 из 18·
Глава 15. Надёжное против нового: выбор, который вы делаете каждый день
Проверенное кафе или то, что за углом? Выбор, который вы делаете десятки раз в день, — и ровно та же развилка внутри нейросети.
Вы в незнакомом городе. Приехали на неделю, сегодня первый вечер, и вы голодны. Выходите на улицу – а вокруг два десятка кафе и ресторанчиков, и вы не были ни в одном.
И вот вы стоите на тротуаре и решаете задачу. Можно зайти в первое приличное место: горит вывеска, пахнет неплохо, внутри сидят люди. Надёжно. Скорее всего, наедитесь, скорее всего, не отравитесь. Но что, если за углом то самое кафе, о котором вы потом вспоминали бы годами, а вы про него так и не узнали?
А можно пойти искать. Свернуть в переулок, заглянуть туда, куда не водят туристов. Вдруг там чудо. А вдруг закрыто, невкусно, и вы вернётесь сюда же через сорок минут – голодный, злой и уже без выбора.
Заминка на тротуаре длится секунду. Но за ней прячется одна из самых глубоких задач, которые вообще существуют. И решаете вы её не только над меню. Вы решаете её постоянно – над работой, над отношениями, над книгой, которую дочитываете через силу. Просто обычно не замечаете.
Эта глава – о том, как устроен выбор между надёжным и новым. У кого он устроен? У вас. У эволюции. У бизнеса. И у любой нейросети – вплоть до той, что подбирает вам ответ прямо сейчас. Окажется, что это один и тот же механизм. И, заглянув в то, как его крутит машина, вы впервые ясно увидите, как его крутите вы сами.
А по дороге мы разберёмся с одной странностью, которую замечал каждый: почему лучшие идеи приходят не за рабочим столом, а под душем. Это не случайность. Это прямое следствие всё той же механики.
Почему выбор кафе и выбор профессии – одна задача
Вернёмся на тротуар. Присмотритесь к тому, что именно вы взвешиваете.
С одной стороны – то, что уже работает. Проверенное место, знакомый вкус, гарантированный результат. С другой – неизвестное, которое может оказаться лучше. А может оказаться пустышкой.
Теперь замените ресторан на что угодно.
Работа. У вас есть стабильная, понятная должность. Зарплата приходит, обязанности ясны. А рядом маячит другое предложение – интереснее, но непонятнее. Остаться в надёжном или рискнуть?
Дорога домой. Есть привычный маршрут, вы знаете каждый поворот. А есть незнакомый переулок, который, возможно, короче. А возможно, упрётся в тупик.
Книга, которую вы читаете. Сто страниц позади, и пока скучновато. Дочитать – вдруг дальше станет интересно, и бросить будет жалко? Или закрыть и взять новую?
Видите? Это не разные ситуации. Это одна задача в разных костюмах.
Сформулируем её честно. Любая система, у которой ограничены ресурсы – время, силы, попытки, – и которая ищет что-то хорошее, вынуждена делить эти ресурсы между двумя занятиями. Первое: пользоваться тем, что уже найдено и работает. Второе: тратиться на проверку неизвестного, которое может оказаться лучше – а может ничем.
У этих двух занятий есть честные имена, и я подсмотрел их у геологов. Добыча – это выкачивать руду из уже разведанного месторождения. Надёжно, предсказуемо, но запасы конечны, и где-то рядом может лежать жила побогаче. Разведка – это бурить в новых местах в поисках этой самой жилы. Чаще всего впустую. Но иногда находишь золото.
Так вот: ваш мозг всю жизнь делит свои ресурсы между добычей и разведкой. Заказать привычное блюдо – добыча. Ткнуть в незнакомое – разведка. Поехать накатанным маршрутом – добыча. Свернуть в переулок – разведка.
И это не человеческая причуда. Этим занята вся живая природа. Пчелиный улей, например, никогда не отправляет всех сборщиц на один, даже самый богатый цветущий луг. Какая-то их доля всегда летит наугад, в случайные стороны – разведывать. Казалось бы, расточительство: зачем гонять пчёл в пустоту, когда есть отличный луг под боком? Затем, что луг отцветёт. И когда это случится, улей должен уже знать, куда лететь дальше. Эволюция миллионы лет назад нащупала ответ, к которому мы только подбираемся: поставить всё на проверенное – смертельно опасно.
У этой задачи, кстати, есть и строгое научное имя – её называют «задачей о многоруком бандите». Представьте ряд игровых автоматов, и у каждого своя, неизвестная вам щедрость. Монет мало. На что их тратить: дёргать ручку знакомого автомата, который уже разок выдал выигрыш, – или проверять новые, про которые вы вообще ничего не знаете? Математики и инженеры ломают над этой задачей головы десятилетиями. И сейчас вы поймёте почему.
Две ямы, в которые попадает каждый из нас
Самое неприятное в этой задаче вот что: у неё нет правильного ответа.
Не «трудно найти». А нет в принципе. Потому что обе крайности – ловушки.
Представьте человека, который двадцать лет обедает в одной и той же столовой возле работы. Не потому что там вкусно. А потому что «нормально». Он знает меню наизусть, знает, что не отравится, знает, сколько это стоит. Он давно перестал смотреть по сторонам. И он никогда не узнает, что через дорогу, в двух минутах ходьбы, открылось место, где кормят вдвое лучше за те же деньги. Его выбор абсолютно безопасен. И именно поэтому он застрял. Это ловушка чистой добычи: хватаешься за первое «достаточно хорошее» и потом всю жизнь не находишь по-настоящему хорошего, потому что перестал искать.
А есть обратная крайность. Знаете этих людей? Сорок скачанных приложений для изучения языка – и ни в одном не пройден второй урок. Каждое новое кажется лучше предыдущего, и каждое бросается ради следующего. Это ловушка чистой разведки: ты вечно пробуешь и никогда не пользуешься. Бесконечная дегустация без единого нормального ужина.
Остановитесь на секунду. Если вы узнали себя в одной из этих ловушек – а узнал, скорее всего, каждый, – то вот что важно понять. Это не ваша слабость характера. Это не «лень» и не «непостоянство». Это свойство самой задачи. Любая ищущая система во Вселенной – человек, пчелиный рой, компания, алгоритм – обречена балансировать между этими двумя ямами. Идеальной точки нет. Есть только баланс. И, как мы сейчас увидим, этот баланс ещё и обязан меняться со временем.
Почему мудрость возраста – это математика
Вернёмся в наш незнакомый город. Только теперь подумаем не про один вечер, а про всю неделю.
Первый вечер. Впереди ещё шесть ужинов. Стоит ли рисковать и пробовать незнакомое место? Конечно стоит. Даже если попадёте на невкусное – ничего страшного, впереди куча попыток всё исправить. А вот если найдёте жемчужину – будете ходить туда всю неделю. Разведка почти ничего не стоит и может окупиться шесть раз.
А теперь – последний вечер. Завтра вы уезжаете. Это ваш единственный оставшийся ужин в этом городе. Будете экспериментировать? Вряд ли. Вы пойдёте туда, где за неделю точно убедились: вкусно. Цена ошибки слишком высока – испортить единственный вечер ради сомнительного шанса просто глупо.
Уловили закономерность? Чем больше попыток у вас впереди – тем выгоднее разведывать. Чем меньше – тем разумнее пользоваться проверенным. Это не настроение и не вкусовщина. Это арифметика: ценность находки тем выше, чем дольше вы сможете ею пользоваться, а риск неудачи тем терпимее, чем больше у вас попыток в запасе.
А теперь сделаем шаг, после которого на эту главу можно смотреть иначе.
Вся ваша жизнь – это такая же неделя в незнакомом городе. Только «ужины» – это годы.
В молодости впереди много «вечеров». Поэтому разумно разведывать: пробовать профессии, города, людей, увлечения. Ошибки дёшевы – их есть чем исправить. Неудачная работа в двадцать три года? Ерунда, впереди десятилетия. А вот удачная находка – дело, которое полюбишь, человек, с которым совпадёшь, – окупится всей оставшейся жизнью.
С возрастом баланс рационально смещается. Попыток впереди меньше. Цена ошибки выше. И мозг – а вместе с ним и культура – начинает ценить надёжное: укореняться, держаться за найденное, не разбрасываться по мелочам.
Вдумайтесь, что это значит. «В молодости ищи, в зрелости укореняйся» – это не бабушкина мораль и не культурный предрассудок. Это математически оптимальная стратегия для задачи о разведке и добыче. Та самая стратегия, которую вычислил бы и грамотно настроенный алгоритм, если поставить ему ту же задачу с теми же ограничениями. Народная мудрость веками нащупывала ответ, который теперь можно вывести строго, на бумаге. Ваша интуиция и холодная математика пришли к одному и тому же.
Тут есть, правда, важная оговорка – и она утешительная. Эта ручка сбрасывается заново всякий раз, когда вы попадаете в новую область. Человек, который в пятьдесят решил с нуля освоить рисование, по этой задаче снова молод: в рисовании у него масса «вечеров» впереди, и разведывать – пробовать стили, материалы, нелепые эксперименты – для него теперь рационально. Возраст переключает баланс не сам по себе, а через количество оставшихся попыток. Зашли на новую территорию – и часы разведки пошли заново.
Это, пожалуй, первый момент, после которого хочется отложить книгу и подумать. Но самое интересное – дальше. Потому что мы выяснили, КАК баланс должен меняться на протяжении жизни. Но кто крутит эту ручку прямо сейчас, в эту минуту? Что в вашей голове решает: копнуть здесь ещё разок – или встать и пойти в другое место?
Компас по имени дофамин
У вас в мозге есть встроенный компас. Тихий, незаметный – но именно он каждую секунду подсказывает: копать здесь дальше или сниматься с места.
С этим компасом вы уже знакомы. В главе про гормоны мы встретили дофамин – химический промпт «режима поиска». Тогда мы поняли, ЧТО он делает: гонит вас за наградой. Теперь посмотрим, КАК он решает, куда гнать. И вот тут начинается неожиданное. Дофамин – не про удовольствие, как принято думать. Он про сравнение.
Ваш мозг постоянно делает одну простую вещь: сравнивает то, что вы получили, с тем, что вы ожидали получить. И реагирует не на сам результат, а на разницу между ними.
Получилось лучше, чем вы ждали? Вспышка сигнала: «О! Тут оказалось хорошо. Рой здесь, копай дальше». Получилось ровно как ожидали? Тишина. Никакой вспышки – всё по плану, ничего нового. Получилось хуже ожидаемого? Сигнал проваливается ниже нуля: «Тут скучнее, чем думал. Уходи».
Это не красивая теория, это измерено напрямую. В девяностые годы нейробиолог Вольфрам Шульц вживлял тончайшие электроды и регистрировал работу отдельных дофаминовых клеток в мозге обезьян. Схема опыта была проще некуда: загорается лампочка, а через секунду обезьяна получает каплю сладкого сока.
Поначалу клетки вспыхивали в момент получения сока – награда была неожиданной. Но обезьяна быстро училась: лампочка означает сок. И происходило вот что. Вспышка переезжала. Теперь клетки возбуждались не на сок, а на лампочку – на сигнал, который предсказывал награду. А сам сок, ставший ожидаемым, вспышки больше не вызывал. Мозг его уже предсказал, сюрприза нет.
И финальный штрих. Если лампочка загоралась, а сок не давали – дофаминовые клетки в положенный момент не просто молчали. Их активность проваливалась ниже обычного фона. Маленький минус. Разочарование, записанное на языке нейронов.
Сигнал был не про награду. Он был про сюрприз – про разницу между тем, что мозг предсказал, и тем, что случилось. На сухом научном языке это называют «ошибкой предсказания награды». Но проще считать дофамин внутренним детектором неожиданности: лучше, чем ждал, – зелёный свет, рой тут; хуже, чем ждал, – красный, иди отсюда.
И кстати, теперь понятно, почему самое затягивающее в жизни – это всегда непредсказуемое. Игровой автомат. Удочка. Первое свидание. Там, где результат невозможно предсказать заранее, детектор сюрприза не умолкает никогда: каждый следующий раз может выпасть «лучше, чем ждал». А предсказуемое приедается мгновенно. Что подводит нас к главному фокусу этого компаса.
Почему приедается любимая песня?
Вспомните трек, который года полтора назад сводил вас с ума. Вы ставили его на повтор. А сейчас? В лучшем случае равнодушие. Что изменилось? Песня не стала хуже – это те же самые звуки в том же порядке. Изменились вы. Точнее, ваш прогноз. В первый раз песня была сплошным сюрпризом: каждый поворот мелодии – лучше, чем мозг ожидал. Вспышка. Через сто прослушиваний мозг знает каждую ноту наперёд. Получаемое в точности равно ожидаемому. Сюрприза нет. Вспышки нет. Компас гаснет и разворачивается: «Здесь добыто. Иди искать новое».
Почему скука – это хорошо
Из этого следует мысль, которая переворачивает привычное отношение к одному неприятному состоянию.
Скука – это не дефект. Не лень и не каприз. Скука – это и есть показание компаса.
Когда вам скучно, ваш мозг сообщает буквально следующее: «Здесь больше нечего добывать. Всё предсказуемо, сюрпризов не осталось. Пора в разведку». Скука – это не поломка. Это команда сниматься с места.
Поймайте себя на этом в следующий раз. Когда накроет тоскливое «всё надоело, ничего не хочется», не ругайте себя за неблагодарность и не ставьте диагнозов. Это работает древнейший механизм, который когда-то гнал ваших предков с истощённого участка на поиски нового. Скука вытолкнула человека из обжитой пещеры исследовать соседнюю долину. Скука – двигатель разведки. Без неё мы бы до сих пор сидели на одном и том же когда-то отличном лугу. Который давно отцвёл.
Но у разведки есть проблема. Она дорогая. Сворачивать в незнакомый переулок страшно, пробовать новое блюдо рискованно, менять работу тревожно. Мозг не любит тратиться на разведку без крайней нужды. И вот тут природа придумала изящный обходной путь – режим, в котором можно разведывать почти бесплатно. Тот самый, благодаря которому идеи приходят под душем.
Почему лучшие идеи приходят под душем
Вы наверняка это за собой замечали. Бьётесь над задачей весь день за столом – без толку. Встаёте, идёте в душ, ни о чём не думаете – и вдруг, под струями воды, ответ приходит сам. Целиком. Откуда?
Чтобы это понять, представьте, что внимание – это свет. И у этого света есть два режима.
Когда вы сосредоточены на задаче, ваше внимание работает как фонарик. Узкий, яркий луч, направленный в одну точку. Вы освещаете проблему в упор, видите её во всех деталях – но только её. Всё, что вокруг, тонет в темноте. Это режим добычи: вы копаете в одном месте, изо всех сил, глубоко. Прекрасно, если ответ там. Но если ответа в этой точке нет – вы можете копать хоть до утра, фонарик светит всё туда же.
А теперь вы отпустили задачу. Пошли в душ, на прогулку, моете посуду, засыпаете. Фонарик гаснет – и включается другой режим. Рассеянный, мягкий свет, который заливает всю комнату разом. Не ярко, зато везде. В том числе в тех углах, куда фонарик не светил никогда. И мозг в этом режиме начинает бродить – дёшево, без усилия перебирать дальние, обычно отброшенные связи. Сопоставлять то, что в режиме фонарика и рядом не лежало.
У этого рассеянного режима есть название: сеть пассивной работы мозга (по-английски default mode network). И вот что в нём по-настоящему неожиданно. Учёные обнаружили, что в эти минуты «безделья» мозг вовсе не отдыхает. Он работает почти так же интенсивно, как при сосредоточенной работе, – просто иначе. Не копает в одной точке, а тихо обшаривает периферию. Это не отдых. Это разведка. Дешёвая разведка того самого тумана неизвестного, в который наяву, при ярком фонарике сосредоточенности, шагнуть страшно и дорого.
Вот почему решение приходит, когда вы перестали его искать. Пока вы давили на задачу за столом, вы добывали в одной точке – и если ответа там не было, давление не помогало, вы лишь глубже зарывались в пустую яму. А стоило отпустить – и мозг наконец отправился в разведку и наткнулся на связь, которая всё это время лежала чуть в стороне, в неосвещённом углу.
Вспомните свой собственный последний такой случай. Идею, которая настигла вас в самый неподходящий момент – в очереди, в маршрутке, на грани сна. Вы её не высидели. Вы её отпустили – и тогда она пришла. Теперь вы знаете, что это было: не озарение свыше, а ваш мозг, переключившийся из режима добычи в режим разведки.
Итак, у нас сложилась полная картина человеческого выбора. Есть две стратегии – добыча и разведка. Есть баланс между ними, который должен меняться с возрастом. Есть встроенный компас – дофамин, – который подсказывает, когда копать, а когда уходить. И есть два режима внимания: яркий фонарик добычи и рассеянный свет разведки. Сложная, хитрая, веками непонятная нам самим система.
А теперь посмотрим, как ровно ту же задачу решает машина. И приготовьтесь: местами она решает её обиднее, чем мы.
Зеркало: машина крутит ту же ручку – но в открытую
Всё, что мы только что разобрали, есть и у нейросети. Та же развилка: держаться проверенного – или шагнуть в неизвестное. Но машина решает её иначе, и в трёх отношениях это меняет всё.
Первое. Для машины баланс между добычей и разведкой – это просто настройка. Рычаг, который можно повернуть рукой. У человека он спрятан глубоко в нейронах и гормонах, его не видно и не пощупать. А у нейросети это знакомый параметр – «температура». Та самая, которую мы крутили в главе про промпты, превращая мышление модели из льда в кипяток. Только теперь видно, что именно она регулирует. На низкой температуре машина осторожничает: держится самых вероятных, проверенных вариантов – добывает. Поднимаешь температуру – и она начинает рисковать, выдавать неожиданные ходы, уходить в разведку. То, что у вас – туманное состояние духа, у машины – цифра, которую видно и можно выставить.
Второе, и самое важное. У машины нет двух главных тормозов человеческой разведки. У неё нет страха показаться глупой. И нет привязанности к привычному.
Подумайте, что на самом деле останавливает вас перед шагом в неизвестное. Редко – реальный риск. Чаще – «так не делают». «Будет стыдно». «А вдруг зря, и все увидят, что я ошибся». Мы не сворачиваем в переулок не потому, что там опасно, а потому, что боимся выглядеть дураком. У машины этого нет. Ей нечего стыдиться, нечего защищать, не перед кем сохранять лицо. Нет эго, нет репутации, нет «что подумают люди». Если шаг в туман статистически перспективен – она просто его делает.
Третье. Вы можете разведывать туман в основном по одному направлению за раз – медленно, осторожно, по одной тропинке. Машина способна прощупывать тысячи направлений одновременно. Пока вы решаетесь свернуть в один переулок, она уже мысленно заглянула во все сразу.
Сложите эти три вещи – управляемый рычаг, отсутствие страха и параллельность – и вы поймёте, откуда у машин берутся ходы, на которые человек не способен. Не потому что машина «умнее». А потому что она не боится зайти туда, куда мы не заходим из гордости или из привычки.
И есть один ход, который доказал это так, что у людей побежали мурашки.
Ход, которого не было двадцать пять веков
Сначала – минимум контекста, без него не понять масштаба.
Го – древняя восточная настольная игра. Доска в клетку, чёрные и белые камни; цель – окружить своими камнями больше территории, чем соперник. Правила умещаются в пару абзацев. А вот глубина – запредельная. Возможных позиций в го больше, чем атомов во всей наблюдаемой Вселенной. Из-за этой астрономической сложности го десятилетиями оставалась для компьютеров неприступной крепостью. В шахматах машина обыграла чемпиона мира ещё в 1997 году. А го не давалась: перебрать все варианты, как в шахматах, физически невозможно – тут нужно что-то похожее на интуицию.
И вот в марте 2016 года в Сеуле сел за доску алгоритм по имени AlphaGo – программа компании DeepMind, исследовательского подразделения Google. Напротив – Ли Седоль, живая легенда, один из сильнейших игроков планеты за всю историю го.
Вторая партия матча. Тридцать седьмой ход. AlphaGo ставит чёрный камень в совершенно неожиданное место – на пятую линию от края, туда, куда по всем канонам, по многовековой школе игры, ставить не следует.
В комментаторской – замешательство. Профессионалы, разбиравшие партию в прямом эфире, решили, что произошёл сбой. Что машина ошиблась, «не поняла» позицию. Один из комментаторов, сам сильный игрок, переспросил, не опечатка ли это. Ли Седоль уставился на доску, потом встал и вышел из комнаты – ему понадобилось время, чтобы прийти в себя.
Вдумайтесь в этот момент. Машина сделала ход, который все живые мастера в один голос сочли грубой ошибкой новичка. По более поздним подсчётам самой программы, живой игрок сыграл бы так примерно один раз на десять тысяч. То есть ход, который ни один человек не считал хоть сколько-нибудь разумным.
А через несколько десятков ходов выяснилось, что это был блестящий ход. Он перестроил всю партию и привёл AlphaGo к победе. Больше того – он открыл целую стратегию, которой люди не пользовались за более чем две тысячи лет игры в го. За двадцать пять веков ни один мастер туда не заглянул. А машина заглянула – в первый же серьёзный матч. Тот поединок AlphaGo выиграла со счётом 4:1. Сам Ли Седоль позже признавался, что эта партия заставила его иначе взглянуть на игру, которой он посвятил жизнь.
И вот что здесь важно понять правильно, без мистики. AlphaGo не «придумала гениальный ход, потому что она творческая». У неё нет вдохновения, нет озарений, нет жажды красоты. Она холодно искала статистически лучший путь к победе. Просто, в отличие от любого человека, она не побоялась шагнуть в точку, куда люди не ступали тысячелетиями – не потому, что там было плохо, а потому, что «так не играют». У машины не было этого «так не играют». Не было школы, которую неловко нарушить. Не было страха выглядеть дураком перед залом. Был только туман неизвестного – и спокойный расчёт, что именно там, возможно, лежит выигрыш.
Это и есть та самая разведка, на которую человек чаще всего не решается. Мы веками топтались на краю изученного, не заглядывая за него, потому что «за него» – неприлично, неловко, нарушает традицию. Машина шагнула за край просто потому, что ей нечего терять и не перед кем краснеть.
Только не делайте отсюда вывод, что «машина лучше человека во всём». Это неправда. AlphaGo не напишет вам письмо другу, не утешит ребёнка, не поймёт, почему вам сегодня тоскливо. Она лучше решает одну конкретную задачу – задачу о разведке и добыче. Управляет балансом без страха, без привычки и сразу в тысяче направлений. И вот в этой одной задаче – да, она нас обыгрывает. Именно отсюда её сверхрезультаты. И именно поэтому она оказалась таким точным зеркалом: глядя на неё, мы впервые видим в работе собственный механизм выбора.
Из чего вообще лепится новое?
Сведём всё вместе.
И человек, и машина всю свою «жизнь» крутят одну и ту же невидимую ручку. На одном её конце – добыча: пользоваться проверенным, надёжным, уже найденным. На другом – разведка: бросать насиженное место и шагать в туман неизвестного, где может не быть ничего, а может лежать золото. У этой задачи нет и не может быть идеального решения – ни у вас, ни у пчелиного роя, ни у самого совершенного алгоритма. Это не чья-то слабость. Это свойство всякого, кто чего-то ищет. Разница лишь в том, что машина крутит эту ручку как настройку, без страха и без привычек, и сразу в тысяче направлений – а потому заходит туда, куда мы не заходим. И впервые в истории у человека есть зеркало, в котором эту ручку видно буквально. А раз видно – её можно начать крутить осознанно.
Но, разобравшись с этим, мы тут же упираемся в вопрос ещё более странный.
Хорошо, мы поняли, КУДА идти и КОГДА уходить от привычного. Допустим, мозг – или машина – добрался до тумана, шагнул в неизведанное. И что он там находит? Из чего вообще лепится «новое»? Ведь если приглядеться, AlphaGo не изобрела новый камень и не выдумала новых правил. Она поставила обычный чёрный камень в обычную клетку доски. Всё уже было – и камень, и клетка, и сама доска. Так что же сделало этот ход «новым»?
И тот же вопрос – к любой человеческой идее. Откуда берётся новизна, если всё, чем мы располагаем, – это старое, уже известное, виденное-перевиденное? Любая мысль в вашей голове собрана из того, что вы когда-то уже встречали. Новых букв вы не придумываете. Новых звуков не слышите. Так откуда же берётся то, чего раньше не было?
Возможно – и это мысль, от которой делается слегка не по себе, – никакой «новизны из ниоткуда» вообще не существует. Возможно, и самая безумная фантазия, и самое строгое научное открытие сложены из одних и тех же кубиков уже известного. Из одного и того же набора деталей. И отличаются они лишь одним-единственным свойством. Каким именно – в следующей главе.