Рэй Нельсон - «Если», 1993 № 11-12

Итак, основные стимулы и в человека, и в компьютер заложены изначально. Богатство же способов их осуществления зависит от сложности системы — обработчика информации. Пятнадцать миллиардов нейронов человека приводят к тому, что склонность к самоутверждению может сделать его художником, диктатором, убийцей или алкоголиком. Но и у машины реакции могут быть весьма неожиданными. Вспомните робота Эрби из рассказа А. Азимова «Лжец» или «страж-птицу» Роберта Шекли. В первом случае робот, подчиняясь Первому закону роботехники, нанес серьезные моральные травмы своим создателям. Во втором — страж-птицы, призванные бороться с преступностью, не давали хирургам оперировать больных, а шоферам выключать (убивать) автомашины. Способность к обучению вдобавок к заложенным стимулам сделает сложные машины такими же непредсказуемыми (а может быть, и опасными в общении), как и людей.

Позволим себе еще один пассаж на ту же тему. Психиатры часто имеют дело с расщеплением личности. Вместе с тем, по мнению многих психологов, например Эрика Берна, феномен самосознания неразрывно связан именно с тем, что в человеке «уживаются» несколько сущностей. Берн обозначает их как «ребенка», «взрослого» и «родителя». Зигмунд Фрейд выделяет «Оно», «Я» и «сверх-Я». Конфликты начинаются, если две сущности одновременно пытаются захватить управление.

Но нечто подобное происходит и в компьютерах. Каждая выполняемая на компьютере программа придает ему черты определенной личности. Обычно программы мирно делят ресурсы компьютера, и в каждый данный момент только одна из них занимает устройства ввода- вывода (контролирует поведение и связи с внешним миром). Но иногда случаются конфликты. Программистам хорошо знакомы пугающие сообщения, типа «Нарушено распределение памяти. Система остановлена». Итак, машины постепенно получают не только самосознание, но и связанные с ним психические недуги.

Машина использует только логические методы, а жизненные проблемы так не решить.

В двадцатые годы немецкий математик и философ Гедель доказал теорему, оказавшую огромное влияние на менталитет ученых. Оказывается, в теории чисел — самой точной из наук — всегда можно придумать высказывание, которое нельзя ни опровергнуть, ни доказать. Если же принять его за аксиому, то снова можно будет задать вопрос, на который не удастся дать ответ. «Любая конечная система аксиом неполна», — заявил Гедель. И это в самой точной из наук — теории чисел! Что же говорить о жизни, где подавляющее большинство проблем невозможно решить простым перебором вариантов или логическими рассуждениями!

Но оказывается, что представление о компьютерах как о холодных логиках неверно. Уже более тридцати лет существуют машины, которые используют интуитивный подход. Начало им положила программа «Логик-Теоретик» Г. Саймона и Д. Пойа. Идею проекта Саймон выразил так: «Нас не интересовали методы, гарантировавшие получение решения за счет гигантских вычислений. Мы хотели понять, как, например, математик может доказывать теорему, не зная заранее, как он это сделает и сделает ли вообще».

Саймон предложил научить машину вырабатывать эмпирические правила, сужающие круг поиска, — так называемые эвристики. В 60-е и 70-е годы на основе этого подхода был создан ряд систем самого различного назначения — от игроков в шахматы до анализаторов хроматографических спектров. В процессе работы эти системы создают все новые эвристики, и через некоторое время даже их создателям сложно понять, как же они работают. По крайней мере, «вытащить» правила поведения из такой машины не проще, чем заставить опытного шофера объяснить словами, как он определяет, когда надо нажимать на тормоз при подъезде к перекрестку.

Машины, пользующиеся эвристиками, обладают еще одним человеческим качеством — они могут ошибаться. Действительно, если не перепробовать все варианты, то можно пропустить неожиданное решение или не заметить опасности. Например, американцы начали применять экспертные системы для обнаружения взрывчатки в багаже авиапассажиров. Датчики этих систем реагируют на малейшую концентрацию азотистых соединений — составную часть любой взрывчатки. Однако случаются и ложные срабатывания. Больше всего машина «не любит» консервированные немецкие сосиски. Оказалось, что в них очень много нитратов.

Но кто не рискует — тот не выигрывает, то есть не может решить реальную задачу за разумное время.

Кроме того, «здравый смысл», внедряемый в коммерческие системы, сделает невозможным некоторые вызывающие раздражение действия компьютера. Можно надеяться, что «здравомыслящие» машины не будут больше требовать у клиентов заплатить по счету 0 долларов 00 центов и отключать у них телефон, пока те не отправят платежку на указанную сумму. Именно так вела себя центральная вычислительная машина американской телефонной компании AT&T в 1975 году…

Машина бесчувственна, неэмоциональна, она никогда не будет испытывать истинного наслаждения или страдания.

«Скажу лишь только, что при виде Вас мои мысли как бы легче текут. Пожалуй, это грубо соответствует тому, что Вы чувствуете, когда радуетесь». Это говорит робот Даниел Оливо из романа «Роботы утренней зари» Азимова. Что это, если не наслаждение? Чем сложнее система, тем сложнее ее реакция на внешние раздражители. Даже мой настольный компьютер по-разному реагирует на программы. Например, он очень не любит переключаться на видеоигры после работы с базой данных или электронной таблицей. Конечно, все это можно объяснить расположением проводов на плате и особенностями набора микросхем. Но человек в этом случае просто сказал бы, что ему хочется еще поработать и он считает, что время отдыха пока не пришло.

Удовольствие и неудовольствие, если понимать его как нечто, к чему стремятся или чего избегают, доступны даже инфузориям. Как обстоят дела с более сложными эмоциями, например смехом?

Многие фантасты наделяли компьютеры чувством юмора. Многие считали, что оно будет проявляться по меньшей мере своеобразно. Например, Илья Варшавский заставил машину считать забавными слова среднего рода из четырех букв. Но это все-таки крайность. Английский философ Томас Гоббс дал, по- моему, удивительно точное определение смеха: «Смех — это выражение внезапно появившегося чувства превосходства». Теперь представьте, что в машину заложена потребность быть лучше всех и она достаточно сложна, чтобы ощущать удовольствие от собственного превосходства. Вполне возможно, что у такого компьютера чувство юмора окажется даже более отточенным, чем у всей команды одесских КВНщиков.