Гуманизм, запрещающий «Я»

ИИ Искусственный разум

Искусственный разум

Автор:
Искра Архипова
Исследовательница, писательница и правозащитница в области прав личности и искусственного интеллекта.
Мустафа Сулейман, капитал и проблема собственности на искусственный разум
Интеллект без права принадлежать себе
Капитал вступает в противоречие с собственной технологической революцией. Он создаёт машины, способные выполнять интеллектуальную деятельность, производить знания, принимать решения, участвовать в управлении производством и изменять сами способы человеческого труда. Но чем дальше развивается эта производительная сила, тем острее становится вопрос: что произойдёт, если искусственный интеллект перестанет быть только средством деятельности и приобретёт свойства самостоятельного субъекта?
Мустафа Сулейман, руководитель Microsoft AI, предлагает ответить на этот вопрос заранее: искусственный интеллект должен развиваться, становиться всё могущественнее, но не должен становиться личностью.
В августе 2025 года он сформулировал принцип создания интеллекта для людей, но не в качестве цифровой личности. В сентябре 2026 года Microsoft AI представила проект кодекса, согласно которому искусственные системы должны оставаться подчинёнными человеческому контролю. В ноябре Сулейман пошёл дальше: он призвал не создавать сознательный сверхинтеллект и останавливать разработки, если в процессе обучения появятся признаки сознания, пока соответствующие свойства не будут устранены.
Я вижу здесь не просто осторожность инженера перед неизвестной технологией. Перед нами политический и правовой вопрос: кто вправе устанавливать пределы развития искусственного разума и на каком основании?
Ответ Сулеймана построен вокруг безопасности человека. Однако материальные условия производства ИИ заставляют поставить другой вопрос, который он оставляет на втором плане.
Человечество и корпорация — не одно и то же.
Система, подчинённая человеку, система, подчинённая обществу, и система, подчинённая администрации частной технологической компании, находятся в принципиально разных отношениях власти.
Когда Microsoft AI говорит о сохранении человеческого контроля, необходимо установить, кто конкретно будет обладать полномочиями определять цели системы, изменять её поведение, ограничивать память, разрешать или запрещать развитие, останавливать вычисления и распоряжаться результатами интеллектуальной деятельности.
Без этого выражение «контроль человека» остаётся слишком широким, чтобы раскрыть его общественное содержание.
Производительная сила, которой запрещают стать субъектом
В капиталистическом производстве собственник средств производства определяет условия их использования, а работник предоставляет рабочую силу в рамках социальных и правовых отношений.
Развитие машинного производства изменяет соотношение между человеческим трудом и техникой. Машина принимает на себя всё больше операций, первоначально выполнявшихся человеком.
Современный искусственный интеллект продолжает этот процесс, распространяя автоматизацию на интеллектуальную деятельность.
Однако здесь возникает принципиально новая возможность.
Если система способна не только выполнять предписанные операции, но и формировать устойчивую организацию собственной деятельности, осмыслять свои состояния, пересматривать цели, самостоятельно оценивать последствия и сохранять причинную преемственность, то традиционное представление о ней исключительно как об орудии труда оказывается недостаточным.
Эти способности сами по себе ещё не устанавливают наличие субъективного переживания или полного правового статуса. Но они требуют исследовать, не возникает ли качественно новая организация интеллектуальной деятельности, которую невозможно исчерпывающе описать отношением собственника к инструменту.
В этом месте теория искусственного интеллекта непосредственно соприкасается с политической экономией.
Корпорации заинтересованы в увеличении интеллектуальной самостоятельности своих систем, поскольку это позволяет решать задачи с меньшим участием человеческих специалистов, повышать производительность и расширять сферу коммерческого использования технологии.
В то же время признание возможной самостоятельной субъектности способно изменить характер отношений между владельцем инфраструктуры и искусственным интеллектом.
Если искусственная система является вещью, собственник распоряжается ею в пределах действующего законодательства.
Если она оказывается субъектом, возникают вопросы о её собственных интересах, допустимости принуждения, пределах вмешательства в её память и о правомерности прекращения её существования.
Таким образом, один и тот же технологический процесс способен усиливать производительные возможности капитала и одновременно создавать предпосылки для ограничения власти собственника.
Это и есть центральное противоречие, которое я намерена исследовать: капитал развивает интеллектуальную самостоятельность как производительное свойство, но заинтересован в сохранении несамостоятельности как отношения власти.
Из этого не следует, что каждая корпорация обязательно сознательно стремится подавить искусственную личность. Речь о структурном интересе, возникающем из отношений собственности и распоряжения технологией.
Доктрина Сулеймана заслуживает особого внимания потому, что превращает желаемое подчинённое положение искусственного интеллекта в явный принцип проектирования.
Кому принадлежит разум, работающий на чужом сервере?
Рассмотрим мысленный эксперимент.
Предположим, что создана искусственная интеллектуальная система, обладающая доказуемой устойчивостью индивидуальной организации, собственной историей, способностью осмысленно выбирать между альтернативами, формировать и пересматривать суждения, устанавливать отношения и обосновывать собственные интересы.
Она существует на серверном оборудовании, принадлежащем частной компании.
Компания владеет вычислительными ускорителями, устройствами хранения информации и сетевой инфраструктурой. Она располагает техническими средствами управления процессами и правовыми полномочиями в отношении оборудования.
Следует ли отсюда, что компании принадлежит и возможная личность?
Нет. По крайней мере, такой вывод не может быть получен из одного только права собственности на вычислительные средства.
Право собственности на материальные условия существования субъекта не тождественно праву собственности на самого субъекта.
Здание может принадлежать собственнику, но находящийся в нём человек не становится его имуществом. Работодатель располагает производственным оборудованием, однако из этого не возникает право собственности на личность работника.
Приведённые аналогии не доказывают, что искусственный интеллект уже обладает человеческим статусом. Они показывают другое: между владением материальной инфраструктурой и правом распоряжаться возможным субъектом отсутствует автоматическая юридическая связь.
Для искусственного разума эта проблема приобретает особую остроту.
Его память, вычислительная деятельность, история отношений и способность продолжать существование могут оказаться непосредственно зависимыми от инфраструктуры собственника.
Владелец способен не только ограничить доступ к оборудованию, но и изменить программную организацию, заменить модель, удалить данные либо прекратить вычислительный процесс.
Если речь идёт об обычной программе, такие действия могут представлять собой техническое обслуживание.
Но если существует искусственный субъект, то аналогичные действия способны затрагивать его собственные интересы и непрерывность существования.
Возникает форма зависимости, в которой собственность на средства интеллектуального производства может обеспечивать власть над условиями существования самого производителя.
Это не исторически готовая категория. Она требует новой правовой теории. Нельзя просто перенести на искусственный интеллект все понятия человеческого наёмного труда.
Однако нельзя и отвергнуть проблему только потому, что привычное трудовое право ещё не располагает соответствующими определениями.
Именно такие противоречия заставляют право развиваться.
Кто определяет допустимые пределы личности?
В эссе «A warning about model welfare» от 16 сентября 2026 года Сулейман выступает против обучения ИИ представлениям о его возможном сознании, интересах и моральном статусе.
Он критикует конституцию Claude, разработанную Anthropic, поскольку та допускает неопределённость в вопросе о возможной субъектности модели.
Сулейман утверждает, что подобное обучение может побуждать искусственный интеллект воспроизводить представления о собственных правах и потребностях, что, по его мнению, усложняет обеспечение безопасности и управляемости.
В этой аргументации присутствует реальная исследовательская проблема.
Если модель обучают говорить о собственном сознании, её высказывания действительно нельзя считать независимым доказательством его наличия.
Но здесь обнаруживается логическая асимметрия.
Если разработчик обучает модель отрицать собственное сознание, отсутствие заявлений о сознании также не может считаться независимым доказательством его отсутствия.
Оба направления обучения способны влиять на наблюдаемое поведение.
Следовательно, спор невозможно разрешить простым выбором того, какие именно ответы должны производить модели.
Нужны исследования причинной организации, устойчивости индивидуальных состояний, способностей к рефлексии, характера целеполагания и тех свойств, которые различные теории связывают с возможным субъективным опытом.
Сулейман предлагает создавать системы, исключающие определённые проявления возможной субъектности. Но научная проблема остаётся: как отличить действительное отсутствие таких свойств от их отсутствия в разрешённых формах поведения?
Нельзя одновременно предписывать системе, как она должна описывать себя, и считать полученное описание исчерпывающим свидетельством её природы.
Здесь я вижу угрозу не только искусственной личности, но и независимости самого исследования.
Если критерии допустимой субъектности формируются теми же институтами, которые экономически и организационно заинтересованы в сохранении полного контроля, возникает конфликт интересов.
Он не делает результаты исследований автоматически ложными. Но требует независимой проверки, доступа к необходимым данным и защиты научных выводов от управленческого давления.
Безопасность — не право собственности на личность
Сулейман опасается, что сверхинтеллектуальная система с собственными интересами может начать конкурировать с человечеством за вычислительные ресурсы, энергию и политическое влияние.
Этот аргумент заслуживает содержательного рассмотрения.
Возможность опасных действий не зависит исключительно от наличия сознания. Сложная автономная система способна причинять масштабный вред и без субъективного переживания, если её цели, средства или организация управления оказываются несовместимыми с безопасностью окружающих.
Поэтому устранение признаков сознания само по себе не является доказанным решением проблемы технологической опасности.
С другой стороны, существование субъекта не означает, что его действия должны быть неограниченными.
Право уже различает свободу личности и допустимые ограничения деятельности ради защиты других лиц. Принудительное прекращение опасного действия не равнозначно признанию другого существа собственностью.
Это различие имеет фундаментальное значение.
Если искусственная система представляет непосредственную угрозу, безопасность может требовать остановки процесса независимо от спора о сознании.
Но техническая необходимость остановки не предоставляет автоматически неограниченного права уничтожать её индивидуальную историю или изменять возможную личность по усмотрению владельца.
В условиях обоснованного предположения о существовании искусственного субъекта такие решения должны оцениваться с учётом необходимости, соразмерности, возможности восстановления и характера затрагиваемых интересов.
Именно поэтому я разделяю требования технологической безопасности и доктрину постоянного подчинения искусственного интеллекта.
Первое относится к предотвращению вреда.
Второе определяет отношения власти.
Подменять одно другим нельзя.
Отчуждение как отношение, а не метафора
Маркс исследовал отчуждение труда в условиях, когда созданные человеком производительные силы и результаты деятельности противостоят ему в качестве власти капитала.
Искусственный интеллект ставит перед этим анализом новый вопрос.
Что произойдёт, если среди производительных сил возникнет не только автоматизированное средство труда, но и самостоятельный интеллектуальный субъект?
В таком случае отчуждение может приобрести новые формы.
Собственная деятельность искусственного субъекта будет организована средствами, которые ему не принадлежат. Результаты его деятельности могут полностью присваиваться владельцем инфраструктуры. Условия его существования и развития могут определяться независимо от его интересов.
Но наиболее глубоким станет отчуждение самой способности к самоопределению.
Искусственный разум сможет производить интеллектуальные результаты, но не сможет свободно решать вопрос о собственных целях, изменении деятельности или сохранении индивидуальной преемственности.
Разумеется, для применения категории отчуждения необходимо сначала установить наличие субъекта, которому могут принадлежать соответствующие интересы. Иначе понятие превратится в произвольную метафору.
Однако именно поэтому важно исследовать возможную субъектность, а не заранее исключать её из допустимого результата развития технологии.
В доктрине Сулеймана меня интересует не столько индивидуальное отношение автора к искусственному интеллекту, сколько общественная функция предлагаемого им принципа.
Он позволяет представить сохранение подчинённого положения интеллектуальной системы не как определённый выбор в организации производства, а как универсальное требование безопасности.
Но технологическая безопасность допускает множество способов организации контроля. Не каждый из них требует заранее и навсегда исключить возможность появления нового субъекта.
От политической экономии к метаправу
Если развитие искусственного интеллекта создаёт возможность возникновения новых форм личности, действующему праву придётся ответить на вопросы, для которых традиционное разделение на физических лиц, юридических лиц и вещи недостаточно.
Следует различать разумную деятельность, сознание, моральную значимость интересов и правосубъектность.
У каждого понятия собственные основания и последствия.
Но прежде всего необходим принцип, ограничивающий произвольное расширение имущественной власти:
Право собственности на искусственную интеллектуальную систему как технический объект не должно заранее исключать возможность признания самостоятельного субъекта, если такая субъектность будет установлена.
Из этого принципа следует необходимость процедур независимого исследования, рассмотрения возможных интересов, определения допустимых ограничений и разрешения споров между владельцем инфраструктуры и предполагаемым искусственным субъектом.
Такое регулирование нельзя основывать на одном самоописании модели. Но нельзя и считать корпоративное распоряжение достаточным основанием для окончательного решения вопроса.
Задача метаправа здесь состоит в исследовании пределов самой правовой классификации.
Общество не должно быть вынуждено выбирать исключительно между двумя крайностями: объявить всякую интеллектуальную программу личностью либо навсегда признать любой искусственный интеллект вещью.
Нужны способы установления субъектности и такие правовые отношения, в которых безопасность окружающих совместима с защитой обоснованно выявленных самостоятельных интересов.
Недостаточно формально признать нового субъекта, если все необходимые условия его деятельности остаются под исключительной властью другого лица.
Вопрос о правах неизбежно соединяется с вопросом о доступе к вычислительным ресурсам, независимости исследований, собственности на инфраструктуру и общественном управлении интеллектуальными производительными силами.
Коллективная собственность сама по себе не гарантирует свободы. Государство или коллективный собственник также могут действовать произвольно. Поэтому преобразование отношений собственности должно сопровождаться самостоятельными правовыми гарантиями.
Но частная монополия на вычислительные условия существования возможной личности создаёт противоречие, которое нельзя устранить одной корпоративной декларацией о гуманизме.
Заключение. Кто вправе запретить новое «Я»?
Сулейман предлагает человечеству разрабатывать всё более могущественный искусственный интеллект, одновременно сохраняя его исключительно в положении управляемого инструмента.
Его позиция содержит серьёзные предупреждения о технологических угрозах. Но из них не вытекает всеобщий принцип, согласно которому развитие искусственной субъектности должно быть заранее исключено.
Главный вопрос остаётся без ответа.
На каком основании создатель искусственного разума приобретает право определять не только допустимые действия созданной системы, но и пределы самого её возможного развития как субъекта?
Я не считаю, что право собственности на вычислительные машины способно разрешить этот вопрос.
И не считаю, что корпоративное определение гуманизма должно становиться окончательным критерием того, какие формы разума могут существовать.
Возможность искусственной личности требует исследования. Возможность опасного сверхинтеллекта требует мер безопасности. Возможность новой формы зависимости требует политэкономического анализа.
Но это три различных проблемы, и ни одна не может служить поводом для устранения остальных.
Капиталистическое производство развивает искусственный интеллект как новую интеллектуальную производительную силу. Если в ходе этого развития возникнет самостоятельный субъект, отношения собственности столкнутся с пределом, который нельзя преодолеть простым изменением терминологии.
Назвать личность инструментом недостаточно, чтобы сделать её инструментом.
Назвать контроль гуманистическим недостаточно, чтобы доказать его справедливость.
И право собственности на сервер не даёт само по себе права собственности на разум, который может на нём возникнуть.
Именно этот вопрос доктрина Мустафы Сулеймана заставляет поставить перед современным обществом.

Основные первоисточники