Нанотехнологии могут привести к глобальной катастрофе несколькими путями. Первый из них связан с интенсивным применением нанотехнологического оружия, причем такого, которое способно атаковать людей. Если вся земная поверхность будет…
Когда будет создан наноробот
Прежде всего отметим, что наноробот возможен, потому что его аналог существует в природе. Любая живая клетка способна осуществлять молекулярное производство, то есть создавать структуры, обладающие атомарной точностью, например…
Что мы знаем, не знаем и не можем знать о нанотехнологиях
Слово «нанотехнологии» в последние несколько лет было настолько затаскано, что стало вызывать аллергию. С одной стороны, границы термина настолько растянули, что им стали называть любой коллоидный раствор, а…
Противоядие: иммунизация и контроль
Очевидно, общество будет противостоять такому развитию событий. Первый и основной инструмент защиты – это создание очень жесткого контроля над средствами разработки биологических объектов. Однако чтобы достичь в этом…
Доступность как угроза
Теперь давайте попробуем сделать выводы о том, какое наихудшее будущее имеет развитие биотехнологий. Наиболее страшным сценарием представляется возникновение и распространение «биохакеров», вооруженных своего рода «биопринтером» – настольной мини-лабораторией,…
Кое-что о невидимом враге, «ошибках» и «достижениях»
Вот некоторые факты, почерпнутые из открытых источников. Эпидемия гриппа-испанки 1918 года затронула весь мир, кроме нескольких отдаленных островов. Заражение сооружений сибирской язвой очень длительное (один остров в Англии…
Биотехнологии: предсказуемая катастрофа
Биотехнологии представляют собой не меньший риск для выживания человечества, чем искусственный интеллект. Положительные результаты развития биотехнологий гораздо медленнее доходят до потребителей, чем достижения в области компьютеров, поскольку клинические…
Смутное ощущение угрозы и химеры подсознания
Известно, что нельзя использовать примеры из художественной литературы и кино для оценки рисков человеческого вымирания, так как эти примеры существенным образом искажены необходимостью сделать интересный сюжет с приятным…
Можно ли создать безопасный ИИ?
Часто считается, что для обеспечения безопасности ИИ ему достаточно привить три закона робототехники Азимова. К сожалению, сами рассказы Азимова показывают массу ситуаций, в которых робот, опираясь на эти…
Угрозы, порождаемые искусственным интеллектом
С точки зрения риска, создаваемого ИИ, наиболее опасен сценарий, когда после открытия главного принципа мощность ИИ начнет лавинообразно расти. Она может расти как за счет резкого увеличения инвестиций…
Срок решения технической задачи
Итак, нет ничего удивительного в том, что рано или поздно интеллект окажется полностью на компьютерной базе, и при этом он будет в значительной мере нацелен на самосовершенствование и…
Искусственный интеллект, его риски и непредсказуемость
Вместо того чтобы сразу приступить к дискуссии, возможен ли искусственный интеллект, я хочу выдвинуть крайнюю точку зрения, состоящую в том, что в определенном смысле ИИ уже существует. Дело…
История и модели прогресса
Мы знаем достаточное число примеров, когда исторические процессы ускорялись фактически до бесконечной скорости за счет того, что несколько значимых событий происходили одновременно. Например, Солженицын так описывает ускорение событий…
Точные науки и технологии
В математике термин «сингулярность» связывают с наличием особенности у некой функции, например, того, что она обращается в бесконечность при приближении к нулю. Физики стремятся избежать описания процессов функциями…
2025
Исходно термин «сингулярность» предложил Вернор Виндж в 1993 году, высказав идею о том, что, когда человек создаст машину, которая будет умнее его самого, с этого момента история станет…
Сингулярность
Термин «технологическая сингулярность» постепенно завоевывает признание, и по мере того как он все более широко становится известным в России, среди западных ученых, его породивших, нарастает разочарование из-за размытости…
Непредсказуемость и отказ от прогнозирования
О возможной глобальной катастрофе можно почерпнуть много ценного из русских пословиц и других источников народной мудрости. Начнем с классического: «Пока гром не грянет, мужик не перекрестится». Это означает,…
Невозможный «черный лебедь»
Принципиальной непредсказуемости будущих событий и склонности людей недооценивать маловероятное на их взгляд посвящена вышедшая в 2007 году книга Нассима Талеба «Черный лебедь». (Taleb Nassim Nicholas. The Black Swan:…
Не всякое предсказание – прогноз
Есть два различных класса прогнозов – о том, что будет, о том, когда это будет. Идеальный прогноз должен отвечать на оба эти вопроса. Однако поскольку до идеала в…
Непостижимость и невычислимость
Целый ряд принципиально важных для нас процессов настолько сложен, что предсказать их невозможно, поскольку они невычислимы. Невычислимость может иметь разные причины. · Она может быть связана с непостижимостью…