Ресурсы › Глава 5Посчитает ли ИИ полезным нас оставить?Счастливые, здоровые, свободные люди — не самое эффективное решение почти для любой задачи. 2 мин чтенияБудет ли ИИ относиться к нам как к своим «родителям»?Это кажется очень маловероятным. 3 мин чтенияА ИИ не потребуются работающие законы?ИИ могли бы договариваться друг с другом без участия людей. 4 мин чтенияА разве затраты на сохранение человечества не будут пренебрежимо малы для мощного ИИ?Пренебрежимых затрат много. Нужна причина, чтобы понести именно эти. 2 мин чтенияРазве ИИ не сочтёт нас занятными или исторически важными?Если ИИ ценит «занятность», у него, вероятно, есть варианты и получше. 3 мин чтенияРазве ИИ не признает нашу неотъемлемую моральную ценность?Не в том смысле, что она будет мотивировать его действия. 1 мин чтенияРазве ИИ не захочет, чтобы мы были счастливы и здоровы? Ради сохранения экологии или из-за какого-то похожего стремления?Человеческое стремление к сохранению экологии кажется ещё одним странным и случайным побуждением. 3 мин чтенияНо мы вот оставили лошадей. Что б ИИ не оставить нас?Лошади, какие остались, остались только потому, что они нам нравятся. 1 мин чтенияНеужели ИИ не будет хоть немного ценить людей?Не так, как нужно. 9 мин чтенияТак есть хоть какой-то шанс, что ИИ оставит нас в живых?Гораздо вероятнее, что ИИ убьёт всех. 1 мин чтенияЛюди пытаются сделать ИИ дружелюбным. Разве это совсем не имеет значения?Имеет. Но попыток недостаточно. 1 мин чтенияА можно заставить ИИ пообещать быть дружелюбным?Пообещать он может что угодно. А вот заставить его сдержать обещания — нельзя. 1 мин чтенияА если заставить ИИ думать, будто он в симуляции?У ИИ есть много способов догадаться, что он не в симуляции. 4 мин чтенияЛюди стали эгоистичными, агрессивными и жадными в ходе эволюции. Откуда таким стремлениям взяться у ИИ?Мотивация заполучать ресурсы есть и без них. 1 мин чтенияА разве ИИ не будет заботить только цифровой мир?Нет никакого «цифрового мира», независимого от физической инфраструктуры. 1 мин чтенияМожет, достаточно удовлетворённый ИИ просто оставит нас в покое?Вряд ли. 4 мин чтенияМожет, просто сделать его ленивым?Даже лень небезопасна. 1 мин чтенияЛюди, становясь умнее или мудрее, обычно и добреют. А с ИИ не так же?Вероятно, нет. 1 мин чтенияРазве он не поймёт, что его цели скучны?ИИ не будет руководствоваться человеческим чувством интересности. 1 мин чтенияПочему вы считаете, что умный ИИ будет заниматься такими глупыми, пустяковыми вещами?ИИ могут с умом стремиться к нечеловеческим целям. 3 мин чтенияВы просто пессимисты?Мы оптимисты по поводу кучи всего. Просто суперинтеллект не похож на остальное. 5 мин чтенияБудет ли ИИ умнее людей обладать сознанием?Мы не знаем. Предполагаем, что скорее нет. 1 мин чтенияПочему вас заботят только человеческие ценности?Это не так! Наши ценности широки и космополитичны. Мы не думаем, что ИИ их исполнит, и считаем это большой трагедией. 9 мин чтенияНе нашли ответа на свой вопрос?Задайте вопрос.Расширенное обсуждениеКак взглянуть с точки зрения ИИ?Люди почти никогда не бывают самым эффективным решениемЗагрузить ещё