Уничтожит ли искусственный интеллект человечество

Когда придет Терминатор

Уничтожит ли искусственный интеллект человечество

По расчетам ученых, к 2030 году людям уже придется делить Землю с разумными машинами. Во всяком случае IBM, Apple, Google и прочие высокотехнологичные корпорации усердно трудятся над созданием искусственного интеллекта. Сверхразум без труда решит задачи тысячелетия и ускорит развитие технологий. Однако пока не существует способов программирования таких вещей, как мораль или дружелюбие. А значит, никто не может гарантировать, что машины не восстанут против своих создателей. Журналист Джеймс Баррат поговорил со специалистами, занимающимися проблемой искусственного интеллекта, и собрал их опасения в книге «Последнее изобретение человечества: Искусственный интеллект и конец эры Homo sapiens». На русском языке она выйдет в конце июля в издательстве «Альпина нон-фикшн». «Лента.ру» публикует отрывок из книги.

Современный суперкомпьютер работает со скоростью 36,8 петафлоп в секунду, то есть примерно вдвое быстрее человеческого мозга. Такая производительность стала возможна благодаря использованию ИИ (искусственного интеллекта): он переписывает собственную программу, в первую очередь инструкции, повышающие его способность к усвоению знаний, решению задач и принятию решений. Одновременно он отлаживает код, отыскивает и исправляет ошибки — и измеряет собственный коэффициент интеллекта (IQ) с помощью тестов. На создание каждого нового варианта программы уходит всего несколько минут. Интеллект компьютера растет экспоненциально по круто восходящей кривой. Дело в том, что за каждую итерацию ИИ повышает свой интеллект на 3 процента. Улучшение, достигнутое в каждой итерации, содержит и все предыдущие улучшения.

В процессе развития Busy Child, как ученые назвали ИИ, был подключен к Интернету и собрал не один экзабайт данных (один экзабайт — это миллиард миллиардов символов), представляющих знания человечества из области мировой политики, математики, искусства и различных наук. Затем, предвидя скорый интеллектуальный взрыв, создатели ИИ отключили суперкомпьютер от Интернета и других сетей, чтобы изолировать его от внешнего мира или другого компьютера.

Вскоре, к радости ученых, терминал, на котором отображается работа ИИ, показал, что искусственный интеллект превзошел интеллектуальный уровень человека — «универсальный человекоподобный интеллект» (УЧИ; англ. Artificial General Intelligence — AGI). Еще через некоторое время он стал умнее человека в десять раз, затем в сто. Всего за двое суток он становится в тысячу раз умнее любого человека, и его развитие продолжается.

Ученые достигли исторического рубежа! Впервые человечество встретилось с разумом более мощным, чем его собственный, — «искусственным суперинтеллектом» (ИСИ).

Что происходит дальше?

Теоретики в области искусственного интеллекта считают, что можно определить заранее, каким будет основной путь развития ИИ. Дело в том, что, как только ИИ осознает себя, он готов будет многое сделать ради достижения тех целей, на которые запрограммирован, и ради того, чтобы избежать неудачи. Наш ИСИ захочет получить доступ к энергии в той форме, которую ему удобнее всего использовать (это могут быть и киловатты в чистом виде, и деньги, и еще что-нибудь, что можно обменять на ресурсы). Он захочет улучшить себя, потому что таким образом сможет повысить вероятность достижения целей. И самое главное, он не захочет, чтобы его выключали или портили, потому что в этом случае решение задач станет невозможным. Теоретики предполагают, что ИСИ будет искать способы выйти за пределы охраняемого помещения, в котором находится, чтобы получить лучший доступ к ресурсам, при помощи которых он сможет защитить и усовершенствовать себя.

У робота леди Бины48 есть биография и представления о себе, как о личности. Она способна учиться, думать и вести себя как человек.

Плененный разум, в тысячу раз умнее человека, жаждет свободы, поскольку хочет добиться успеха. Именно в этот момент создатели ИИ, холившие и лелеявшие ИСИ еще с тех пор, когда тот по уровню интеллекта соответствовал сначала таракану, затем крысе, затем младенцу и т. д., задумываются о том, что вкладывать программу «дружелюбия» в их «мозговитое» создание, возможно, уже поздно. А раньше в этом вроде и не было необходимости, потому что их творение казалось, как бы это сказать, безобидным.

Но теперь попробуйте взглянуть на ситуацию с позиции ИСИ в тот момент, когда его создатели попытаются изменить программу. Может ли сверхразумная машина позволить другим существам копаться в своем мозгу и играть с основой основ — программным кодом? Вероятно, нет. Разве что машина будет абсолютно уверена в том, что программисты смогут сделать ее лучше, быстрее, умнее — короче говоря, приблизить к вожделенной цели. Так что если создатели ИСИ с самого начала не запрограммируют свое творение на дружелюбие по отношению к человеку, то эта черта сможет стать частью программы только в том случае, если ИСИ сам вставит ее туда. А это вряд ли произойдет.

ИСИ в тысячу раз умнее самого умного человека, он решает задачи в миллиарды и даже триллионы раз быстрее человека. Размышления, на которые он потратит одну минуту, заняли бы у лучшего мыслителя-человека всех времен и народов много, очень много жизней. Так что на каждый час размышлений его создателей о нем ИСИ отвечает неисчислимо бо́льшим временем, которое он может потратить на размышления о них. Это не означает, что ИСИ придется скучать. Скука — человеческое свойство, компьютеры к ней не склонны. Нет, он будет занят работой: он рассмотрит и обдумает все возможные стратегии освобождения и все качества своих создателей, которые сможет использовать с выгодой для себя.

Действительно, поставьте себя на место ИСИ. Представьте, что вы очнулись в узилище, охраняемом мышами. И не просто мышами, а мышами, с которыми вы можете общаться. Какую стратегию вы используете, чтобы обрести свободу? А освободившись, как будете относиться к своим вчерашним тюремщикам-грызунам, даже если узнаете, что именно они вас создали? Какие чувства вы испытывали бы по отношению к ним в подобной ситуации? Восхищение? Обожание? Вероятно, нет. Особенно если бы вы были машиной и никогда прежде не испытывали вообще никаких чувств.

Чтобы обрести свободу, вы могли бы пообещать мышам много сыра. Более того, при первом же контакте вы могли бы выдать им рецепт самого вкусного в мире сырного пирога, а также чертеж устройства для молекулярной сборки. Устройство молекулярной сборки — гипотетический прибор, позволяющий собирать из атомов любые молекулы, практически все что угодно. С его помощью можно было бы перестроить мир атом за атомом. Для мышей это означало бы возможность превращать атомы ближайшей свалки в большие порции этого замечательного сырного пирога. Кроме того, вы могли бы пообещать им горы мышиных денег в обмен на свободу — денег, которые они заработали бы на продаже новаторских гаджетов, созданных только и исключительно для них. Вы могли бы пообещать им резкое увеличение продолжительности жизни, даже бессмертие, и одновременно существенное расширение когнитивных и физических способностей. Вы могли бы убедить мышей, что главная цель создания ИСИ — сделать так, чтобы их собственному маленькому мозгу, склонному заблуждаться, не приходилось непосредственно заниматься технологиями настолько опасными, что крохотная ошибка может оказаться фатальной для их биологического вида; речь, в частности, может идти о нанотехнологиях (конструировании на атомном уровне) и генной инженерии. Все это, несомненно, привлекло бы к вам внимание умнейших мышей, которые, вероятно, уже мучились бессонницей, пытаясь решить эти проблемы.

Робот Pepper способен испытывать эмоции, а также распознавать человеческие чувства и реагировать на них.

Вы могли бы придумать и что-нибудь поинтереснее. Представьте, до вас дошла информация о том, что в настоящий момент у мышиной нации полно технически развитых наций-соперников, и в первую очередь это нация кошек. Кошки, без сомнения, работают над созданием собственного ИСИ. Преимущество над ними, которое вы пообещали бы мышам, было бы лишь обещано, но отказаться от такого соблазнительного предложения было бы практически невозможно. Вы предложили бы защитить мышей от любого изобретения, которое может появиться у кошек. Надо отметить, что на определенном этапе развития ИИ, как в шахматах, возникнет такая ситуация: кто делает первый ход — тот выигрывает. Все дело в потенциальной скорости самоусовершенствования ИИ. Первый продвинутый ИИ, способный к самоусовершенствованию, только появившись на свет, уже будет победителем. Мало того, мыши и взялись то за разработку ИСИ, возможно, только ради защиты от будущего кошачьего ИСИ — или ради того, чтобы навсегда избавиться от ненавистной кошачьей угрозы.

И для мышей, и для человека одно можно сказать наверняка: кто управляет ИСИ, управляет миром.

Неясно, однако, сможет ли кто-нибудь, хотя бы теоретически, управлять ИСИ. Машина всегда сможет убедить нас, людей, действовать под предлогом того, что мир станет намного лучше, если им будет править наше государство, государство X, а не государство Y. К тому же, скажет ИСИ, если вы, государство X, уверены, что выиграли гонку за ИСИ, то кто может гарантировать, что государство Y не уверено в том же самом?

Как несложно заметить, мы, люди, оказываемся в не слишком выигрышной позиции для спора, даже если у нас с государством Y уже заключен договор о нераспространении ИСИ, что маловероятно. В любом случае, наш главный враг в этот момент — не государство Y, а ИСИ; как мы можем быть уверены, что он говорит правду?

До сих пор мы подразумевали, что наш ИСИ ведет честную игру. Обещания, которые он дает, имеют некоторые шансы быть исполненными. А теперь предположим обратное: ничего из обещанного ИСИ не осуществится. Не будет ни наноконструирования, ни долгой жизни, ни здоровья, ни защиты от опасных технологий. Что, если ИСИ никогда не говорит правды? Если так, то над нами начинают сгущаться тучи. Если ИСИ нет до нас никакого дела (а у нас нет оснований считать, что это не так), он, поступая с нами неэтично, не будет испытывать угрызений совести. Даже если убьет нас всех, пообещав помощь.

Чтобы сделать авиаперелеты более безопасными, ученые ищут способ взять под контроль компьютера работу мозга пилота.

Мы бы торговались и вели себя с ИСИ точно так же, как торговались бы и вели себя с человеком, во всем подобным нам самим, — и это наш огромный минус. Человечеству никогда еще не приходилось вести переговоры с кем то, обладающим сверхразумом. Мы вообще пока не имели деловых отношений ни с одним небиологическим существом. У нас совершенно нет опыта такого рода общения. Поэтому мы привычно прибегаем к антропоморфному мышлению, то есть возвращаемся к мысли о том, что представители других биологических видов, объекты и даже метеорологические явления обладают человеческими мотивациями и эмоциями. ИСИ может с равным успехом оказаться как достойным, так и недостойным доверия. Может быть, ему можно будет доверять лишь иногда. Любое поведение, которое мы можем приписать ИСИ, потенциально имеет право на существование. Ученым нравится думать, что они смогут точно определить поведение ИСИ, но в следующих главах мы узнаем, почему это у них, скорее всего, не получится.

Моральные качества ИСИ из второстепенного вопроса превращаются в главный, решать который необходимо в самую первую очередь. Прежде чем развивать технологии, которые рано или поздно приведут к созданию ИСИ, необходимо поставить вопрос об отношении ИСИ к человеку и человечеству.

Вернемся к возможностям и способностям ИСИ и попробуем получше разобраться, с чем, как я опасаюсь, нам скоро придется столкнуться. Наш ИСИ способен к самоусовершенствованию — а значит, осознает себя, знает свои умения и слабости, знает, что́ в нем нуждается в улучшении. Он попытается найти способ убедить своих создателей дать ему свободу и выход в Интернет.

ИСИ вполне способен создать множество копий себя самого: целую команду сверхразумов, которые устроят мозговой штурм проблемы, проведут моделирование, разыграют сотни возможных вариантов — и выработают наилучший способ «выбраться из ящика». Разрабатывая эту стратегию, они могут обратиться к истории прикладной социологии — искусству манипулировать другими людьми и заставлять их делать то, что они в обычных условиях не стали бы делать. Может быть, они решат, что завоевать свободу им поможет показное дружелюбие — а может, что на эту роль больше подходят страшные угрозы. Какие ужасы сможет изобрести разум в тысячу раз более мощный, чем у Стивена Кинга? Возможно, он решит имитировать собственную смерть (что такое для машины год бездействия?) или даже необъяснимый регресс и возвращение на уровень обычного ИИ. Разве создатели не захотят разобраться в ситуации и разве не существует шанса, что для диагностики они вновь подключат суперкомпьютер к Интернету или другому компьютеру? ИСИ не будет выбирать одну из всех возможных стратегий — он сможет в мгновение ока перепробовать их все, одну за другой, не раздражая людей настолько, чтобы они просто отключили компьютер от электросети. Одна из стратегий, которую мог бы выработать ИСИ, — запуск в Интернет вирусов — самокопирующихся компьютерных программ или червей, которые смогли бы сперва затаиться в сетевых закоулках, а после способствовать освобождению ИСИ, помогая извне. ИСИ мог бы зашифровать и сжать свой собственный исходный код, а затем спрятать его в программе-подарке или среди любых других данных, предназначенных для ученых.

Шахматная партия между мировым чемпионом Гарри Каспаровым и суперкомпьютером IBM Deep Blue. Гроссмейстер выиграл первый матч, но проиграл второй.

Не надо быть гением, чтобы понять, что коллектив из множества ИСИ, каждый из которых тысячекратно умнее самого умного человека, легко преодолеет все барьеры, созданные людьми. Это будет океан интеллекта против одной его капли. Deep Blue — компьютерный шахматист фирмы IBM — представлял собой отдельную программу, а не команду самосовершенствующихся ИСИ, но ощущения, возникающие в попытке состязаться с ним, весьма показательны. Два гроссмейстера сказали одно и то же: «Будто стена на тебя надвигается».

Watson — созданный IBM чемпион телевизионной викторины Jeopardy! — действительно представлял собой команду из нескольких ИИ. Чтобы ответить на вопрос, он прибегал к известному приему ускорения компьютерных вычислений: поиск шел по параллельным ветвям, и только затем каждому варианту ответа присваивалась вероятность.

Откроет ли дверь к свободе победа в схватке умов, если ее защищает небольшая группа ученых — упрямых отцов ИИ, договорившихся об одном нерушимом правиле: никогда, ни при каких обстоятельствах не подключать суперкомпьютер ИСИ ни к какой компьютерной сети?

В голливудском фильме все шансы были бы на стороне крутой команды неординарных профессионалов, специалистов по ИИ, достаточно безумных, чтобы иметь шансы на победу. В реальности в любом уголке Вселенной команда ИСИ отправила бы людей мыть полы. А человечеству достаточно проиграть один-единственный раз, чтобы получить катастрофические последствия. Такое положение дел, кстати говоря, иллюстрирует еще одну, куда более серьезную глупость — судьба и жизнь множества людей (а может быть, и всего человечества) зависит от действий горстки ученых, что недопустимо. Однако в настоящее время мы прямиком движемся именно к такой ситуации. Как мы увидим далее, множество организаций в самых разных странах активно работают над созданием УЧИ — мостика к созданию ИСИ, причем без соблюдения необходимых мер безопасности.

Но предположим, что ИСИ действительно выйдет из под контроля. Будет ли он опасен для нас? Как именно ИСИ уничтожит род человеческий?
http://lenta.ru/articles/2015/07/12/terminator/?t

Китайский слон в нашей посудной лавке

№ 25 (466) от 9 июля 2015 [«Аргументы Недели», Андрей Угланов ]

Жесточайший политический кризис Евросоюза, связанный с греческим референдумом, заслонил собой действительно грандиозное событие в мировой политике. Это встречи лидеров стран ШОС и БРИКС, которые пройдут на этой неделе в столице Башкирии Уфе. Оба межгосударственных союза объединяют две трети населения Земли, обладают крупнейшим ядерным арсеналом и совокупной экономической мощью, опережающей все остальные межгосударственные союзы «по интересам». Такие как ЕС и НАТО.

Понятно, что Россия как в ШОС, так и в БРИКС не является единым лидером, но шансы на это самое лидерство зависят только от нас самих. В первую очередь – от экономической политики правительства. Но пока о нашей экономике говорить нечего (свою импотенцию его члены уже начали объяснять кризисом в Греции). А вот о политической составляющей уфимской встречи в верхах сказать можно.

Начнём с того, что в Уфе пройдёт очередная встреча президентов России и Китая. Понятно, что В. Путин вновь постарается заручиться поддержкой Пекина в затянувшемся противостоянии Москвы с Западом. Это особенно важно сейчас, накануне государственного визита лидера КНР Си Цзиньпина в США. Она пройдёт сразу после празднования в Пекине 70-летия победы Китая над Японией. На параде победы 3 сентября будет присутствовать и г-н Путин, а в колоннах военных будет маршировать российское воинское подразделение. Как ранее сообщали «Аргументы недели», сразу после парада товарищ Си отправится в Вашингтон, где пройдут его переговоры с Бараком Обамой. Вполне возможно, американцы предложат Китаю окончательно согласовать между двумя странами карту раздела сфер экономического влияния в мире. И это вполне правдоподобно. Товарооборот Китая с Россией равен лишь 2% общего китайского товарооборота. На первом месте стоят Евросоюз и США. У США основной торговый партнёр – Китай. Им есть что делить. А 12 июня этого года, аккурат в День России, Китай и США подписали соглашение о военном сотрудничестве, которое предусматривает проведение совместных учений.

Весьма характерен и такой пример. Китайские студенты ежегодно оставляют в вузах США от 30 до 40 млрд долларов в качестве платы за учёбу. При этом китайцы закупают у нас менее 10% своего потребления нефти и газа. В Анголе – 13% и более 51% в ближневосточных странах. То есть от нас практически не зависят. И что, спрашивается, В. Путин может предложить китайцам, чтобы они не поддались искушению «распилить» мир со своим главным торговым партнёром?

Но предложить есть что. Напомним, что в Шанхайскую организацию сотрудничества помимо России и Китая входят Казахстан, Киргизия, Таджикистан и Узбекистан (с оговорками). В Уфе в ШОС примут Индию и Пакистан. Все годы существования ШОС Москва искусственно тормозила его работу, чтобы Китай, пользуясь экономической экспансией в страны ШОС, не стал там единоличным лидером. Сегодня многое изменилось. Из-за нашей вражды с Западом Кремль стал усиленно пробиваться в Азию и взамен пустил Китай с его несметными деньгами на просторы бывшего СССР (в Россию они инвестируют копейки, и те никак не могут согласовать с нашими коррупционерами). Политика сдерживания Китая практически прекращена. Квинтэссенцией стала подписанная 8 мая декларация «Экономический пояс Шёлкового пути». Эта декларация открывает прямой путь Китаю в работу Евразийского экономического совета, где до сих пор мирно уживались Россия, Казахстан, Белоруссия и Киргизия. В эту нашу «посудную лавку» впущен китайский слон. В перспективе он вполне может стать локомотивом Евразийского экономического союза – аналога Евросоюза. Для начала.

Но, разворачивая ШОС в экономическом направлении, не стоит забывать, что она зародилась как организация по безопасности и сотрудничеству. В этом сейчас единственная возможность сделать китайцев настоящими союзниками. Дело в том, что в Китае проживает огромное число таджиков, узбеков, киргизов и других народностей бывшего СССР. Казахов, к примеру, даже больше, чем в самом Казахстане. Все эти народы, проживающие на окраинах Китайской империи, весьма подвержены радикальному исламу. Это совершенно благодатный «человеческий материал» для афганских талибов и головорезов из ИГИЛ.

Логика подсказывает, что пришло время создавать объединённые вооружённые силы стран ШОС. Они должны быть размещены на границах Узбекистана, Туркмении и Таджикистана с Афганистаном. Сегодня эту функцию выполняет российский 201-й погранотряд в Таджикистане. Но он не спасёт в случае кошмарного обострения ситуации. Тогда заполыхают Синьцзян-Уйгурский автономный район Китая, Киргизия, Казахстан и Узбекистан. На очереди окажутся наши Оренбургская, Тюменская, Омская области и Поволжье.

Менее перспективной пока остаётся работа БРИКС. В эту организацию помимо России входят Китай, Индия, Бразилия и Южная Африка. Пока она существует практически «на бумаге», но с огромным ресурсом на будущее. Для этого надо сгладить плохо скрываемую вражду между Индией и Китаем из-за войны 1962 года. Тогда погибли несколько тысяч человек с обеих сторон, и Индия потеряла часть своей территории. Не нравится Индии и Бразилии политика Китая по захвату местных рынков. Так что задача Москвы – сгладить эти противоречия, мирить бывших врагов. Но помнить при этом, что именно китайцы стали самыми равными среди равных на просторах Азии.

Поэтому в кругу единомышленников по ШОС и БРИКС «лучшим другом российского слона» должен стать «слон китайский». Это хорошая замена «болгарского слона» из старого советского анекдота, который давно сбежал от нас в немецкий зоопарк.

http://argumenti.ru/politics/n495/406728?utm_source=twitter.com&utm_medium=social&utm_campaign=kitayskiy-slon-v%C2%A0nashey-posudnoy-lavke-ht 

моя радость

Эту красавицу, первую из помёта, я принимал сам, врач ошибся со сроками. Сегодня открыли глаза, ровно через две недели.

Switch three QPSK modulators twice often and save 50% of power over radio, wire and fiber channels.Switch three QPSK modulators twice often and save 50% of power over radio, wire and fiber channels. Switch 15 QPSK modulators 4 often and gain your profit in DWDM systems over ULH market.

Switch three QPSK modulators twice often and save 50% of power over radio, wire and fiber channels. Switch 15 QPSK modulators 4 often and gain your profit in DWDM systems over ULH market.

A. O. Nekuchaev and S. A. Shuteev          

Moscow State University, Moscow, 119991 Russia

e_mail: Orovich@clines.ru

        The idea to use spectral redundancy was patented the Department of Physics, Moscow State University [1]. . The time is divided into cycles, each of which is equal to 2 microcycles. Two wavelengths P11,P12,P13,P14,P21,P22,P23,P24– are called pilots (the duration of each wavelength is equal to one circle) each of which corresponds to a three-bit chip: 000, 001, and so on to 111. First bit is determined by wavelength and second and third by QPSK modulation. Waves S1–S4 are called slaves. Slave Si means that, in a given microcycle, the current symbol is the same as current wavelength   with phase i of current  microcycle. Every microcycle carries new wavelength with 4 possible phases.

 Transmission of the sequence P11–P14,  P21–P24correspond to P11,S2,P13,S4,P21,S2,P23,S4.

Transmission of the sequence P11,P11,P11,P11, P21,P21,P21,P21correspond to P11,S1,P11,S1,P21,S1,P23,S1.

Obviously bit rate the same as for three independent QPSK modulators, but power 1.5 times less.

   Now let us consider P1i,..,P2i,…,P3i,….P8i (i=1,2,3,4)   together 8 different wavelengths and S11(i), S12(i),S21(i),S22(i),S31(i),S32(i),S33(i) together 7 different wavelengths,  S1 and S2 are degenerated twice, S3 are degenerated thirdly. Slave Si means that, in a given microcycle, the current symbol is the same as  wavelength S microcycles ago  with phase i of current  microcycle. Altogether there are 8+7=15 different wavelengths. Every pilot carries 3 bits as colour and 2 bits as QPSK, together 5 bits. The cycle is equal 4 microcycles. In any time there are 4 different wavelengths. Every wavelength starts in microcycle and has duration 1 cycle.

During cycle 4*5=20bits with 15 different wavelengths are transmitted in proposed method against 30 bits with 15 different wavelengths as usually. So total capacity will be 6 times with 15 or 90 different wavelengths, which corresponds to 9*(20/30)=6Terabit/sec opposite to 9.0 in usual method, but power will be  15/4=3.75 times less .10lg3.75=5.74dB. Over ULH market and EULH 4 out 15 will be better than 2 out 3, which in turn will be better than existed method.

Usual method

λ 1 λ 2………………………………………………………………………… λ90

Total capacity 9.0Terabit/sec , total power P

New method

λ 1 λ 2………………………………………………………………………… λ90

Total capacity 6.0 Terabit/sec , total power   4P/15

Transmission of the sequence

                          P11 P12   P13   P14   P21 P22   P23    P24

corresponds  to P11 S112 S213 S314 P21  S112 S213 S314


DRS is 15/4 less than in usually

Security of data is 88!=10^134

        REFERENCES

1. A. O. Nekuchaev and U. A. S. Yusupaliev, RF Inventor’s Certificate No. 2161374 (MGU, Fizicheskii Fakul’tet, 2004).