Разработчик нейросетей предупреждает об их опасности

Разработчик нейросетей предупреждает об их опасности
фото показано с : nep.co.il

2023-5-7 12:00

Джеффри Хинтон стоял у истоков искусственного интеллекта в его нынешнем виде. Теперь ученый уверен: его изобретение очень разумно и весьма опасно. На днях он покинул Google и дал серию интервью, чтобы предупредить человечество.

«Эти штуки полностью отличаются от нас. Иногда мне кажется, будто прилетели инопланетяне, а люди этого не заметили, потому что те уж очень хорошо говорят по-английски», — с таких слов ученый начал разговор о больших языковых моделях вроде ChatGPT в беседе с журналистом MIT Technology Review.

Джеффри Хинтон родился в семье биолога, и, возможно, именно это повлияло на его интерес к нейросетям. Тогда, в 1980-е мало кто воспринимал это направление искусственного интеллекта всерьез. А Хинтону нравилась идея, что ученые фактически имитируют устройство настоящей биологической нервной системы. Он разработал некоторые решения, которые позволили этому направлению стать самым успешным ИИ. Теперь ученый уверен: пытаясь имитировать то, что делает биологический мозг, о мы придумали нечто лучшее.

«В нашем мозгу 100 триллионов соединений. Большие языковые модели имеют максимум до триллиона. И все же GPT-4 знает в сотни раз больше, чем любой человек, - объясняет ученый. - Так что, возможно, у него на самом деле гораздо лучший алгоритм обучения, чем у нас».

Конечно, ChatGPT далек от совершенства. Например, временами он просто выдумывает факты. Это явление называют «галлюцинациями ИИ» и приводят в пример, как фундаментальную слабость нейросетей. Но Хинтон считает, что не так уж эта слабость и значима. Что нейросеть просто иногда «болтает ерунду», как и все мы. И если мы прощаем это людям, то почему-то слишком строго судим компьютер. Ученый твердо уверен, что перед нами «новая и лучшая форма интеллекта».

Когда в следующем интервью журналисты Би-би-си попросили Хинтона уточнить, что он под этим понимает, тот высказался более развернуто:

«Мы биологические системы, а это цифровые системы. Цифровые системы могут иметь много копий одного и того же набора переменных и одной и той же модели мира. И все эти копии могут учиться по отдельности, но мгновенно делиться друг с другом своими знаниями. Это как если бы у вас было 10 тысяч человек, и всякий раз, когда один из них что-то узнает, это автоматически узнавали бы все остальные. Вот почему эти чат-боты могут знать гораздо больше, чем любой человек».

Ученый уверен, что мы уже сейчас близки к тому, что ИИ станут умнее нас. «А в будущем они будут намного умнее нас, — продолжает он. — Как мы это переживем?»

Недавно Джеффри Хинтону исполнилось  75 лет. И он решил уйти из Google, чтобы свободно и без оглядки на работодателя говорить об опасности искусственного интеллекта. И первая опасность в том, что умные машины попадут к плохим людям, таким, как Путин.

«Они захотят использовать их для победы в войнах или манипулирования электоратом, - предупреждает ученый. – Я ни секунды не сомневаюсь в готовности Путина создавать сверхразумных роботов, чтобы убивать украинцев».

Но даже безо всяких злоумышленников все может пойти не так.  Хинтон считает, что следующим шагом для умных машин станет способность создавать собственные подцели, промежуточные шаги, необходимые для выполнения основной задачи. Простой такой подцелью, совершенно обычной в биологии, было бы получить побольше энергии.

«Так что первое, что может случиться, это то, что эти роботы скажут: давайте получим больше мощности, давайте перенаправим все электричество на наши чипы, - рассуждает Хинтон. - Еще одна замечательная подцель — сделать больше копий самого себя. Здорово звучит?»

Ученик Хинтона профессор Монреальского университета Йошуа Бенджио, еще один отец современного ИИ, согласен с опасениями учителя. Недавно он подписал коллективное письмо ученых, мыслителей и IT-предпринимателей об опасности искусственного интеллекта. И вместе со всеми ими призвали ограничить тренировку систем мощнее GPT-4.

«Я слышу людей, которые принижают эти опасения, но я не вижу ни одного веского аргумента, который убедил бы меня в том, что рисков того масштаба, о каком рассуждает Джефф, не существует», — отмечает Бенджио.

Сейчас Джефф Хинтон предлагает лидерами технологической отрасли собраться вместе и договориться о рисках и о том, что с ними делать. Хорошим примером для подражания, сказал он MIT Technology Review, может служить международный запрет на химическое оружие.

В разговоре с Би-би-си ученый уточнил, что все-таки не стоит объявлять нейросети вне закона подобно отравляющим газам. В краткосрочной перспективе, объяснил он, ИИ несет гораздо больше пользы, чем рисков. Кроме того, Хинтон отметил, что «даже если все в США прекратят разработку ИИ, Китай просто получит большое преимущество».

Но это не значит, что надо пускать дело на самотек. Как лучше регулировать ИИ – решать политикам и общественным деятелям. Хинтон же ученый, и его дело предупредить.

Никита Аронов, НЭП. Фото: AP Photo Noah Berger

The post Разработчик нейросетей предупреждает об их опасности appeared first on НЭП.

источник »

виде нынешнем ученый уверен весьма разумно изобретение

виде нынешнем → Результатов: 27


Фото:

Требуется: смелый министр просвещения

Будущий министр просвещения должен стать последним, занимающим эту должность в ее нынешнем виде. Этой системе необходимо обеспечить независимость и свободу от политического вмешательства. Она не должна быть подконтрольна министерству, пытающемуся принять участие в каждом ее решении.

2022-11-4 16:00


Фото:

Средняя зарплата в Иерусалиме на 3100 шекелей меньше средней по стране

Столица Израиля в ее нынешнем виде представляет собой печальную картину. Половина живущих в ней детей находятся за чертой бедности, а средняя зарплата – намного ниже средней по стране. Об этом свидетельствует «Статистический ежегодник», опубликованный 26 мая Иерусалимским институтом политических исследований.

2022-5-29 10:00


Мэры Бат-Яма, Холона и Ришон ле-Циона сообщили, что не вернут к работе систему образования

Мэры Бат-Яма, Ришон ле-Циона и Холона сообщили, что не станут возвращать систему образования к работе, если правительство утвердит план восстановления работы школ и детских садов в его нынешнем виде - частичное обучение на открытом воздухе.

2021-2-8 00:07


Друзы: Национальный закон нас ранит

Духовный лидер друзской общины, шейх Муафак Тариф, высказался по поводу слушания в Верховном суде по поводу петиций против Закона о национальном характере государства, заявив: «Я надеюсь, что демократия восторжествует и суд постановит равное гражданское право всех народов».

2020-12-22 11:35


Гидеон Саар: Ликуд в нынешнем его виде не может произвести необходимых стране реформ

«Я долго пытался изменить ситуацию изнутри, но не смог. Сегодня пришло время сменить Нетаниягу», — сказал депутат Саар.

2020-12-9 21:11


Глава законодательной комиссии Яаков Ашер: «Мы не продлим пилотный проект по каньонам в его нынешнем виде»

Ашер сказал, что проект надо распространить на все торговые центры, чтобы не было столпотворений.

2020-12-1 13:18


Фото:

Еврейство Торы требует подарков на каждого ребенка: В нынешнем виде план не пройдет

Председатель финансовой комиссии Кнессета Моше Гафни объявил в интервью Кан Бет, что заблокирует программу подарков в ее нынешнем виде: Мы не оставим голодными четвертого и пятого ребенка.

2020-7-20 18:28


Источник в "Ликуде": "Коалиция в нынешнем составе недолговечна"

В понедельник газета "Исраэль а-Йом" цитирует слова высокопоставленных представителей "Ликуда", заявивших, что коалиция в ее нынешнем виде не сможет просуществовать достаточно долго.

2020-6-29 11:01


МИД не верит в американскую «сделку века» по Палестине

Предложенная президентом США Дональдом Трампом «сделка века» в нынешнем виде вряд ли сможет приблизить перспективу достижения прочного ближневосточного урегулирования, заявил заместитель министра иностранных дел РФ Михаил Богданов в ходе слушаний…

2020-2-27 12:36


Турция предложила Израилю обсудить строительство газопровода в Европу

Отмечается, что турецкая сторона заявила и. о. израильского посла в Анкаре, что Турция не допустит строительства газопровода в нынешнем виде, но «открыта к диалогу и переговорам с Израилем по вопросу о газе».

2019-12-15 11:45


Фото:

Лицман: выйдем из коалиции, нельзя ограничивать изучающих Тору

Заместитель министра здравоохранения Яаков Лицман объявил, что фракция Еврейство Торы выйдет из правящей коалиции, если закон о призыве будет окончательно принят Кнессетом в его нынешнем виде, представленном министерством обороны.

2018-7-2 18:43


Фото:

Коалиция снова на грани кризиса: Совет мудрецов Торы не одобрил закон о призыве

Совет мудрецов Торы, управляющий партией Агудат Исраэль, постановил, что предложенная комиссией министерства обороны версия закона о призыве неприемлема, и четверо членов Агудат Исраэль обязаны выйти из коалиции, если закон будет принят в нынешнем виде.

2018-6-14 19:04


Фото:

Генсек ООН признал факт начала новой холодной войны и неэффективность Совбеза

Генеральный секретарь ООН Антониу Гутерриш признал, что Совет безопасности ООН в своем нынешнем виде не в состоянии эффективно работать, в частности способствовать урегулированию конфликту в Сирии.

2018-4-23 09:10


Закон о пособиях по инвалидности глубоко застрял в возражениях со всех сторон

В среду в Кнессете был утвержден в первом чтении законопроект о повышении пособий по инвалидности. Законопроект был поддержан депутатами единогласно, но при это всем было ясно, что в нынешнем виде закон еще далек от утверждения.

2018-2-2 08:05


Закон о пособиях по инвалидности глубоко застрял в возражениях со всех сторон

В среду в Кнессете был утвержден в первом чтении законопроект о повышении пособий по инвалидности. Законопроект был поддержан депутатами единогласно, но понятно всем, что в нынешнем виде закон еще далек от утверждения.

2018-2-2 08:05