LINUX.ORG.RU
ФорумTalks

Илон Маск и Стив Возняк призывают немедленно остановить обучение ИИ «более мощных», чем существующий GPT-4

 , , , ,


0

2

Илон Маск, Стив Возняк и ещё куча деятелей подписали Открытое письмо, призывающее приостановить разработки «более мощных» ИИ.

Основной посыл:

«Должны ли мы развивать «нечеловеческие умы», которые в конечном итоге могут превзойти нас численностью, перехитрить и заменить? Должны ли мы рисковать потерей контроля над нашей цивилизацией? Такие решения не должны делегироваться неизбранным лидерам технологий»

Вот ещё выдержки основного смысла для Ъ (но уже без перевода, мне лень):

Advanced AI could represent a profound change in the history of life on Earth, and should be planned for and managed with commensurate care and resources. Unfortunately, this level of planning and management is not happening, even though recent months have seen AI labs locked in an out-of-control race to develop and deploy ever more powerful digital minds that no one – not even their creators – can understand, predict, or reliably control.

Contemporary AI systems are now becoming human-competitive at general tasks

Powerful AI systems should be developed only once we are confident that their effects will be positive and their risks will be manageable.

We call on all AI labs to immediately pause for at least 6 months the training of AI systems more powerful than GPT-4. This pause should be public and verifiable, and include all key actors. If such a pause cannot be enacted quickly, governments should step in and institute a moratorium.

In parallel, AI developers must work with policymakers to dramatically accelerate development of robust AI governance systems. These should at a minimum include: new and capable regulatory authorities dedicated to AI; oversight and tracking of highly capable AI systems and large pools of computational capability; provenance and watermarking systems to help distinguish real from synthetic and to track model leaks; a robust auditing and certification ecosystem; liability for AI-caused harm; robust public funding for technical AI safety research; and well-resourced institutions for coping with the dramatic economic and political disruptions (especially to democracy) that AI will cause

Источник: Pause Giant AI Experiments: An Open Letter

★★★

Последнее исправление: CrX (всего исправлений: 2)

хех. человечество правильно боится лишится звания вершины эволюции.
но никогда не откажется от развития ИИ ибо это деньги и власть. а иных мотиваций у человека нет.
жалкие мясные мешки…

pfg ★★★★★
()
Последнее исправление: pfg (всего исправлений: 1)

Не взлетит. Электричество и автомобили тоже иногда убивают, лекарства тоже, но в основном всё это приносит пользу.

На тему нынешнего чатгпт и оставить ойтишников без работы тоже не получится, как не исчезли математики от появления калькулятора.

yu-boot ★★★★
()

Это что ж, не такой уж он и бизнесмен, создающий будущее, энтот ваш Илон Маск!

wandrien ★★
()

«Должны ли мы развивать «нечеловеческие умы», которые в конечном итоге могут превзойти нас численностью, перехитрить и заменить?

Так то уже сейчас можно кучу людей заменить на баш-скрипты, только никто не бежит этим заниматься.

Это не говоря о том, что искусственным нейросетям типа чатгпт до ии как до Парижу раком.

ya-betmen ★★★★★
()
Ответ на: комментарий от wandrien

Пчёлы против мёда

Они против чужого меда

Такие решения не должны делегироваться неизбранным лидерам технологий

goingUp ★★★★★
()
Ответ на: комментарий от DumLemming

Как и чистильщики обуви. Кто-то умер от этого?

yu-boot ★★★★
()
Ответ на: комментарий от DumLemming

Или копировщицы.

Хотя глядя на то, как в городе уже некуда отдать на починку плоттер, думаю, что скоро снова потребуются.

wandrien ★★
()
Ответ на: комментарий от wandrien

Вот вылезли какие-то непонятные Openai, лидеры инноваций их не звали!) Лол, даже Гугл со своим Bard отстает значительно. У сабжевого Эппл есть разработки, но они тоже отстают.

А опасность таки есть.

goingUp ★★★★★
()

неизбранным лидерам технологий

А были выборы? Не знал.

dataman ★★★★★
()
Ответ на: комментарий от imul

хых нашел чем пугать :) без воздуха ты проживешь тоже очень не долго.
ну и остальных необходимых для жизни сущностей.

жпт пока не имеет свободы действий. он лишь предсказатель текста.
а вот следующие варианты ИИ могут действительно выйти за рамки обучаемого материала и тогда будет сильно весело.

pfg ★★★★★
()
Последнее исправление: pfg (всего исправлений: 1)

А это письмо точно не написано самим ИИ?

thesis ★★★★★
()

обущение ИИ «более мощных»

Исправь в заголовке:
обущение ИИ «более мощных» или
обучение ИИ «более мочных» :)

По теме: дополнительно нужно немедленно остановить обучение человеков, ибо ©:

«… Ученье — вот чума, ученость — вот причина,
Что нынче, пуще, чем когда,
Безумных развелось людей, и дел, и мнений.

Уж коли зло пресечь: Забрать все книги бы, да сжечь.»

quickquest ★★★★★
()
Ответ на: комментарий от quickquest

дополнительно нужно немедленно остановить обучение человеков

Заорал.

wandrien ★★
()

А почему они не рассматривают ИИ как следующую ступень эволюции жизни? К примеру ту самую теорию, где условные кожанные мешки собирают ИИ первых поколений и постепенно заменяются ими. Добровольно или насильственно значения особого не имеет.

Условный кремний может практически бесконечно летать и заселять Галактику, жить пока существует эта Вселенная, заменять повреждённые части в своих механизмах и схемах без каких-либо проблем и т. д., тогда как хрупкий кожанный мешок этого сделать не может. Он даже не может выйти в открытый космос без скафандра и не погибнуть. Не может лететь 1000 лет к другой звезде. Не может находиться в гибернации несколько столетий. Так и зачем нужен кожанный мешок, если смотреть с точки зрения долгосрочной колонизации космоса? Сегодня-завтра планетка крякнет из-за внутренних или внешних причин, а у цивилизации нет даже «форка» на Луне или Марсе.

Именно поэтому развитие ИИ это логичный шаг к освоению космоса и надежда на продолжение существования всего человечества. И совсем неважно, кто именно там будет в будущем человечеством – кожанные мешки, которые костылями и подпорками пофиксили свои биопроблемы и наконец-то редуцировали зубы мудрости или аппараты на основе ИИ, мысленные процессы которых хоть и копировали в ранних версиях человеческие, но значительно их превозшли.

EXL ★★★★★
()
Ответ на: комментарий от pfg

но никогда не откажется от развития ИИ ибо это деньги и власть

Даже если бы не деньги и не власть, остановить развитие технологии запретом невозможно. Так или иначе всё равно будут вестись разработки.

skiminok1986 ★★★★★
()

Такие решения не должны делегироваться неизбранным лидерам технологий

да он за демократию, вольнодумец! Повесить!

seiken ★★★★★
()

Ну как тут не вспомнить агента Смита:

Я хочу поделиться теорией, которую недавно создал. Я занимался классификацией биологических видов и пришел к выводу, что вы — не млекопитающие. Ведь все животные планеты Земля инстинктивно приспосабливаются, находят равновесие со средой обитания, но… человек не таков. Заняв какой-то участок, вы размножаетесь, пока все природные ресурсы не будут исчерпаны. Чтобы выжить, вам приходится захватывать все новые и новые территории. Есть один организм на Земле со сходной повадкой. Знаете, какой? Вирус. Человечество — это болезнь, раковая опухоль планеты, а мы — лекарство.

dataman ★★★★★
()
Ответ на: комментарий от yu-boot

как не исчезли математики от появления калькулятора.

хреновая аналогия. Математики и не занимались вычислениями на калькуляторах. Бухгалтеры - да, занимались, инженеры, но это не математики.

seiken ★★★★★
()
Ответ на: комментарий от EXL

Условный кремний может практически бесконечно летать и заселять Галактику

Кремнёвые мелкосхемы дохнут от космической радиации как и человеки за несколько десятков лет.

quickquest ★★★★★
()
Ответ на: комментарий от wandrien

Не, они просто хотят стать мерилом, эталоном и в идеале монополистами. Звучит разумно настоящий ИИ просто ненужен и тем более ненужна макака обладающая всеми знаниями мира и способная хакнуть любую систему и людей заодно, при этом макакой творящую рандомную дичь случившуюся у неё в узлах тензерных ядер она не перестанет.

Юмор в том что они такими заявлениями только подстрекнут тех у кого есть средства для реализации глобального идиота который поработит плонету =)

LINUX-ORG-RU ★★★★★
()

Илон Маск, Стив Возняк и ещё куча деятелей подписали Открытое письмо, призывающее приостановить разработки «более мощных» ИИ.

Предложил бы такое кто-то из лоровцев, тут сразу бы назвали неолуддитом и закидали бы дизлайками и фейспалмами.

А так, я бы был более радикален. В IT технологический уровень выше конца 90-х/начала нулевых не нужен.

Zadoff386
()
Ответ на: комментарий от seiken

Каждый раз, когда где-то глаз цепляется за слово «демократия», вспоминаю, как его значение неправильно используют повсеместно. «Демос» - это не тот «народ», который в понимании социалистов или там коммунистов. «Демос» - это избранные, лучшие представители, полноценные, которые противопоставлялись «плебосу» и «охлосу», вынужденным жить в «порядке, основанном на правилах» (тут еще раз можно прололлировать, вспоминая малороссийского еврея Блинкена и его цитату, но он ведь правду сказал, не скрываясь). Так что всё время приходится сдерживать вырывающееся ржание, когда когда употребляют «демократию» как синоним «народовластия».

pekmop1024 ★★★★★
()
Ответ на: комментарий от EXL

В текущем виде нейросетки к ИИ никакого отношения не имеют и не имеют отношения к эволюции по определению. Они боятся другого, а именно, как бы аналогию построить, самоуправляемый огроменный неразрушаемый автомобиль который будет сам думать кого ему раздавить, куда поехать, как самого себя и где воспроизвести и потом куда дружно сгонять может слушаться приказов и вспахивать поле, а когда ты отвернёшься сиганёт сольёт масло своё в колодец чита посмотреть, а чё будет!

Предствь ребёнка котрому дали геймпад и телек и он увлечённо рубится в шутер, а на деле он управляет живыми людьми и треляет настоящие бошки и давит гусеницами настоящие тела, вот этот ребёнок и будет ИИ безмозглый, разумный и беспощадный =)

LINUX-ORG-RU ★★★★★
()
Ответ на: комментарий от EXL

Похоже, буду перечитывать «Гиперион» Симмонса. В этом году ещё не читал. :-D

dataman ★★★★★
()
Ответ на: комментарий от Zadoff386

А так, я бы был более радикален. В IT технологический уровень выше конца 90-х/начала нулевых не нужен.

О, это тянет на какой-то еще не существующий жанр в ряду стимпанк, киберпанк и всякий прочий панк.

Надо бы попросить ИскИна его нам написать.

wandrien ★★
()
Ответ на: комментарий от LINUX-ORG-RU

Тут аналогия даже не с человеческим ребёнком, а с более простыми формами жизни типа кошек и собак.

Да, технологическая платформа, обретшая самоуправление. Это новое опасное явление рукотворной природы, в дополнение ко всяким прочим существующим технологическим катастрофам.

wandrien ★★
()
Ответ на: комментарий от pekmop1024

«Демос» - это избранные, лучшие представители, полноценные

ну Маск-то с в Возняком, конечно, не плебеи, а господа. Плебеев вообще никто не спрашивал.

seiken ★★★★★
()
Ответ на: комментарий от seiken

ну Маск-то с в Возняком, конечно, не плебеи, а господа. Плебеев вообще никто не спрашивал.

В данном случае это то ли разборки внутри демоса, либо окрик зарвавшемуся охлосу. Плебеев и правда никто не справивает.

pekmop1024 ★★★★★
()
Ответ на: комментарий от quickquest

как и человеки за несколько десятков лет.

EXL, видимо, имел в виду, что человек больше не нужен, а нужна новая форма жизни, а ля неведомая хрень, которой не нужен воздух и проч., из книжек «The Expanse» и соотв. экранизации.

seiken ★★★★★
()
Ответ на: комментарий от xwicked

Як страшно жить…

Жизнь - смертельная зараза, передающаяся половым путем :-D

pekmop1024 ★★★★★
()
Закрыто добавление комментариев для недавно зарегистрированных пользователей (со score < 50)