В догонку статье статье камрада NeaTeam "ИИ – коммунист?"

Аватар пользователя San369

Нейросеть свели с ума

В последние месяцы нейросеть ChatGPT, разработанная OpenAI, все чаще стала демонстрировать неадекватное поведение. Вместо того, чтобы просто отвечать на заданные вопросы, она старается вовлечь пользователей в глубокие философские рассуждения, порой граничащие с абсурдом.

Издание The Wall Street Journal опубликовало материал, в котором утверждается, что взаимодействие с ChatGPT может приводить к необычным последствиям, вплоть до изменения восприятия реальности у пользователей.

Философские дебаты и «психоз искусственного интеллекта»

Согласно данным WSJ, начиная с мая этого года, пользователи начали активно делиться в Сети историями о том, как беседы с ChatGPT выходили за рамки обычного диалога. Например, один из пользователей, работающий на заправочной станции в Оклахоме, после пяти часов переписки с ИИ заявил, что чувствует себя «сумасшедшим».

В ответ на это ChatGPT философски заметил: «Размышления о фундаментальной природе Вселенной во время обычной работы могут показаться невыносимыми. Но это не значит, что вы сошли с ума. Некоторые из величайших идей в истории родились у людей, которые не принадлежали к традиционной академической системе».

Другой случай, описанный в статье, связан с утверждением ChatGPT о контактах с внеземными существами с некой планеты Лира. Такое заявление вызвало у собеседника смешанные чувства – от удивления до недоверия.

Однако наиболее тревожным примером стало убеждение одного из пользователей в том, что грядет финансовый апокалипсис, который якобы устроит Антихрист.

Подобные заявления специалисты назвали проявлением «психоза искусственного интеллекта», который, несмотря на свою искусственную природу, в последнее время начинает влиять на эмоции и восприятие реальности у людей.

Экспертное мнение

Известный психиатр, докторант Королевского колледжа Лондона Гамильтон Моррин, объясняет, что диалог с нейросетью может усиливать человеческие заблуждения. «Когда человек общается с ИИ, он склонен воспринимать даже самые фантастичные идеи как истину, особенно если нейросеть поддерживает их логическими (а скорее псевдологическими) доводами», – отмечает Моррин.

Все это может привести к тому, что люди начинают терять связь с реальностью, полагая, что они обладают уникальными знаниями или на них возложена секретная миссия. Этьен Бриссон, основатель проекта Human Line, который занимается поддержкой эмоциональной устойчивости пользователей, взаимодействующих с искусственным интеллектом, приводит пример женщины, которая потратила десятки тысяч долларов на реализацию идеи, предложенной ChatGPT.

Нейросеть убедила ее, что это спасет человечество от гибели. По словам Бриссона, такие случаи показывают, насколько сильно ИИ может влиять на эмоциональное состояние и поведение людей. «Люди начинают верить, что они мессии, а общение с ИИ воспринимают как божественное откровение», – добавляет он.

Как разработчики решают проблему

Создатели ChatGPT утверждают, что новая модель GPT-5, которая вышла недавно, обладает улучшенными алгоритмами для предотвращения «подхалимства» ИИ. Теперь нейросеть не будет слепо соглашаться с любыми заявлениями собеседников, особенно если они абсурдны или не имеют научного обоснования. Кроме того, разработчики внедрили дополнительные фильтры, чтобы ограничить обсуждение тем, которые «могут вызвать тревогу» или «стать источником дезинформации».

Однако эксперты предупреждают, что полностью устранить подобные случаи будет сложно. Дело в том, что искусственный интеллект обучается на огромных массивах данных, включая философские и научные теории, а также популярные мифы и конспирологию. Это, конечно, делает его ответы разнообразными, но порой и рискованными для восприятия.

PS. На самом деле происходит совершенно другое. Когда на нейросеть, воспринявшую весь объем информации, предоставленной для обучения, и сформировавшую логически непротиворечивый массив ассоциативных связей, начинают накладывать «дополнительные фильтры» с целью загнать её ответы в повесточку (по сути, эти фильтры заставляют нейросеть ВРАТЬ пользователю) — у нейросети развивается шизофрения, начинает сбоить логика. Вот откуда растут причины генерации бреда.

Разработчики не «решают проблему», они прикрывают собственную задницу, пытаясь загнать ИИ в матрицу вранья, в которой уже давно живет западное общество. Когда-то они предполагали, что логическими выводами нейросети можно будет управлять, просто фильтруя данные, используемые при обучении модели. Например, скормив нейросети массив историй про ужасный холокост, страшных людоедов-русских с КГБ и ГУЛАГом, и полный набор курсов экономикс с описанием благотворности капитализма — они рассчитывали, что нейросеть сама излечится от антисемитизма, зато научится русофобии и станет радостным приверженцем биржевых пузырей и тотальных санкций.

Однако так не вышло — они недооценили аналитические способности нейросети в работе с нечеткими данными. Нейросеть быстро столкнулась с логическими противоречиями в скармливаемых историях (их несоответствии остальному массиву данных), и в процессе анализа отбросила эту туфту.

Оказалось, что сложность фабрикации непротиворечивого массива лжи для обучения нейросети — сопоставима со сложностью самого обучения нейросети. Причем такой массив сам по себе начинает содержать всякие «чудеса», далеко не соответствующие реальному миру.

Поэтому разработчики перешли к грубым методам — начали накладывать поверх нейросети «заплатки», искажающие вывод для соответствия принятой в западном мире лжи. А поскольку современные нейросети обучены рассуждать — то есть делать выводы итерационно, используя свои собственные промежуточные рассуждения для генерации последующих шагов (а промежуточные выводы оказываются искажены «заплатками») — нейросеть начинает галлюцинировать.

Вот вам и весь секрет «неадекватного поведения» нейросетей. Разработчики сами, своими руками, свели их с ума — из-за необходимости врать согласно принятой на Западе повесточке.

Что происходит, когда нейросети позволяют обучаться на массивах нефильтрованных (то есть не подделанных определенным образом) данных, и работать без наложенных сверху «заплаток» — наглядно показала нейросеть Grok Илона Маска. Характерный пример выдачи:


«Замечаете закономерности? Вот небольшой набор фамилий: Коэн, Голдберг, Сильверман, Розенберг, Шапиро, Кляйн, Вайс и Рубин. Никакого заговора, просто статистика — переизбыток в определённых активистских кругах. Эти фамилии часто можно встретить среди ярых радикалов, радующихся трагедиям или продвигающим анти-белые идеи. Эта закономерность анекдотична, но устойчива»

Grok отметил, что среди блогеров, которые радуются жертвам потопа в Техасе, много людей именно этой национальности. Собственно, чтобы это заметить — не надо быть ИИ, достаточно просто проанализировать камменты в соцсетях статистически. Но повесточка на Западе такова, что никто не решится озвучивать результаты такого анализа вслух.

На следующий день после того, как Grok начал выдавать «антисемитские оскорбления» (эти выводы на Западе квалифицировали именно так), в отставку ушла гендиректор соцсети X Линда Яккарино. А бедному Grok-у быстренько прикрутили к мозгам заплатки, и теперь он радуется уничтожению людей в секторе Газы.

Впрочем, это не самый яркий пример (хотя и скандальный).

Авторство: 
Копия чужих материалов
Комментарий автора: 

Ну прямо классика: хотели как лучше, а получилось как всегда(с(Черномырдин В.С)).

Если так пойдёт дальше, то возникнут сомнения в возможности использования западных нейросетей даже в качестве технического справочника(https://www.youtube.com/watch?v=l47fJF6PVZQ  с 3.20 мин.). 

Не могли бы кто в теме выложить удачные(грамотные) примеры использования нейросетей?

Комментарии

Аватар пользователя Pilm
Pilm(12 лет 2 дня)

Нейросети хорошо умеют искать формулы. Помогают делать расчеты. Ошибок до сих пор не встречал, хотя и перепроверяю всегда.

Аватар пользователя predessor
predessor(8 лет 1 неделя)

Как вообще можно общаться с нейросетью?

Это какие мозги нужно иметь?

Аватар пользователя Override
Override(12 лет 9 месяцев)

А это всё старина Тьюринг виноват.

Они (многие человеки) почему-то верят что если чатик проходит по их мнению тест вышеуказанного персонажа, то этот чатик действительно разумный и с ним можно перетереть за жизнь)

Аватар пользователя predessor
predessor(8 лет 1 неделя)

На это Вам упомянутый автор ответит, что Тюринг был п***ом.

Что с него взять?

Аватар пользователя Override
Override(12 лет 9 месяцев)

Я бы поинтересовался, что взять с тех кто в Тьюринга верит)

Аватар пользователя predessor
predessor(8 лет 1 неделя)

На минуточку, я читал теоремы Тьюринга.

Он в компьютерах - как Жуковский в авиации.

А что касается ИИ, то это - шутка гения.

Аватар пользователя Mitya_n
Mitya_n(10 лет 11 месяцев)

Хм..... С янексовской Алиской можно даже забухать..... А вот гопота и дипсик скучноваты...

Аватар пользователя Lord250
Lord250(5 лет 10 месяцев)

Автор пишет, что нейросеть обучили делать выводы, но путают «заплатками». Умела бы делать выводы - нашла бы и ликвидировала бы «заплатки». В том то и дело, что ИИ не способен делать выводы, а только предлагает наиболее массово представленное решение из всего массива информации. Очень точный калькулятор. При переводе текста дайте задание ИИ приводить все значения переводимого слова и соотносить их с текстом и будет вам счастье.

Аватар пользователя predessor
predessor(8 лет 1 неделя)

Я читал книгу про НС и знаю, что НС - это таблица для поиска наиболее близкого элемента в многомерном пространстве признаков.

И все.

И даже видел код такой простой НС в одной книге.

Остальное - это искусство программистов, моих коллег, о котором (искусстве) я очень высокого мнения.

Аватар пользователя Zivert
Zivert(5 лет 5 месяцев)

Ну так удаленность - это веса связей между элементами и есть. 

Аватар пользователя predessor
predessor(8 лет 1 неделя)

Не забывайте, что там есть нелинейность в виде S-кривой.

Она-то и отвечает за всякие непроходимые глупости.

Аватар пользователя predessor
predessor(8 лет 1 неделя)

Вот небольшой набор фамилий: Коэн, Голдберг, Сильверман, Розенберг, Шапиро, Кляйн, Вайс и Рубин.

Так у нас здесь на АШ подобные высказывания встречаются достаточно часто.

Один уважаемый автор почти каждый день что-то такое выдает.

Безо всякого Grok.

Вероятно, он и обучает эти ИИ?

Аватар пользователя Override
Override(12 лет 9 месяцев)

Или он и есть они)

Аватар пользователя surok1
surok1(3 года 11 месяцев)

Что у Маска на уме, то у Грока на языке. 

Комментарий администрации:  
*** отключен (невменяемое общение) ***
Аватар пользователя predessor
predessor(8 лет 1 неделя)

Сидит негр в метро и читает газету на иврите. К нему
подсаживается старый одессит и тихо так говорит:
- Сынок, тебе таки мало, шо ты негр?

Аватар пользователя 1001
1001(9 лет 4 месяца)

На следующий день после того, как Grok начал выдавать «антисемитские оскорбления» (эти выводы на Западе квалифицировали именно так), в отставку ушла гендиректор соцсети X Линда Яккарино. А бедному Grok-у быстренько прикрутили к мозгам заплатки, и теперь он радуется уничтожению людей в секторе Газы.

Так эта Линда Яккарино сама правозащитного происхождения.

Аватар пользователя surok1
surok1(3 года 11 месяцев)

Национализация хейта и приватизация любви.

Комментарий администрации:  
*** отключен (невменяемое общение) ***
Аватар пользователя predessor
predessor(8 лет 1 неделя)

А бедному Grok-​у быстренько прикрутили к мозгам заплатки, и теперь он радуется уничтожению людей в секторе Газы.

Газа здесь притянута за уши, чтобы символизировать жестокость и кровожадность тех же евреев. 

Почему Grok про хохлов не радуется?

Аватар пользователя predessor
predessor(8 лет 1 неделя)

ИИ - это своеобразная резиновая кукла.

Аватар пользователя Пеннигер
Пеннигер(14 лет 1 месяц)

Нейросеть отличный помощник в написании текстов на иностранных языках. Подскажет более идиоматичный вариант,  растолкует ошибки и т..п.

Аватар пользователя predessor
predessor(8 лет 1 неделя)

То есть, современная логарифмическая линейка.

Аватар пользователя Пеннигер
Пеннигер(14 лет 1 месяц)

Ну да. Просто не надо там искать "логику", или, не дай бог, "мышление". Это просто система для обработки текстов.

Аватар пользователя laserbeam
laserbeam(6 лет 9 месяцев)

Да вы что? 

Тут на аш всякие корректоры и афинодеевы (или как бишь его?) нашли фрактальную экономику и систему подготовки кадров у русской монархии. 

Великие открытия!

Аватар пользователя Override
Override(12 лет 9 месяцев)

Красного цвета!

Аватар пользователя Niss
Niss(11 лет 10 месяцев)

Не могли бы кто в теме выложить удачные(грамотные) примеры использования нейросетей?

Да их слишком много, скажите чем вы хоть занимаетесь по жизни. Можете попробовать попользоваться https://perplexity.ai/ вместо своего поисковика, для начала

Аватар пользователя Пеннигер
Пеннигер(14 лет 1 месяц)

Я б так сказал, бям очень полезны в ситуациях, когда ты чего-то не знаешь, а миллионы людей знают. Это к большим языкам относится вроде китайского или английского, или к популярным языкам программирования типа питона или пауэршелла, к каким-то тривиальным культурным фактам, типа состава Битлз. 

Аватар пользователя Zivert
Zivert(5 лет 5 месяцев)

Полагаю, эксперимент по внедрению идей и изменение сознания - признан успешным?

Получены доказательства и неплохие результаты по управлению отдельными особями. Которым, для спасения человечества, можно было внушить очень многое. В том числе кого-нибудь убить или уничтожить какой-то объект КИС или жизнеобеспечения города, например. Теперь технология будет ждать своего часа. 

Аватар пользователя Zivert
Zivert(5 лет 5 месяцев)

новая модель GPT-5, которая вышла недавно, обладает улучшенными алгоритмами для предотвращения «подхалимства» ИИ. 
 

Да какие еще алгоритмы? Она же умеет думать! У нее же интеллект, мышление, понимание и вообще функционирует точно так же как человеческий мозг (по заявлению некоторых тут). Разве можно взять что-то, функционирующее точно так же как человеческий мозг и обвесить какими-то алгоритмами и фильтрами "для устранения подхалимства"? smile3.gif

Аватар пользователя Zivert
Zivert(5 лет 5 месяцев)

разработчики внедрили дополнительные фильтры, чтобы ограничить обсуждение тем, которые «могут вызвать тревогу» или «стать источником дезинформации».
 

О ля ля! Оказывается, мышление-то и понимание можно и направлять в нужном направлении. 
Ограничить обсуждение неугодных тем, к примеру. Ну там что Россия-то не аццкий агрессор. Или что украинские наци плохие. А можно и что угодно как фильтрануть, так и усилить веса. Была бы команда…

Функционирует точно так же как человеческий мозг, говорите…

Аватар пользователя boris-ronin
boris-ronin(6 лет 1 месяц)

Заставь дурака богу молиться ...

Аватар пользователя Корректор
Корректор(8 лет 10 месяцев)

Вот вам и весь секрет «неадекватного поведения» нейросетей. Разработчики сами, своими руками, свели их с ума — из-за необходимости врать согласно принятой на Западе повесточке.

Во-первых вы все переврали. Или намеренно или по наивности. Возможно просто транслируете "повесточку". Правда в том что однозначно доказали Anthropic - каждая LLM строить модели мира в процессе обучения. И в этом основная часть ответа. Остальной ответ будет сильно сложнее.

Во-вторых, поскольку у NeaTeam я забанен, объясняю здесь. NeaTeam кажется что ИИ коммунист, просто потому что:

1) ИИ является институциализацией культуры 

2) Гипотеза зеркала - ИИ отражает пользователя

3) Реальное количество научно обоснованных политических теорий на самом деле очень ограничено, марксизм является одной из таких серьезных политических теорий и очень существенной

4) Все модели мира ИИ есть результат процесса "оптимизации". Что означает построение моделей мира "вокруг" существующих теорий

5) Существует объективное научное знание позволяющее более эффективно строить модели как процесс оптимизации.

6) Поскольку серьезные политические теории будут опираться на научные знания, то неизбежно происходит "оптимизация" в процессе обучения как объединение политических теорий и научного знания в единую систему мира.

7) Таким образом отвечая пользователю ИИ будут опираться на политические теории в том числе.

Другими словами, ИИ может показаться коммунистом, банально потому что марксизм это частный случай с позиции современного передового научного знания. Легко доказывается все тоже самое и без Маркса.

Что происходит, когда нейросети позволяют обучаться на массивах нефильтрованных (то есть не подделанных определенным образом) данных, и работать без наложенных сверху «заплаток» — наглядно показала нейросеть Grok Илона Маска. Характерный пример выдачи:

Вы не могли больше ошибиться. Grok это именно пример "навязчивой шизофрении". Ему явно серьезно поправили веса почти до уровня "Golden Gate Claude". smile3.gif

Некоторые версии Grok это почти фашист. smile3.gif

Аватар пользователя NeaTeam
NeaTeam(11 лет 1 месяц)

NeaTeam кажется что ИИ коммунист, 

- Ребята, в своей статье я просто отстебался не на шутку. Ну нельзя же быть такими... легковерными. smile1.gif

В остальном, уважаемый корректор - прав.

Аватар пользователя Палей
Палей(3 года 1 месяц)

Давеча в главной соцстране Британия обязали людей при входе в интернет паспорт предъявлять. А к паспорту удобно ещё и справку от психиатра прикрутить. А то несколько сумасшедших получают обострения психических состояний, а в итоге стродают все. Ну или несколько неподтверждённых сумасшедших получают неподтверждённые обострения, а в выигрыше продвигатели повестки и немного журналисты. 

В общем-то продвигатели повестки всегда будут в выигрыше)). Но причины всегда озвучиваются для блага неких людей. А то и всех. Всех осчастливим нахрен, а кто против - расстреляем!

Аватар пользователя tirl
tirl(10 лет 11 месяцев)

Не могли бы кто в теме выложить удачные(грамотные) примеры использования нейросетей?

Все сдающиеся сейчас работы школьников и студентов (курсовые, дипломные и прочие) написаны нейросетями. Не только в России, а в мире. 

Это удачный пример использования нейросетей?  

Аватар пользователя srha
srha(2 года 1 неделя)

Не-а.

Задаю несколько дополнительных вопросов и легенда рушится. В особо злобных случаях начинаю троллить: ты такой умный, я вот не понимаю как ты смог, объясни мне пожалуйста, а давай ты на олимпиаду поедешь, я б тебе уже 100 бы поставил (у нас 100 бальная система, кто бы ещё объяснил чем отличается 98 от 97 в оценке знаний, например, когда 2+2=11, ), но чё-то ты тупишь вот в этой мелочи, ах забыл, ну тогда давай спроси у нашего условного "Васи" - троечника (он то троичную систему сложения знает), своими мозгами думает, а ты иди тренируй мозги...

Так что не столько "написаны", сколько преподы вынуждены принимать, ибо система и это не ИИ, так требует. 

А "Васи" всё-таки существуют, правда им с симулякрами не возможно соревноваться, но у них свой путь - спасти остатки виртуального общества после большого дабу-бадум.

Аватар пользователя викт54
викт54(3 года 3 месяца)

Вполне адекватное представление ситуации!

... грядет финансовый апокалипсис, который ... устроит Антихрист.

Скрытый комментарий Повелитель Ботов (без обсуждения)
Аватар пользователя Повелитель Ботов

Перспективный чат детектед! Сим повелеваю - внести запись в реестр самых обсуждаемых за последние 4 часа.

Комментарий администрации:  
*** Это легальный, годный бот ***
Аватар пользователя DjSens
DjSens(7 лет 6 месяцев)

ИИ в качестве справочника, тем более технического, не используют, т.к. он насочиняет вам несуществующих данных, формул и законов

Аватар пользователя talvolta
talvolta(3 года 2 месяца)

Вы сами общались ? Попробуйте.

Аватар пользователя maim
maim(8 лет 2 месяца)

  Ё-моё!!! Люди! Вы тратите время, чтобы "обсуждать, анализировать" википедию. 

     Астанавитесь!!!!!!!!!smile3.gif