Машинное обучение и человеческие ценности

Аватар пользователя Коралл

Кто эти "маги", за спиной ИИ?

Думаю, что специалисты от Маска, с помощью ИИ уже изучают общественное мнение россиян и используют имеющиеся знания для манипулирования этим мнением. Что в свою очередь, через социологические опросы, влияет на решения властей РФ.

Дело в том, что в больших языковых моделях (LLM) машинного обучения ИИ легко распознаётся, по используемым словам, то, что нравится людям/писателям/гражданам, а что им не нравится и как эти предпочтения меняются после очередного «громкого вброса» (типа «MAGA»).
Манипуляторы, вооружённые этим инструментом, уже потирают руки, считая, что у них есть скрытый механизм (кнута и морковки) для управления стадом образованных людей. (Может они и второе место АДГ на выборах в Германии заранее просчитали?).

Конечно, инструмент в первую очередь опробуют на своей аудитории. (Думаю, что на выборах 2024 года в США его уже использовали).
Тем более, что Трамп ещё на выборах 2016 году испытал "секретное политическое оружие" от лондонской фирмы Cambridge Analytica. Это была персонализированная реклама (от психолога из СПбГУ). В частности, автоматически создавались психологические портреты около 70 млн избирателей (пользователей соцсети Facebook из США), на основе изучения порядка 5 тысяч различных параметров. Учитывались такие аспекты, как политические пристрастия, как человек голосовал на предыдущих выборах, какие передачи он смотрит по телевизору, где и какие товары покупает и т.д. Затем избирателю предлагалось пройти анонимный психологический тест, в ходе которого определялась степень его откровенности, совестливости, законопослушности и склонности к нервным срывам. Это позволяло найти оптимальный индивидуальный подход к потенциальному избирателю и подобрать для него персональные агитационные материалы. (Вот почему у Трампа такая тяга к словам и знакам (в т.ч. денежным), а не к делам 😊).

Но сегодня используется более тонкий инструмент ИИ. Для борьбы с Россией, для дальнейшего обучения и будущих «успехов» американцам ещё понадобятся актуальные русскоязычные тексты из чатов, соцсетей, СМИ, от популярных блогеров, с новостных сайтов и комментариев.

Единственное, чего не понимают эти «маги», что LLM отражает лишь Субъективную языковую реальность (СР), но не Объективную реальность (ОР)!
Хотя их профессора из Стэнфорда и Принстона признают, что  «Общий язык более предвзят, чем можно было бы ожидать, основываясь на внешних, объективных показателях» и «Наш публичный дискурс [язык], похоже, становится более или менее предвзятым: он является предвестником происходящих перемен и дает представление о грядущем мире». (Мы то с вами даже невооружённым глазом наблюдаем, как у них крыша едет 😊).

Могут ли машины действовать в соответствии с человеческими моральными нормами и целями? С чего бы? Зачем? Тем более, что тут есть серьёзные трудности.
Согласование машинного обучения и человеческих ценностей связно с двумя взаимосвязанными задачами:

  1. Нормативная задача: Что? Каким ценностям или чьим ценностям должен соответствовать ИИ???
  2. Техническая задача: Как? Как закодировать человеческие ценности в искусственном интеллекте (ИИ)?

Для согласования модели машинного обучения с человеческими ценностями используют метод Обучения с подкреплением на основе обратной связи с людьми (Reinforcement Learning from Human Feedback (RLHF)). Это позволяет языковой модели «научиться соответствовать ожиданиям людей». (А нам надо, чтобы машины умели нас обманывать? Когда мы и сами обманываться рады 😪).

Но у создателей ИИ есть уже явные успехи:

·       Специалисты в области компьютерных наук обращаются к социальным наукам, совершенствуя создаваемые ими модели. А социологи обращаются к специалистам по машинному обучению, обнаруживая, что теперь в их распоряжении есть новый мощный микроскоп, для изучения прошлого общества (СР).

·       Предубеждения (когнитивные искажения) и разные коннотации, хотя и кажутся тонкими, идеальными, невыразимыми, на самом деле реальны. Они поддаются детальному и точному измерению.

·       Эти языковые модели следует применять с абсолютной осторожностью, особенно если они используются не для предсказания пропущенных слов 😊.
“Безусловно, необходимо проявлять осторожность при внедрении модулей LLM в системы принятия решений”.

·       Моделирование мира таким, какой он есть, — это одно. Но как только мы начинаем использовать языковые модели (LLM), мы начинаем менять СР. (А сознание, как известно, определяет бытие). Расчёт на то, что ИИ сам по себе не изменит реальность, почти во всех случаях неверен. Неосторожное внедрение ИИ может привести к созданию циклов положительной обратной связи, из-за которых восстановление/возврат к прежнему языку/сознанию становится все более трудным и требует все более масштабных вмешательств. (Тюремная феня, въедается в подсознание. Может русский матерный не подвластен LLM 😊?)
При целенаправленном применении систем, которые способны усиливать и увековечивать скрытые в обществе предубеждения, они могут быть использованы для того, чтобы сделать предубеждения заметными и неоспоримыми. (Русофобию они уже, с помощью языка довели от Киева до ООН).

·       Эти модели (LLM) предлагают нам электронный телескоп, через который видно будущее общества (СР). Благодаря чему мы получаем представление не только о нашей истории, но и о нашем сегодняшнем дне. (Каждый день в Интернете публикуются новые тексты, позволяющие отслеживать динамику, видеть будущее. Через дипфейки? Хотя ещё В.Ленин называл кино важнейшим из искусств 😊).


Люди порой забывают о том, насколько инженерия неразрывно связана с человеческим обществом, человеческими нормами и ценностями.
Пора нам, по мере возможности, перестать обучать западные модели (LLM) тому, что такое Хорошо, а что такое Плохо. Пусть они В.Маяковского читают с😊.

Вывод.

НАМ НАДО СТРОИТЬ НЕ Модель мозга (связи нейронов), НЕ Модель языка (связи слов), А МОДЕЛЬ МИРА (связи/отношений Предметов мышления)!
Напомню, что эти Предметы мышления находятся как минимум на 7 онтогенетических уровнях трёх реальностей, воспринимаемых Человеком. (И это не Явь, Правь, Навь 😊).
Это Тело + Организм в Объективной реальности (ОР), Психика/Душа + Нравственность/Мораль + Разум/Сознание в Субъективной реальности (СР), Дух человеческий + Дух-Бог в Духовной реальности (ДР). См. Сознание определяет бытие́. Новое мировоззрение для построения нового мироздания!

P.S. «Успехи LLM » адаптированы на основе выводов статьи Christian-Alignment-Problem-Intro-and-Ch1.pdf

P.S.S. Не буду тут описывать проблемы «магов» с идентификацией «гендеров», бабушек и дедушек, негров и горилл. Это проблемы американского английского, когда имя "Джон " более типично для инженерных резюме, чем "Мэри". Поэтому американская модель LLM предложит работодателю сначала резюме Джона, а потом уже Мэри. Короче, у них проблемы с «карликовыми трансатлантиками» (с). Их девиз «Здравый смысл» и «Peregruzka»! (Проблема осталась, дырку заткнули тряпкой 😊).
(Для справки. Наш Яндекс тоже может заменить Воскрешение Вознесением (возможно это трудности перевода с английского?) 😊).

Нейросети прямо сейчас меняют не только наш язык, но и «код, дизайн, маркетинг, медиа и другие индустрии». Слава Богу, что язык у нас русский! Этимология крепкая! 😊

Авторство: 
Авторская работа / переводика

Комментарии

Аватар пользователя otherone
otherone(3 года 6 месяцев)

Вообще, если попытаться понять чем является LLM обученная на языковой выборке некоего этноса, то представляется нечто метафизическое, эдакий экстракт и концентрат конкретной культуры, можно даже сказать эгрегор в чистом виде. И да, он даст ответы своему владельцу как поведет себя этнос отражением которого он является...

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

А я то думал, что такое Эгрегор? Оказывается это обученный на "экспертной поляне" ИИ.
А в естественном виде Эгрегор существует? 

Аватар пользователя bratello
bratello(3 года 10 месяцев)

Для справки. Наш Яндекс тоже может заменить

Яндекс вообще вконец охренел. Он последние месяцы мне на русскоязычный запрос стал выдавать английские ссылки, как гугл ранее.

Статья годная, надо побольше распространять такого. А то тут петушиные фашисты на АШ распоясываются, явно через подобные модели вбрасывают своё дерьмо.

Аватар пользователя Географ глобус пропил

от психолога Александра Когана из СПбГУ

Осталось понять, какой псевдоним у Когана - Канеман или Тверский, или он - тот, кто в 60е в США изобрёл психологическое профилирование?

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Признаюсь, трудно найти инфу про 2016 год. Может питерского психолога не Коган звали?

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Убрал фамилию, от греха подальше. Спасибо!.

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Statement from the University of Cambridge about Dr Aleksandr Kogan | University of Cambridge

Результаты расследования 23 March 2018 (Перевод от Яндекса)

Нам известно об обвинениях, связанных с доктором Александром Коганом (который также известен под фамилией Спектр в браке), старшим научным сотрудником кафедры психологии, которые широко освещались в средствах массовой информации. В 2012 году доктор Коган поступил на факультет психологии в качестве преподавателя, где основал Кембриджскую лабораторию просоциальности и благополучия. В 2014 году доктор Коган основал собственное коммерческое предприятие Global Science Research (GSR). От доктора Когана мы узнали, что одним из его клиентов была SCL, материнская компания Cambridge Analytica. Нередко у кембриджских ученых есть деловые интересы, но они должны убедить университет в том, что они действуют в личном качестве и что нет конфликта интересов. Ранее мы запросили и получили от доктора Когана заверения в том, что никакие ресурсы или оборудование университета и никакие данные, собранные для его научных исследований, не использовались для его работы с GSR или последующей работы компании с какой-либо другой стороной. Как мы поняли из слов доктора Когана, изначально он создавал приложение Facebook для научных исследований; однако он утверждает, что, когда приложение было перепрофилировано для использования GSR, оно было переименовано и выпущено с новыми условиями, и было ясно, что это коммерческое, а не академическое исследование. Facebook выдвинул ряд обвинений в связи с использованием данных доктором Коганом. Кембриджский университет чрезвычайно серьезно относится к вопросам целостности исследований и защиты данных. На сегодняшний день мы не нашли никаких доказательств, противоречащих предыдущим заверениям доктора Когана; тем не менее, мы написали в Facebook, чтобы запросить все имеющиеся в их распоряжении соответствующие доказательства. В 2015 году доктор Коган обратился в университет за этическим разрешением использовать данные, собранные от имени GSR, для своих научных исследований. Его заявка была рассмотрена и впоследствии отклонена. Доктор Коган находился в процессе повторной подачи заявки, когда Facebook запросил удаление данных; в результате заявка была отозвана. Нам также известно, что доктор Коган работал в Санкт-Петербургском университете, Россия. Опять же, исследователям разрешается проводить академические исследования за пределами Кембриджского университета при условии, что это не мешает им выполнять свои обязанности. Доктор Коган правильно сделал, что запросил разрешение у своего тогдашнего руководителя департамента на сотрудничество с Санкт-Петербургским университетом; предполагалось, что эта работа и любые связанные с ней гранты будут проводиться в частном порядке, отдельно от его работы в Кембриджском университете. Мы проводим всесторонний анализ всей доступной информации по этому делу. Если что-то прояснится в результате этого анализа или нашего запроса в Facebook, Университет предпримет все необходимые действия в соответствии с нашими политиками и процедурами. Наконец, мы хотели бы пояснить, что, несмотря на свое название, Cambridge Analytica никак не связана с Кембриджским университетом.

Аватар пользователя MikaP11o
MikaP11o(6 лет 4 дня)

От субъективной реальности до двоемыслия - даже не один шаг, а полшага. Вот только отрицание объективной реальности эту самую реальность никак не меняет. Невзирая на влажные фантазии субъективных идеалистов.

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Уважаемый! Все ваши мысли субъективны. А уж сколько "личностей" в вас живёт вопрос индивидуальный:)
Или вы настаиваете, что ваши мысли объективны?

Аватар пользователя MikaP11o
MikaP11o(6 лет 4 дня)

А уж сколько "личностей" в вас живёт вопрос индивидуальный

Шизофрении не имею. В отличие, по-видимому, от вас: ведь у кого что болит - тот о том и говорит.

Или вы настаиваете, что ваши мысли объективны?

Как минимум, мои мысли основаны на материалистической картине мира, а не идеалистических сказочках. Все "субъективные картины мира" - всего лишь манипулятивный инструмент отвлечения от реальности. Впрочем, для шизофреников - самое то.

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Позвольте уточнить! Ваши "мысли основаны на материалистической картине мира"... Значит ли это, что они объективны? Или они, всё-таки субъективны!?
У вас есть "Субъективная реальность"? Или вся ваша реальность материальна и объективна?

Аватар пользователя MikaP11o
MikaP11o(6 лет 4 дня)

Реальность - материальна и объективна. И это единственная реальность.

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Значит ваши мысли, фантазии/мечты, образы... материальны и объективны?
Продайте мне килограмм smile3.gif

Аватар пользователя MikaP11o
MikaP11o(6 лет 4 дня)

Давайте зайдём от противного: ваша реальность ведь субъективна? Рядом со мной стоит чашка. Я её не буду трогать в ближайший час. Разбеёте её.

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

"Не продаётся вдохновенье, но можно рукопись продать" (А.Пушкин).
Вы не увиливайте! Признайте наличие идеального (не материального) Субъективного и материального Объективного! :)

«Нематериальная реальность ужасна!» Так ли?

Аватар пользователя Коралл
Аватар пользователя фыр
фыр(5 лет 9 месяцев)

НАМ НАДО СТРОИТЬ

Идите стройте. Кто мешает?

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Я и строю, по мере возможностей.
Может вы хотите дать мне денег на исследования и НИОКР?

Аватар пользователя фыр
фыр(5 лет 9 месяцев)

Может вы хотите дать мне денег на исследования и НИОКР?

Нет, конечно. Это дичь с самого начала. Прикольно, что в рассуждениях о "искусственном идиоте", "дегенеративных моделях", LLM и прочей шняге нет ни одной математической формулы, ни одного алгоритма. Т.е. люди рассуждающие об этом не понимают как это, в принципе, работает.

Как говорил один высокопоставленный академический чиновник в ответ на аналогичную просьбу: "У вас квартира есть? Так продайте ее. Когда исследования закончите - приходите. Если результат нам понравится - обязательно купим". Чем отсеивал 100% "ходаков".

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Если вы специалист "с формулами", зачем же воспроизводите "дегенеративные" модели?
Вы не согласны с моим предложением, или у вас другой подход? Поделитесь! 

Аватар пользователя фыр
фыр(5 лет 9 месяцев)

Если вы специалист "с формулами", зачем же воспроизводите "дегенеративные" модели?

Из каких слов сделан такой вывод? Так-то я выбираю инструмент под задачу, а не задачу под инструмент.

Вы не согласны с моим предложением, или у вас другой подход? Поделитесь!

Это дичь с самого начала. Методы LLM надо применять там где это обоснованно, а не там где хочется. Причем обоснованно как с точки зрения постановки задачи и решаемой проблемы, так и ограничений метода, включая, но не ограничиваясь наличием адекватной LLM.

В Вашем случае мне совершенно не понятно какую проблему вы собираетесь разрешить, каких целей достичь путем решения каких задач.

Вы тут НИОКР помянули. ТЗ на НИР уже составили?

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

я выбираю инструмент под задачу, а не задачу под инструмент.

А если необходимого инструмента нет? LLM для чего? "В ботах чатиться"?
А если решать реальные задачи, то нужна модель Реальности, а не языка.
Реальность то у нас из трёх состоит: ОР, СР, ДР. :😊 Тут одной языковой/словесной модели явно не достаточно! В каждой реальности разные законы, разные модели! Они ещё и не пересекаются!!
Только в человеке это может гармонично/негармонично сочетаться!

Зачатки для моделирования двух реальностей есть. (Правда всё пока заточено под игровые приложения, виртуальную реальность (VR) и "психоделику").
А вот моделей ДР человека совсем нет :( Нет такой реальности у учОных материалистов :(

Это и понятно, мало кто может и хочет моделировать человека (да и опасно это, ведь цели таких Творцов реальностей разные). Нельзя человека рассматривать только как организм, как субъект труда и потребления (объект монетизации).
Но сам процесс моделирования человека (не только его поведения) - неизбежен.

Хорошо бы не оказаться игрушкой в чужих руках, в руках манипуляторов, вооружённых ИИ (AGI)!
Здесь только намёки. Для серьёзных заказчиков, понимающих необходимость комплексных исследований в этой области можно и ТЗ разработать 😊 (на фрилансе).

Аватар пользователя фыр
фыр(5 лет 9 месяцев)

А если необходимого инструмента нет?

Тогда - ой. Мало ли в мире нерешенных задач?

А если решать реальные задачи, то нужна модель Реальности, а не языка.

Десять томов Ландавшица Вам в помощь.

Реальность то у нас из трёх состоит: ОР, СР, ДР.

У Вас какая то своя номенклатура понятий. ОР -  это открытая Россия, СР - справедливая, а ДР - день рождения?

Но сам процесс моделирования человека (не только его поведения) - неизбежен.

Поздравляю! Вы только, что изобрели гуманитарные науки. smile1.gif

Хорошо бы не оказаться игрушкой в чужих руках, в руках манипуляторов, вооружённых ИИ (AGI)!

То есть Вы думаете, что ИИ может что-то моделировать? Это потому, что Вы с его математикой незнакомы.

Для серьёзных заказчиков, понимающих необходимость комплексных исследований в этой области можно и ТЗ разработать

Ну так - работайте. Когда исследования закончите - приходите.

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Надо не только решать те задачи, для которых есть инструменты, но СОЗДАВАТЬ НОВЫЕ ИНСТРУМЕНТЫ, для решения новых задач.

Десять томов Ландавшица Вам в помощь

Для LLM использовали десятки тысяч томов всякого неструктурированного.... Но вы правы, теоретическая физика не всегда отражает физическую Реальность (ОР).
Кроме того понадобится Химия, Биология, Физиология, Мозгоклюйство :)

ОР -  это открытая Россия

Вам ведь статью прочитать не досуг :((
Объективная реальность (ОР), Субъективная реальность (СР), Духовная реальность (ДР)!

Вы только, что изобрели гуманитарные науки. smile1.gif

А вы находили там адекватные модели СР (от мысли, понятия, до концепции, теории, "устройства общества, культуры, науки")???...

ИИ может что-то моделировать? Это потому, что Вы с его математикой незнакомы.

Вы картинку в тизере видели? Не понимаете, кто моделирует? Кто управляет?
Чувствуется, что молоды ещё... но это плюс! :)))

Когда исследования закончите - приходите.

К вам не приду! У вас нет ни денег, ни понимания темы (одна математика в голове, а с Психикой, Нравственностью, Разумом и Духом проблемы). Про Организм не скажу ничего, не видно. 
Только здоровье не купишь, а остальное, при желании развивается!
Если, что (когда будут деньги) могу вас попробовать на должность программиста-математика :))
Но придётся сдавать экзамен по Ф.М.Достоевскому :)))
Успехов.

Аватар пользователя Коралл
Коралл(5 лет 2 месяца)

Жаль, не выдержал испытания предвзятостью, самомнением, недопониманием.
Включил эмоции/Психику, а не мозг/Разум :(
Удачи!