Похоже усиливается гонка между различными группировками занимающимися ИИ - к чему приведет понятно... также как и с ядеркой запихнуть обратно в ящик Пандоры не получится... но наблюдать интересно.
И да "гонка" это не про "генерацию" картинок или "чатботы", а штуки по серьезней.
Например deepmind это больше про работу с "реальностью" , а не как банкирам половчее кредит впарить или понадежней Следить за человечками - модный тренд это подключать к железной башке руки и смотреть что она ими будет _делать_ - т.е. вся эта "чат болтовня" - по сути побочка в возможностях выхода на физические ( химические ) процессы.
В конце прошлого года была серия публикаций про "новые материалы" "изобретенные" ИИ:
https://deepmind.google/discover/blog/millions-of-new-materials-discovered-with-deep-learning/
https://www.nature.com/articles/d41586-023-03745-5
https://www.axios.com/2023/12/02/ai-robotics-new-materials
...
У нас судя по некоторым работам идет попытка как то обойти отставание в "железе" (количественное по понятным причинам) за счет "инновационных" подходов.
Об этом же говорит и только что врученная премия:
Доктор физико-математических наук, профессор кафедры нейротехнологий Института биологии и биомедицины ННГУ им. Н.И. Лобачевского Сусанна Гордлеева вошла в число лауреатов премии Президента РФ в области науки и инноваций для молодых учёных за 2023 год. Об этом 7 февраля 2024 года, накануне Дня российской науки, сообщил помощник президента РФ Андрей Фурсенко. Высокой государственной наградой отмечена серия научных исследований, направленных на разработку технологий нейроморфного искусственного интеллекта на основе биофизических нейрон-астроцитарных сетевых моделей для мемристивной электроники. В итоге была создана принципиально новая модель нейроморфного искусственного интеллекта с производительностью, превосходящей мировые аналоги. Команде нижегородских учёных удалось доказать, что астроциты позволяют эффективно управлять динамикой нейронов и, вероятно, являются тем самым недостающим звеном в решении проблемы обучения спайковых нейронных сетей при проектировании нейропроцессоров. Исследование выполнено при грантовой поддержке Российского научного фонда и в рамках научной программы Национального центра физики и математики (г. Саров) по направлению «Искусственный интеллект и большие данные в технических, промышленных, природных и социальных системах». Говоря о практической значимости исследования, Сусанна Гордлеева отметила, что оно велось в общей сложности более 10 лет, и его результаты могут быть использованы при разработке нового поколения интеллектуальных информационно-вычислительных платформ (фреймворков), способных осуществлять обработку больших потоков информации («больших данных») с использованием принципов работы мозга.
Направление человекоподобие. По образу так сказать...
Про Пандору еще - как позавчера написали в боевом листке волков с воллстрит ( https://www.wsj.com/business/could-a-rogue-billionaire-make-a-nuclear-weapon-cd8bfde2 ) осталось несколько пятилеток до _частного_ ядерного оружия - вот тогда то ее величество Конкуренция и заиграет новыми красками, рыночек порешает так сказать:
Хотя возможно это всего лишь попытка к одному звезднополосатому олигарху подобраться.
Возращаясь к ИИ - пока упор на "химию" .
Несколько слайдов из хорошего обзора на тему ( https://www.ncbi.nlm.nih.gov/pmc/articles/PMC9454899/ )
В железе
Идея простая сейчас строят несколько лабораторий где "ИИ" подключают напрямую к роботам, чтобы они сами делали эксперименты в поисках новых материалов.
Может ли быть тоже самое с биотехом? ... Или с ЭМИ, чтобы наконец кое какие "волновые" теории проверить?
Почему бы и нет...
Комментарии
Профессор ННГУ Сусанна Гордлеева стала лауреатом премии Президента России в сфере науки и инноваций для молодых учёных.
Нижегородка — автор научных исследований по созданию нейросети, которая работает по тем же принципам, что и человеческий мозг. Производительность такого искусственного интеллекта значительно превосходит мировые аналоги!
Церемония награждения пройдёт завтра в московском кремле. Поздравляем и гордимся!
----------
Чую, и мы здесь обойдём Запад.
Мышление у нас у русских, парадоксальнее.
Сам являюсь разработчиком и продавцом софта, работающего на нейросетях) так вот, наш программный комплекс ни по скорости, ни по точности на сегодня (за все годы существования) никто из конкурентов обойти не смог - ни наших же русских конкурентов, ни иностранных.
Суть - в ряде своих небольших ноу-хау, помноженных на русскую смекалку 😉
В России достаточно много людей организацией и т.д. занимается ИИ на высоком относительно мирового уровне - как в теории - так и на практике... основной затык это "железная основа" ее заменить пока сложно.
Главное тут не железо как таковое - разработки железа в России на высоком уровне. Главное - способность производить.
В принципе, обычные кроссбары и спайковые сетки - радикальное решение и радикальный поворот технологии. На новом этапе не нужны мощные процессоры (даже тензорные) в их классическом виде, достаточно уметь "рисовать полоски" металлические и из оксидов - как с можно бОльшей плотностью.
В России есть разработки по новому железу (недовно слушал доклад - всё прям красиво), есть чипы, всё работает, формальная нейросеть в спайковую переводится... Но вперёд вырвется тот, кто сделает плотные чипы в большом количестве. И вот тут - затык.
...
Ещё одна альтернатива, позволяющая "обогнать на повороте" - полностью оптические интерфереционные вычислители (классические нейросети так не получаются, но вот их "прямые" фрагменты можно делать ещё как!). Это, кстати, то, про что писал тут слегка поехавший на гаплогруппах ВладиславЛ (его тут многие считают шизофреником, а он реально местами очень толковые вещи толкал).
Да, ЧатГПТ такой штукой не сделаешь... Но вот оптическую предобработку прямо в объективе (чтобы вот прямо сам объектив, ещё до матрицы, танк распознавал) сделать можно. А распознавание со скоростью тысячи (реально можно и миллионы, лишь бы освещения хватило) кадров в секунду - это, например, ракеты и снаряды, самонаводящиеся без всяких там радаров и процессоров прямо... даже не в танк, а в пушку или двигатель танка. Пули, самонаводящиеся в глаз вражеского солдата. Нет, не фантастика. Просто то, над чем можно работать.
Ну и если просто "выкинуть" в прямой оптический тракт какие-то предварительные вычисления (например, распознавание людей, машин, велосипедистов, столбы и т.п. типичные дорожные объекты), то оставшиеся вычисления уже тянут совсем простенькие процы, которые выпускает Россия. Главные-то расходы в нынешних нейросетях автопилотов, автоманипуляторов и прочего машинного зрения - предварительный перемол кадра высокого разрешения с выделением вполне конкретных объектов и признаков.
не совсем понял о чем речь - есть ссылка?
такое раньше по контурам делали - без нейросети формулами ) _очень_ быстро работает
Нет, конкретных прям ссылок на обзорные статьи нет, есть на частные работы, но там елсивер, там всё за пейволлом. В арХив такое не публикуют в том числе потому, что идёт активная работа. Но когда "птичка вылетит", она будет уже в виде готовых изделий, и разница со всем существующим сейчас там будет качественная.
Ну вот нереально сейчас впихать нейросетку с распознаванием лица и наведением в глаз в пулю 7.62. А станет можно, причём, очень дёшево, это делается обычной голографией: немножко химии столетней давности, простой лазер... и вот, оптический нанопроцессор, цена - 7 копеек за пучок.
есть и пейвол... да любого автора или doi :) посмотрим...
Проще всего начать отсюда: https://en.wikipedia.org/wiki/Optical_neural_network
Да... Вики. :) Но ссылки на простые-базовые работы там есть, а дальше можно разматывать.
ясно, ну это известная история... ( и да действительно может частично нвидиа все таки подвинуть хоть как то когда то ) , но думал будет про пули что то )
А, конкретно про пули? :) Нет, конкретно это моя гипербола. Ну как гипербола... отчасти, конечно. И пока.
Все очевидней что достигнутый уровень технологий принципиально не совместим с нашей цивилизацией. Одно из двух будет уничтожено. :))) Сомнительно, что технологической развитие возможно остановить. Следовательно, более вероятно уничтожение существующих социально-экономических отношений и политических систем. :))) Как коллапс общества, экономики и хозяйственных практик. :)))
Не знаю как в компьютерах, а в мозге спайки (разряды нейронов) не более чем способ синхронизации выброса нейромедиаторов из нескольких тысяч синапсов.
Была модная тема, нащупать корреляции между последовательностью (паттернами) разрядов нейронов (спайками) и мышлением ещё с 80-ых прошлого века, доклады на эту тему были у народа из питерского Института Мозга, который Наталья Бехтерева, Царствие ей Небесное. Ну, какие-то корреляции находили, на угадывании цифр от 1 до 10 с вероятностью около 70%, причём даже статистически достоверно отличалось от случайного.
Но проблема со спайковой гипотезой работы мозга в том, что частота спайков до нескольких десятков разрядов в секунду максимум, что никоим образом не достаточно для управления тушкой от поковырять в носу до доказать гипотезу Пуанкаре.
А вот 10 тысяч синапсов на каждом нейроне с частотой срабатывания 5 мсек параллельно это уже скорость. Т.е. биологический мозг работает как линейный классификатор, в котором на аппаратном уровне в качестве вектора выступает нейрон, с параллельной записью и выдачей информации через 10 тысяч синапсов, а из нейронов складывается матрица. Впрочем, можно предположить, что нейрон сам выступает в качестве матрицы, в которой обрабатывается информация от нескольких ветвящихся нейрональных отростков-векторов с синапсами.
Т.е. спайковая модель нейрона это несколько десятков разрядов в секунду как точка-тире в телеграфе побуквенно против модели нейрона как линейного классификатора с параллельной обработкой 10 тысяч признаков с частотой 5 мсек и выдачей с телеграммной частотой не отдельных букв, а готовых матриц решений.
В таком свете не уверен, что имитация спайковости на железе приведёт к чему-либо интересному. Скорее, если ориентироваться на желе промеж ушей, надо в параллельность на входе и со спайковостью для синхронной и параллельной выдачи результатов расчётов по множеству получателей. Без параллельности - никак.
Почему имитация? И почему единицы Гц?
Спайковые сети нужны для мемристоров: элементы с проводимостью пропорциональной полному интегралу прошедшего заряда. "Спайк" тут - ну, просто импульс, "один проход сети". Их даже давать синхронно необязательно, всё равно всё просуммируется.
И МАС (умножение с аккумуляцией суммы произведений) в такой схемотехнике делается очень просто: это полоска твёрдого раствора на металлической полосе, поверх которой наложен ряд контактов. Каждое пересечение нижней полоски с контактов - мемристор со своей памятью, каждый мемристор - делит заряд на своё сопротивление, на выходе полоски - сразу сумма произведений. Соответсвенно берём 100500 полосок "вдоль", поверх напыляем 100500 полосок металла поперёк, и имеем сразу 100500 МАС за они прогон импульсов. При минимальном потреблении, замечу, потому что там аттокулонами можно оперировать, а каждый такой МАС на традиционном проце это десятки тактов на одно умножение, множим на размер вектора... А для полной матрицы, соотвественно, таких умножений - 100500 в квадрате.
Можно (но технологически сложно), ессно, сразу оперировать зарядом в каждом импульсе. Но технически удобнее пускать примерно одинаковой формы импульсы, но с разной частотой (и в разном количестве). Сигнал из одномоментного цифрового числа превращается в счёт импульсов (или ШИМ, если речь об обработки непрерывных процессов).
В такой форме это всё очень помехоустойчиво и нетребовательно к аппаратуре (не зря нервы и мозги так сделаны). И любой сигнал преобразовать ТОЧНО в частоту - плёвое дело (куда проще, чем в привычную многоразрядную цифру или поток двоичных чисел по однобитовому каналу). Ну и в обратную сторону - из импульсов нефиг делать хоть цифру получить, хоть пропорциональный итоговый аналоговый сигнал.
"Спайками" это называется просто в противоположность обычной формальной сети, где и сигналы и веса в цифровой форме, и как цифры же обрабатываются. Тут не подразумевается нейрофизиологический спайк. Ну, нужно же какое-то простое и понятное название таким сетям. "Импульсные" - недостаточно точно. Так что - вот, спайковые...
Я ж сразу оговорил, что без понятия про электронику, я простой советский кмн с диссером на отдельных нейронах. Соответственно рассказал, какая математика в мозгах.
Насколько я понял, вы как раз про параллельность в матрицах - тогда это похоже на живые мозги.
Я примерно (наверняка, очень примерно :), но всё же) понимаю, как там в нейронах.
Просто в свою очередь рассказал, почему, как и откуда взялись "спайковые" сети. Это не нейроны, но - да, схоже. И, что удобно, "совместимо" с нейронами напрямую. То есть, сигнал с нейронов можно напрямую (после, разве что, согласования уровней, но и то - можно добиться, чтобы вот просто совсем напрямую) пускать на кроссбар или наоборот.
И да, это очень похоже... но издали. :) Чистый МАС - это, всё же, "линейный нейрон", а в реальном функция активации сложнее, да и в формальных цифровых нейросетях функций активации бывает много (и разных даже в пределе одной нейросети).
Чёт сомневаюсь, что дошли до считывания одновременно с нескольких тыс синапсов на каждом нейроне. А разряд нейрона сам по себе всего лишь синхронизирующий сигнал, информация кодируется на уровне синапсов.
На отдельном (на искусственно выращенном на подложке) - дошли. Не в курсе, сколько точно, но много. Просто нейроны распластаны по микросхеме, по матрице отдельно адресуемых контактных площадок, ну и нужно просто выбрать из них адекватные - что на вход, что на выход, кого куда и чего вообще хотим.
Меня терзают смутные сомненья, что считывают разряды с нейронов целиком, а не химическую передачу с тысяч отдельных синапсов с каждого нейрона.
Я давно от темы отошёл, мог пропустить, если у вас есть про массовое считывание синапсов, дайте ссылку или наводку.
Спайк - это же любой импульс нейрона. Каждый импульс заканчивается выбросом медиатора... Т.е. спайковая модель это импульсная модель (другими словами).
Эти импульсы разве не спайки?
Спайки, они же разряды нейрона как единого целого с частотой от одного разряда в несколько секунд до максимума в полсотни разрядов в секунду.
А на входе у нейрона под 10 тыс синапсов, все с разными медиаторами и прочими наворотами типа натрий калий магний кальций хлор каналами внутрь наружу, пресинаптическими и постсинаптическими рецепторами и прочей хренью. И все эти тысячи шарашат одновременно с частотой 5 мсек.
Что заканчивается тем самым медленным спайком нейрона как единого целого, в результате чего ещё через несколько тысяч выходных синапсов сигналы выводятся на кучу других нейронов.
Т.е. в мозге спайк нейрона это синхронизация вывода, который столь же параллелен, как и вход.
Да вроде есть уже такая аналоговая лабуда
Здесь же и писали.
Китайцы.
Разрешение матрицы не помню правда...
.... Но можно, если немного подумать.
Ну например - есть у HiSilicon (подразделение Huawei) несколько чипов - стоят 20-40 юаней, потребляют 9 ватт, при этом ну прям очень достойный аппаратный NPU.
Собрать из них кластер - довольно несложно. Просто архитектура будет другой - это как разница между многоцелевыми GPU и ASIC-ами в майнинге.
В смысле cambricon ? https://www.anandtech.com/show/12815/cambricon-makers-of-huaweis-kirin-npu-ip-build-a-big-ai-chip-and-pcie-card ?
или у hisilicon свои уже есть npu отдельные ?
на английском даже не стали делать версии - https://www.cambricon.com/index.php?m=content&c=index&a=lists&catid=330
Нет, я про вот этих - https://www.hisilicon.com/en/
У них чипы под IoT, с низким потреблением. Имел дело, весьма неплохие.
Еще у RockChip есть выделенные TPU-шки за недорого.
От имени Сусанна русским духом веет за квартал.
Поясните для остальных пжл.
Поясняю: когнитивная война. Это такое веселое соревнование, кто быстрей напомнить общественное сознание полезными ему химерами, сохранив верифицированные данные у себя, и сохранит остатки разума у себя. Данные возможно, разум сомнительно, химеры гарантировано. :)))
+++
имхо, это для придурков. Т.е контролировать не получится. Это как био-оружие распылить и надеяться, что не подхватишь заразу. При том, что от мозговых слизней вакцины не придумано.
ускорение развития - включаются политические механизмы "мотивации" участников гонки к "показу результатов заказчику"
Какие "политические механизмы"? Какая "мотивация"? Все просто и как всегда. Технология легкодоступна, и каждый будет "свободный художник". Получится в точности как с компьютерными вирусами и хакерами. Но только на этот раз спамить и ломать будут общественное сознание. На выходе антропологическая катастрофа всех высокотехнологичных обществ. Как и обязательно коллапс управления. Сумасшедшими искренне верящими в "розовых пони" и "зубную фею" управлять невозможно.
Это ведь не просто "чудное оружие пропаганды и контрпропаганды". :))) Это буквальное создание массовых когнитивных искажений и искажение паттернов социального поведения. Превратить в "норму" станет можно все что угодно. И как и положено попрет упрощение представления о реальной действительности и ритуалы вместо разумного поведения.
У нас и без этого дураков с магическим мышлением предостаточно, а теперь это станет "гарантированно нормой".
Кто дурак, а кто нет как определять собрались :) ?
Сейчас от широких масс людей и их мнений все меньше процессы зависят соотвественно "когнитивка" не так важна... да и в академсекторе или в топ управленческом слое все таки другие правила игры (должны быть)
Никак. Совсем никак. Без верифицированных человеком данных соответствующих реальной действительности это невозможно.
Должно быть, но не обязано быть! Или они просто верят в теории элиты и свою "исключительность". :)))
И еще раз, технология легко доступна. Все основные данные уже опубликованы. Все в точности как с вирусами и хакерами.
Когнитивная война. :)))
это хорошо что ты знаешь такие взрослые слова-понятия - но сделай упор на материаловедении - ну вот как ты же спустя всего 5 минут:))
Четырёхтактный? Это вы торопитесь, может, сначала трёхтактный попробуете?
Куда уж парадоксальнее! И где он теперь, наш, советский трёхтактный двигатель внутреннего сгорания?
Такой?
https://dzen.ru/a/Y6xEjhV8NDQBhvT4
Угу, при разработке биологического оружия. На самом деле старая тема: https://openai.com/research/building-an-early-warning-system-for-llm-aided-biological-threat-creation
https://arxiv.org/abs/2306.03809
https://www.rand.org/news/press/2024/01/25.html
ничего хорошего конечно вот это вот все
Но на том можно заработать! :))) И гарантировано будут зарабатывать. :)))
Обычный капитализм катастроф.
Высокой государственной наградой отмечена серия научных исследований, направленных на разработку технологий нейроморфного искусственного интеллекта на основе биофизических нейрон-астроцитарных сетевых моделей для мемристивной электроники. В итоге была создана принципиально новая модель нейроморфного искусственного интеллекта с производительностью, превосходящей мировые аналоги. Команде нижегородских учёных удалось доказать, что астроциты позволяют эффективно управлять динамикой нейронов и, вероятно, являются тем самым недостающим звеном в решении проблемы обучения спайковых нейронных сетей при проектировании нейропроцессоров.
И где практический результат ? В чем он заключается хотя бы ? Есть наработки ? Продажи ?
Да нет ничего - просто так мудаки-учёные деньги тратят.
Есть такое понятие, как фундаментальная наука. Эйнштейн много лет назад сформулировал теорию относительности, но ещё не было ни одной продажи.
Вроде даже при реализации Глонасс/ЖПС релятивистские эффекты учитываются, по тем самым формулам Эйнштейна, не смотря на, то что спутники далеко не со сверхсветовой скоростью там летают.
Сколько лет прошло после этого открытия Эйнштейна, когда это начали применять на практике?
судя по профилю это "теоретики" ... тоже нужны
Волновые теории (копенгагенскую интерпретацию, пресловутого "наблюдателя") навсегда обломал еше наш Фок в тридцатых годах.
Предложил провести двухщелевой эксперимент роботом.
Никто этого не делал, ибо интерпретация философская это одно, а дураков нет.
Чем это закончилось?)
Ничем, ессно. "Наблюдатель" сейчас же не понимается, как некий обязательно живой чел.
Просто некогеретная макросистема. А вот вопрос взаимодействия квантовых систем с классическими последние лет 30 исследуется вовсю. И ессно, в эксперименте со щелыми (или любом другом однофотонном) задействованы "роботы" - ажно цельная квантовая криптография на этом построена.
Страницы