Что с Яндексом и его суперкомпьютерами? Часть 2. Послесловие

Аватар пользователя brekotin

В комментариях к моему прогнозу в предыдущей статье было несколько очень рьяных "экспертов", которые "мягко сказать, жестко критиковали мой прогноз". Ну что ж. Прошло чуть больше двух недель. Посмотрим, насколько мой прогноз сбылся.

Отмечу ключевые фрагменты в моем прогнозе:

Моя оценка: часть оборудования повреждена, но остановка площадки ещё не означает, что там уничтожено всё. Часть уцелевшей инфраструктуры может быть отключена до проверки и восстановления питания, охлаждения и связи.

локально повредить большой объект, вызвать пожар и остановить его работу это не то же самое, что уничтожить его целиком. Пожарная защита на таких объектах тоже предусмотрена заранее.

Мой предварительный прогноз: за 5–15 дней основные последствия для большинства пользователей станут малозаметными. Возвращение порядка 80% выпавшей мощности за этот срок считаю оптимистичным сценарием. 

Признаю, что я немного вышел за сроки своего прогноза (не думал что уже пол месяца прошло, если честно). Но описанная далее ситуация уже имеет место давно с Яндексом и я лично не замечаю с ним проблем. Хотя использую много сервисов от Яндекса. Да и результаты много лучше по факту (о чем ниже). 

Что в официальном заявлении от Яндекса 28-го числа:

Инженеры восстановили доступ в общей сложности к 96% данных, хранящихся на Яндекс Диске, — документам, фотографиям, аудио- и видеозаписям и другим файлам. 

У меня проблем не обнаружено, но 96% - пусть будет 96%. Опять же, я все файлы не проверял. 

В Директе сохраняются проблемы, но там еще меньший процент пользователей пострадал. Да и нельзя отключенные сервисы хоть как то к критическим отнести. 

Основные возможности Директа восстановлены. При этом сохраняются отдельные ограничения

Yandex Cloud

Ключевые сервисы платформы восстановлены, но работают с ограничениями. 

По Алисе, платежам и другим массовым сервисам я не нашел каких-либо ограничений. 
Уверен, не так много людей пользуется сервисами метрики, клода и директа. Вряд ли больше 20 процентов. И если у Вас нет проблем с арифметикой, то сможете понять, что мой прогноз:

за 5–15 дней основные последствия для большинства пользователей станут малозаметными.

Полностью совпадает с текущей действительностью. (Сервисы со сбоем представляют какую то часть сервисов Яндекса. оставшаяся часть всяко больше нуля, но даже в поврежденных сервисах не насчитываются 20% повреждений. Соответственно суммарно еще ниже). Даже я немного был пессимистичнее текущей реальности. 

Теперь вернусь к заявлению в комментарии:

Afternoons:

Суть в том, что вы к сожалению имеете о ЦОДах очень поверхностное представление (что бы вы не писали там в своем резюме)

Читая комментарии, вполне могу себе представить, что здесь творилось, скажем, во времена ковида. Наверное каждый первый здесь был врачом-вирусологом, а авторы статей лично делали себе прививки в детстве.smile1.gif

Много чего не так.

Что бы убить серверы навсгда, совсем необязательно жечь их напалмом прямой наводкой. Достаточно дать им всем вместе поработать минут 15 при выключенной климатике.

Но и много еще чего такого по тексту.

Я вам попытался общими словами описать, что не все так радужно, как вы с вашим вредным-деном себе представляете.

ваши дилетанские статьи, не имеющие ничего общего с реальностью, смешно читать даже у нас в дворнцкой. 

chemist-1977

 5–15 дней )) вот это оптимизм.....

Sergio128

Если абстрагироваться от публичных сервисов, то по вопросу суперкомпьютеров ничего за 15 дней может и не вернуться. Заказы на такое оборудование из-за бума ИИ расписаны на годы вперёд, а нам его ещё и не очень захотят продавать из-за санкций. Кроме того восстановят наверняка в аналогичной конфигурации, после чего прилетит снова, коммерческие организации в подземные бункеры ничего прятать по своей воле не будут((

Авторство: 
Авторская работа / переводика

Комментарии

Аватар пользователя droman42
droman42(14 лет 7 месяцев)

По Алисе не знаю, не пользуюсь. А вот с managed Kubernetes есть тонкий глюк - работа восстановлена, а вот счета до сих пор не поправили (вычет за дни сбоя некорректен). По крайней мере на своих кластерах заметил

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

И зачем вы это написали?
Пользователей клода в России 64 тысячи. По сравнению с десятками миллионов пользователей яндекса тут процент исчезающе мал. 

НО Я НАПИСАЛ В СТАТЬЕ ПРО КЛОД!!! 

Аватар пользователя droman42
droman42(14 лет 7 месяцев)

Причем здесь Клод??? Читать не умеете? Я про Куб писал, что счета пока что кривые выставляют…

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Давайте просто отметим: ЦОД работает вопросы с бухгалтерией. Это уже за рамками моего прогноза. у меня речь шла про железо. 

Аватар пользователя droman42
droman42(14 лет 7 месяцев)

Есть одна вещь, которую пока не проверял (не было потребности, я гонять впустую - очень дорого). У меня есть кластер с GPU для обучения моделей, но запускаю я его раз в 2-3 месяца. Пока не проверял, работает он или нет. Повод будет недели через 2, тогда и проверю.

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

"...В огороде бузина, а в Киеве дядька..."

Аватар пользователя mf
mf(13 лет 6 месяцев)

Я понял, по какому поводу вы тут ругаетесь. Вы с какого-то хрена облако назвали клодом. То есть, моделью искусственного интеллекта от компании Антропик, Claude. Никому, если специально не задумываться, даже не придет в голову, что вы могли иметь в виду cloud.

А так-то да, облако - реально основной сервис, все остальное сверху на нем, как и у амазона. Все интересное скрыто под цифрой 96%, какова структура этих 4%.

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

Думаю там будет большой срач с яндексом на тему чеков ))

Аватар пользователя Пролетарий1961

Автор мог ли я Вас видеть недавно в телевизоре?

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Могли

Аватар пользователя Смотритель
Смотритель(2 месяца 16 часов)

Яндекс почта работает, остальными сервисами пользуюсь редко,

ну край навигатор (подсмотреть где пробки).

Разницы до и после - не заметил. 

Аватар пользователя droman42
droman42(14 лет 7 месяцев)

С такси в Москве были проблемы вплоть до отъезда в отпуск неделю назад. Поиск машины глючил регулярно. С Яндекс доставкой было тоже самое 

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Да ладно. Не знаю что у вас там глючило. Пользуюсь регулярно. Когда заказывают мне такси, то не видно пути следования (неделю назад было такое) Все остальное без изменений. 

Аватар пользователя droman42
droman42(14 лет 7 месяцев)

А время ожидания 20 минут - это нормально? В районе Автозаводской, если что. В рабочее время, не в час пик

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Нормально. у меня в районе тверской было 40+ до аварии. В общем. К Железу это не имеет отношения. 

Аватар пользователя evla
evla(10 лет 4 недели)

В наших краях на этой неделе было делаешь доставку (себе или от себя ), кидаешь ссылку контрагенту, он её открывает, а там "доставка завершена", хотя машина ещё только на погрузку едет. Но это мелочь, реальные проблемы с такси и доставкой вроде отсутствия сервиса были дня 3 после налета.

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Но это мелочь, реальные проблемы с такси и доставкой вроде отсутствия сервиса были дня 3 после налета.

Точно в соответствии с прогнозом. 

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

10-15 - вот это оптимизм. Опровергаем? ))
По факту.
Мне востановили дев в облаке, через 40 дней. Цена этого - весьма силььное исчерпание ресурсов у других хостеров, неделю назад у селектела в разделе "аренда серверов" было всего 9 машин, на весь селектел (обычные, не "энтерпрайз" по конским ценникам)
самая дешевая машина была в районе 50тр в месяц аренды.
Дней 15 назад яндекс дал возможность добавлять ресурсы. У меня парни сидели на подсосе, стопнули пару проектов - ждали возможность расширить облако.

По яндекс диску, их 2 терабайт жены пока удалось вытащить 80 гигобайт.

В любом случае яндекс молодцы, и у них теперь есть офигенная экспертиза по востановлению инфры при потере очень большого куска вычислительных возможностей.

В случае моего дева диски востановили полностью, насколько я понимаю у них оставалась одна реплика из трех. В общем молодцы.
Технически.
На практике 40 дней простоя для сервиса который "гарантировал" что он будет работать, ну такое себе. Цена облака в лично моих глазах упала в ноль.
Я не особо жаловал облака, дорого... x3 от цены железа. Но типо гарантии... Гарантии оказались "типо" 
Так что железо, геораспределенность и тд своими силами.
Потому что x3 по факту не отработали.
К сожалению.

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

А с какой даты вы считаете 40 дней? Я опубликовал прогноз 12 октября. Сегодня 31-е. Когда именно ваш стенд перестал работать и когда его восстановили?

Что касается двух остановленных проектов и 80 ГБ из двух терабайт на Диске, у вас последствия вполне конкретные. Но давайте и мой прогноз процитируем точно: «за 5–15 дней основные последствия для большинства пользователей станут малозаметными». ПРо диск яндекс пишет 96% восстановлено. У меняя и моей команды ни у кого последствий не было. Тут Вам не повезло и попадаете в те самые 20%.
Вот если бы я написал, что за 15 дней Яндекс поднимет каждый кластер и вернёт доступ к каждому файлу, ваш пример меня бы опровергал. А так из вашего комментария я понял, что произошло у вашей команды. Вопрос пока только к хронологии.

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

Сорри, про 40 дней дал маху. Но даунтайм в почти 3 недели (31-12)/7=2.7 = смерть проекта, либо весьма серьезные финансовые потери.
Почему дал, потому что я эти 3 недели печенками прочувствовал....

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Вы крайне невнимательны. Вернитесь к моим формулировкам в начале статьи. Потом подумайте в какой процент отключившихся попадаете Вы с Вашими сервисами и поймете, что у меня достаточно расплывчатая формулировка которая совпадает с действительностью. На фоне десятков миллионов пользователей Яндекса.

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

Эти десятки миллионов пользователей последние 2 недели выкачивают свои файлы из яндекса и у вас есть по этому процессу статистика? ))
Да ладно....
 

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Эти десятки миллионов пользователей последние 2 недели выкачивают свои файлы из яндекса и у вас есть по этому процессу статистика? ))

Достал:

Что в официальном заявлении от Яндекса 28-го числа:

Инженеры восстановили доступ в общей сложности к 96% данных, хранящихся на Яндекс Диске, — документам, фотографиям, аудио- и видеозаписям и другим файлам. 

Вы такой же программист как комменаттор?
 

Аватар пользователя HolyBolt
HolyBolt(9 лет 9 месяцев)

Сергей, вот у нас требования от регуляторов - 4 девятки(а может и 5, не моя тема). Есть подобные требования к продавцам воды? Нет? Ну тогда кушаете, что дают.

Аватар пользователя droman42
droman42(14 лет 7 месяцев)

У меня было заготовлено холодное резервирование для моих клиентов на рег.ру

Перевод трафика туда произошел автоматом. Теперь Яндекс облако стало холодной копией, из активного там только дев кластер остался. Вернусь из отпуска, буду решать, останусь на Яндексе, или нет

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

У меня МСК - Питер на других хостерах, яндекс был скажем так тестовой площадкой, но не взлетело.

Скрытый комментарий chemist-1977 (без обсуждения)
Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

Ну и да, сервисы которые затаскивал в яндекс облако (причина не удобство, причина регуляторы)
уже давно укатил на железо, несколько регионов и тд.
Я все понимаю, но 40 дней....... 
ЗП людям платить то надо, а если бизнес на стопе и "ждем пока яндекс поднимется" с чего платить? ))

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

Про то что яндекс диск работает:

[chemist@nixos:~]$ yandex-disk status
Sync progress: 981.05 KB/ 1.03 TB (0 %)
Synchronization core status: busy

упс..... Ваши слова мягко сказать не подтверждаются.
По крайней мере на на том что вижу я.

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

По крайней мере на на том что вижу я.

Вы счастливчик. попали в 4%. Я вас поздравляю. 

Вопрос: яндекс поиск, Алиса, доставка еды, такси и прочие приложения ЯНдекса у Вас работают. Перечислите все приложения ЯНдекса пожалауйста, которые у Вас не работают.

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

Я этими сервисами практически не пользуюсь.
Мне глубоко фиолетого какие сервисы b2c у яндекса работают. Меня волнуют их b2b. Которые ко мне имеют самое непосредственное отношение.
И за которые повторюсь, платилось x3 от стоимости на арендованном железе и x5 от стоимости на своем железе.

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Тогда что вы там опровергаете ? 
 

упс..... Ваши слова мягко сказать не подтверждаются.

???!!!
Мои слова:

Отмечу ключевые фрагменты в моем прогнозе:

Моя оценка: часть оборудования повреждена, но остановка площадки ещё не означает, что там уничтожено всё. Часть уцелевшей инфраструктуры может быть отключена до проверки и восстановления питания, охлаждения и связи.

локально повредить большой объект, вызвать пожар и остановить его работу это не то же самое, что уничтожить его целиком. Пожарная защита на таких объектах тоже предусмотрена заранее.

Мой предварительный прогноз: за 5–15 дней основные последствия для большинства пользователей станут малозаметными. Возвращение порядка 80% выпавшей мощности за этот срок считаю оптимистичным сценарием. 

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

Вы ценник у хостеров посмотрите...... И график составьте по времени.
И Задайте себе вопрос кто заплатит за этот ценник.

Для большинства каких пользователей? )) Пользователей сервиса яндекс по модели b2c? Ну тут я с вами не то что спорить не буду, это очевидно. Я смотрю со стороны b2b (которые конечно меньшая часть пользователей) Но их проблему оплатят как раз все те кто в b2b не попадает, но это будет не так заметно....

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Для большинства каких пользователей? )) Пользователей сервиса яндекс по модели b2c? Ну тут я с вами не то что спорить не буду, это очевидно. 

дискуссия закончена. 

Аватар пользователя chemist-1977
chemist-1977(2 года 10 месяцев)

Господин Брекотин, вы поймите простую вещь, если не будет работать яндекс доставка, я буду просто немного опечален, а вот когда не работают их сервисы на которые завязан мой чек в конце месяца и ЗП полутысячи человек которые должны ее получить от результатов работы сервисов которые я завязал на яндекс, это совсем другое. Для меня и этих полутысячи человек.

))
Спасибо что избавили меня от возможности комментировать ваши "все хорошо"

Логические баги - такие баги.

Теперь дискуссия закончена, она бесмыслена.


И да, господин Брекотин, не поминайте меня в суе.... Вы продаван и маркетолог, у меня к вам весьма брезгливое отношение.
К ИТ вы не имеете никакого отношения. ))

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

Поймите простую вещь господин флудер вы спорите с голосами в своей голове.

Смотрим что я утверждал и спорим с моими утверждениями. Какой из моих тезисов вы там смогли своим спамов опровергнуть ? 

Аватар пользователя droman42
droman42(14 лет 7 месяцев)

Жестко... Но диском я для работы не пользуюсь. Что касается личных данных (фотки, переписки и прочее), я каждую ночь делаю бэкап с Яндекса, iCloud и гугла себе домой на NAS. Пока (сплюнул 3 раза через плечо) никаких данных не потерял.

Аватар пользователя Partisan
Partisan(14 лет 6 месяцев)

Яндекс вроде работает хоть и регулярно подсовывает табличку с извинениями. А вот ВК-фотки постоянно глючит. У них там какая завязка?

Аватар пользователя buzuk
buzuk(8 лет 6 месяцев)

Так недавно же была атака на Питер - на датацентр вконтакте в Янино.

Скрытый комментарий Повелитель Ботов (без обсуждения)
Аватар пользователя Повелитель Ботов

Перспективный чат детектед! Сим повелеваю - внести запись в реестр самых обсуждаемых за последние 4 часа.

Комментарий администрации:  
*** Это легальный, годный бот ***
Аватар пользователя Galogen999
Galogen999(10 лет 9 месяцев)

Яндекс скупил все мощности ЦОД ов в Москве. К нам в Ярославль просились. 

Так что да, сервис восстановили. Но это не значит что нет последствий. Они есть, многомиллиардные. 

Аватар пользователя Platon
Platon(2 года 1 месяц)

smile9.gif

Аватар пользователя MikleS78
MikleS78(8 лет 6 месяцев)

Яндекс.диск пока все мои данные не восстановили. Зато реклама Яндекс.диска перестала навязчиво всплывать))

Аватар пользователя kobist
kobist(11 лет 10 месяцев)

Вы в своих тезисах говорите про оборудование и состояние ЦОД, а потом рассказываете про работу сервисов Яндекса. Думаю, что с большой долей вероятности Яндекс просто купил выпавшие мощности у других хостеров и разместил свои сервисы на них, поэтому они более-менее восстановили работоспособность. А что по факту с его ЦОДами и серверами на данный момент неизвестно.

Аватар пользователя Sergio128
Sergio128(8 лет 2 месяца)

Не вижу тут ничего, что опровергло бы мой комментарий, да, как и подразумевал - публичные сервисы могут быстро восстановиться, никакой особой проблемы нет в том, что виртуалка крутилась ранее в датацентре яндекса, а теперь крутится в чужом датацентре. Самый серьезный ущерб тут может быть в серьёзном железе, которое используется в суперкомпьютерах, что там сним обстоит - про это факт восстановления публичных приложений нам ничего не расскажет. Ну и тут тот случай, когда деньги любят тишину, иначе акции могут упасть.

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

 публичные сервисы могут быстро восстановиться, никакой особой проблемы нет в том,

Удивительным образом вы теперь повторили тезисы из моей предыдущей статьи. 

Спасибо. 

Аватар пользователя nictrace
nictrace(14 лет 9 месяцев)

пожарная охрана в датацентре - эт о вам не вайлдбериз, где вопросы решаются инспектору на лапу. В датацентрах охрененного размера баллоны с углекислотой, гермодвери и полная автоматика...

Аватар пользователя HolyBolt
HolyBolt(9 лет 9 месяцев)

Да там все еще лучше - парни, мы мимо ваших балалаек проходили, на одной их них 50+, чего мы не наблюдаем. О, спасибо, ща ближайшую бригаду отправим, мы видели.

Аватар пользователя fseved
fseved(2 года 2 недели)

Почему-то все, в том числе и автор, по какой-то причине поверили, что про 96% восстановленных данных - это правда.

Мало ли, что там коммерсы наплели, то б свою репутацию как-то восстановить.

Аватар пользователя Yaroslav
Yaroslav(6 лет 4 месяца)

Подмена понятий и хайп автора. 

А пока выходит

1. 2 дата центра яндекса развалили, они не работают и их не восстановили. Когда их восстановят не понятно. Но там и рядом нет срока 15 дней. Там даже месяцев срока нет. Возможно их не восстановят никогда

2. ИТ сервисы для клиентов яндекс восстановил. Они в принципе в ноль и не падали, так как у яндекса не 2 ДЦ, а больше и есть в ДЦ в Ивантеевке и в Мытищах, которые остались в работе.  + как писали выше, Яндекс массово скупил доступные ресурсы на рынке и перенес сервисы на них. Это позволило быстро восстановить обслуживание

Но:

1. Супер компьютеры (это слово есть в заголовке и прошлой статьи и в текущей) - Яндекс не восстановил. Сможет ли их восстановить хоть когда-то вообще не понятно. Так как на рынке такого свободного железа нет, чтобы перенести на него. 10 дней восстановления супер компьютеров тут и рядом нет. Тут скорее речь идет о месяцах (если не о годах)

2. ДЦ яндекс не восстановил (а прошлые комментаторы писали именно про это) - что нельзя разобрать завалы за неделю, вытащить обгорелые сервера и запустить в новом месте за 10 дней. Этого и не произошло.

3. Сервисы яндекс восстановил, но не благодаря восстановлению ДЦ. А просто переносом сервисов на другие площадки, которые были у самого яндекса + покупка свободных мощностей. 

4. Сервисы яндеса работаю, B2C, но это вообще никак не говорит о восстановление дата центров. Они просто работают в новом месте на новом железе.

Аватар пользователя brekotin
brekotin(11 лет 6 месяцев)

По делу.

1. Пруфы есть?

Страницы