ВТБ внедряет российскую СУБД Tarantool

Аватар пользователя Ivanovich

ВТБ внедрит в свою инфраструктуру российскую платформу Tarantool, разработанную Mail.ru Group для быстрой обработки данных в оперативной памяти. За счет этого планируется ускорить обработку сервисов «ВТБ Онлайн» и CRM-системы ВТБ. Ожидается, что при ВТБ также будет создан центр компетенций по работе с Tarantool.

Внедрение отечественной СУБД

ВТБ планирует внедрить в свою инфраструктуру российскую платформу Tarantool для быстрой обработки данных в оперативной памяти. Об этом CNews рассказали в Mail.ru Group, чьи специалисты являются разработчиками платформы.

«Использование отечественных продуктов и сервисов для хранения и обработки данных в оперативной памяти, разработанных в Mail.ru Group, поможет ВТБ сохранять и увеличивать качество и надежность наших продуктов и сервисов для клиентов, что является приоритетом для ВТБ», — сказал Владимир Дергачев, глава департамента развития инфраструктуры ВТБ.

В ВТБ также планируют использовать такие продукты платформы как Tarantool Data Grid и Tarantool Enterprise, для хранения данных и формирования персональных предложений и уведомлений для клиентов в режиме реального времени. Внедрение позволит повысить скорость и качество работы CRM-системы ВТБ и клиентских сервисов «ВТБ Онлайн» - благодаря тому, что платформа Tarantool способна выдерживать нагрузку до миллиона обращений в секунду, пояснили CNews в Mail.ru Group.

Специалисты Mail.ru Group обеспечат техподдержку и предоставят разработанную специально для ВТБ образовательная программу, что поможет банку развивать собственную технологическую экспертизу и создать центр компетенции по работе с платформой Tarantool.

Причины перехода на новую платформу

Внедрение платформы Tarantool проводится в рамках реализации стратегии ВТБ по внедрению большого числа новых продуктов и сервисов, что приводит к росту нагрузки на ИТ- системы.

tt1.jpg

«В основе большинства крупных компаний лежат информационные системы, разработанные более десяти лет назад. Они не рассчитаны на современные нагрузки, — отметил Илья Летунов, руководитель платформы Mail.ru Cloud Solutions и Tarantool. — При этом бизнес все чаще обращается к инструментам цифрового взаимодействия с клиентами — приложения, личные кабинеты, онлайн-сервисы, интернет-магазины. Tarantool создает дополнительный слой между корпоративными системами и пользовательскими сервисами, ускоряя запуск приложений и сокращая стоимость их обслуживания».

Платформа Tarantool: что это и как оно работает

Tarantool — это собственная разработка Mail.Ru на принципах открытого исходного кода (Open Source). Разработка платформы начата в 2008 г. Сейчас система используется для работы «Почты», «Облака Mail.Ru», myTarget и других сервисов холдинга, в том числе, соцсети «Одноклассники». Начиная с апреля 2010 г. Mail.Ru Group выложила Tarantool в открытый доступ под лицензией BSD.

Платформа Tarantool основана на технологии хранения и обработки данных в оперативной памяти (in-memory). Это позволяет обеспечить скорость работы без дополнительных расходов на кэширование и чтение с диска. Tarantool совмещает роли базы данных и сервера приложений. Поскольку код и база данных находятся в одном адресном пространстве, значительно снижаются задержки в исполнении операций.

Платформа использует упреждающую запись на диск, что сохранит данные от потери даже при внезапной перезагрузке сервера. Для сохранения данных при выходе из строя диска или сервера помогает репликация.

В декабре 2016 г. Mail.ru сообщила, что намерена внедрить в СУБД полноценную поддержку SQL и тем самым потеснить на рынке Oracle, причем не только в России. В 2017 г. Mail.ru Group объявила о реализации поддержки языка SQL в платформе Tarantool, благодаря чему решение получило наиболее востребованную на рынке функциональность. Язык SQL поддерживается всеми популярными промышленными СУБД — Oracle, MySQL, SQL Server, Postgres, DB2, что облегчает пользователям этих платформ процесс миграции на Tarantool.

В мае 2018 г. Mail.Ru выпустила распределенную версию Tarantool для коммерческих клиентов. В сентябре 2019 г. в Tarantool появился инструмент Kubernetes Operator, позволяющий автоматизировать работу системного администратора, инженера, DevOps-инженера в части запуска и эксплуатации распределенных приложений, написанных на фреймворке Tarantool Cartridge, также представленном в сентябре 2019 г.

Kubernetes Operator запускает кластеры СУБД Tarantool в Kubernetes и способен автоматизировать масштабирование в один клик. Инструмент дополняет связку Tarantool и Cartridge, обеспечивая бесперебойную работу приложений и сокращение эксплуатационных затрат в системах уровня Enterprise.

В конце 2019 г. CNews рассказал о том, что Mail.ru Group представила готовое enterprise-решение Tarantool Data Grid для разработки распределенных бизнес-приложений, работающих с большими потоками данных, с инструментами интеграции для быстрого встраивания в ИТ-инфраструктуру предприятия.

Tarantool Data Grid предоставляет инструменты для написания распределенного горизонтально масштабируемого приложения со встроенной производительной СУБД и средствами доступа к данным. Data Grid дает возможность ускорить медленные enterprise-приложения и базы за счет in-memory технологии. Решение также предоставляет возможности постобработки данных и передачи их другим системам.

Внедрения и перспективы платформы Tarantool

Осенью 2016 г. CNews рассказал о том, что «Билайн» начал переводить на Tarantool свои сервисы. В июле 2018 г. стало известно о внедрении Tarantool для работы с большими данными в «Аэрофлоте». В августе 2018 г. Альфа-банк внедрил транзакционное ядро, созданное на базе Tarantool. Среди заказчиков технологии также числится «Мегафон», который использует Tarantool в качестве основы для системы контроля оборудования и качества связи.

В конце 2020 г. CNews рассказал о запуске платформы доступа к данным на базе Tarantool Data Grid в Газпромбанке. Система на базе Tarantool Data Grid занимается кэшированием наиболее востребованных данных из автоматизированной банковской системы, разделяя потоки и храня данные в оперативной памяти, при этом все изменения данных становятся доступны пользователям мгновенно, что позволяет отнести решение к классу систем реального времени.

В списке пользователей Tarantool также присутствует множество других крупных российских компаний из различных сфер бизнеса, в том числе, портал объявлений «Авито», холдинг Х5, интернет-магазин Wildberries, платежная система Mastercard и другие.

В сентябре 2020 г. представители Mail.ru Group сообщили CNews о начале широкой международной экспансии платформы Tarantool, для чего в проект было решено инвестировать 300 млн руб. По словам представителей компании, средства будут направлены на повышение безопасности, эксплуатационных характеристик и развитие взаимодействия холдинга с международными партнерами.

Источник: cnews.ru

Авторство: 
Копия чужих материалов
Комментарий автора: 

Вот, интересно, на чью территорию прольются дождями эти информационные облака? smile1.gif

Комментарии

Аватар пользователя Another_jim
Another_jim(10 лет 10 месяцев)

Mail в рост пошел.

Молодцы!)

Аватар пользователя ВладиславЛ
ВладиславЛ(7 лет 4 месяца)

Усманов - владелец мэйлру груп - подданный английской королевы, один из богатейших "англичан" на 2012 к примеру, как вы думаете он не обязан Mi-6 отдавать дыры, как и делать закладки в ПО?

Кроме того действовать через жену, тренершу известной гимнастки Кабаевой ему легко.

Комментарий администрации:  
***отключен (антигосударственная пропаганда, систематические набросы) ***
Аватар пользователя Бдыщщ
Бдыщщ(8 лет 4 месяца)

Поскольку код и база данных находятся в одном адресном пространстве

Чёта я очкую, Славик(с) 

Аватар пользователя jamaze
jamaze(14 лет 1 месяц)

Код сервера приложений на Lua + системные либы на C.

Каждый экземпляр однопоточный.

Удобный менеджер "пакетов" и экземпляров на кластере.

В целом - рабочее решение, но это не классическая СУБД. Тарантул хорош для задач типа интеллектуального кеша. Сделать личный кабинет юзера, куда агрегируется информация из биллинга и кучи других систем, там какие-то заявки и т.п.

Аватар пользователя pob_ol
pob_ol(10 лет 11 месяцев)

так а что классическая субд ?

дибиту тоже не реляционная

а есть еще объектноориентированные в свое время там тоже наши отличились

Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Похоже, что попытались сделать аналог SAP HANA.

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя jamaze
jamaze(14 лет 1 месяц)

Я так понял, что Осипов просто свои идеи реализовывал, плюс у Мейла были задачи, куда это все ложилось.  Так что вряд ли.

Глянул на эту SAP HANA

 column-oriented database

Не, точно нет. Тарантул не колоночный.

А вообще, я бы сказал так. Тарантул пытается сделать то, что делают большие СУБД типа Оракла, Постгреса и пр., но максимально простым и дешевым по ресурсам способом. Типа как в свое время Сысоев сделал легкий однопоточный Nginx в противовес монстрообразному Apache Web Server.

Аватар пользователя DmKonov
DmKonov(10 лет 1 месяц)

Я так понимаю вы не в теме SAP HANA...ну тогда и не стоит...SAP HANA вообще не про БД...

Аватар пользователя jamaze
jamaze(14 лет 1 месяц)

Зато я с Тарантулом работаю. И с Константином лично многократно общался. Никаких SAP HANA никто никогда не упоминал, а про свои мысли насчет движков и архитектуры, как оно рождалось и развивалось, написано уже много.

Это самостоятельная разработка.

Аватар пользователя ephor
ephor(12 лет 10 месяцев)

Redis основной аналог.

Аватар пользователя jamaze
jamaze(14 лет 1 месяц)

Я бы не сказал, что это аналог Redis.

В Redis'е совсем нет логики уровня приложений.

Например. Тарантул может прочитать данные из Кафки, обогатить их данными из внешних БД (через ODBC), из внешних REST, какие-то расчеты сделать поверх этого и отдать по GraphQL вызовам. Плюс получить от фронта по REST данные (+внешняя аутентификация), что-то обновить у себя, что-то сбросить на внешние БД и сервисы.

Аватар пользователя jamaze
jamaze(14 лет 1 месяц)

Ошибся. Имелась ввиду классическая РСУБД. С таблицами, триггерами, сторед процедурами, вот этим всем.

Аватар пользователя r0m
r0m(5 лет 5 дней)

DB2 - классическая реляционная СУБД, конкурент Oracle. MS SQLServer все таки мелкая по сравнению с этими гигантами.

Tarantool - это in-memory БД как дополнение к реляционным БД, для промежуточного кэширования. 

Комментарий администрации:  
*** отключен (гнус) ***
Аватар пользователя jamaze
jamaze(14 лет 1 месяц)
Аватар пользователя gridd
gridd(9 лет 8 месяцев)

Славик, это офигенчик!

Аватар пользователя Harsky
Harsky(13 лет 11 месяцев)

Да норм, если понимать что почём. Хранимые процедуры и прочие триггеры - они ж тоже в базе, есть при этом куча ПО, у которых основная логика именно на них и сделано. Так что по смыслу ничем не отличается

Аватар пользователя СергиоПетров
СергиоПетров(10 лет 10 месяцев)

 

разработанную Mail.ru Group

Испоганили каждый проект за который брались.

Комментарий администрации:  
*** отключен (систематический инфопонос и срач) ***
Аватар пользователя Many
Many(8 лет 7 месяцев)

Дурову только это не говорите, а то он до сих пор переживает что Вконтактик после его продажи только лучше становится.

Комментарий администрации:  
*** Ради красного словца, придумал внука-сорванца! ***
Аватар пользователя СергиоПетров
СергиоПетров(10 лет 10 месяцев)

Вы активно пользуетесь?

Комментарий администрации:  
*** отключен (систематический инфопонос и срач) ***
Аватар пользователя Many
Many(8 лет 7 месяцев)

Ага, активно, но только малым количеством из возможного: подписка на паблики, и переписка с друзьями.

Но дело же не только во мне, а в том что аудитория растёт, и функционал ширится, и им пользуются.

Комментарий администрации:  
*** Ради красного словца, придумал внука-сорванца! ***
Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Вы не попутали добровольную продажу с изъятием по назначенной изымателем цене?

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя Many
Many(8 лет 7 месяцев)

Вообще понятия не имею как оно там продавалось - мне откровенно пофиг.

Комментарий администрации:  
*** Ради красного словца, придумал внука-сорванца! ***
Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Не хотите вынужденно продать свою машину/квартиру/дом "убедительным товарищам" за 30% от рыночной цены?

Вам же пофиг, когда это происходит с другими в Вашей стране.

"А мене - за що?"

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя Many
Many(8 лет 7 месяцев)

В моей стране ежесекундно совершается какая-то несправедливость, так как страна у меня большая. В твоей стране, кстати, их ещё больше, так как население больше.

Должен ли я (и ты тоже) быть в курсе каждого и за каждое переживать? Ну чтобы не быть хатаскрайником?

Комментарий администрации:  
*** Ради красного словца, придумал внука-сорванца! ***
Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Переживать за каждую несправедливость вовсе необязательно, так нервов не хватит.

А вот иметь в виду опасность того, что некоторые "убедительные товарищи", пользуясь силой госаппарата, могут отжать Ваше имущество, не помешало бы для взрослого человека.

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя Fdrme
Fdrme(9 лет 9 месяцев)

Это вы про то, как у Дурова его криптовалютку отжали? Если вас часто бьют по морде, то может дело не в несправедливости, а морда у вас такая?

Комментарий администрации:  
*** Уличен в злостной дезинформации ***
Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

То, что Дурова жизнь не научила пониманию "делиться с кем надо" - это его личные проблемы.

А вот то, что его принудили продать развитый продукт ВКонтакте - это уже особенности ведения бизнеса в РФ.

В США ему запретили начинать бизнес по крипте, а не отжали готовое - разница всё же есть.

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя Fdrme
Fdrme(9 лет 9 месяцев)

В России богатенький буратино зачем то сбивал ментов и чудил по разному. А уже сбежав, рассказал что мол его принудили, ага

Комментарий администрации:  
*** Уличен в злостной дезинформации ***
Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Так уж ювелирно сбил гаишника, что сначала завели уголовное дело, которое магически превратилось в административное:

https://www.kommersant.ru/doc/2208016

Судя по этой статье, та история - шитая белыми нитками муть типа "был бы человек, а дело - найдётся!"

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя laa
laa(6 лет 9 месяцев)

У вас там как, кресла не отжимают из-под попы? Силой госаппарата. Кресло какого-нибудь президента, например. 

Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Судя по тому, какие беззубые судебные иски подготовила команда Трампа - это был кулуарный договорняк, а перед тем - типичная накрутка цены себе для улучшения переговорной позиции.

Моё мнение ещё раньше было, что эта шумиха - политический рестлинг, постановочные бои.

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя barrs
barrs(9 лет 6 месяцев)

Так то у вас это вовремя неотжатое "имущество" вам презитента назначило. И хер оно положило на "убедительных товарищей" при первой же возможности. Вот это стоит иметь ввиду.

Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Схватка двух частей глубинного государства США показала, что завоевание господства в воздухе  эфире - решающий фактор победы.

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя Another_jim
Another_jim(10 лет 10 месяцев)

А они цену по рынку как определили?

Его кто мог купить? Кто-то хотел купить?

Есть схожие сделки?

Или это сравнение со сферическими сделками в вакууме?

 

Цена сделки есть. Все остальное - домыслы.

Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Что за болтовня?

Приходят суровые парни, говорят, что твоё имущество и бизнес стоят сумму билетов на выезд из страны для семьи плюс сопутствующие расходы, либо просто всех "на радугу".

Если вам или вашим знакомым такое неведомо - не смею вторгаться в ваш уютненький мирок.

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя Another_jim
Another_jim(10 лет 10 месяцев)

Что за болтовня?

Не с крыши деньги разбрасывать.

 

кстати, очень интересный у вас тезис.

Те можно сказать, что если никто из ваших знакомых е умирал под комизмов, то не буду разрешать ваш уютненький мирок.

Все виды внезапных смертей.

 

Теперь к сути. Вы сравниваете себя и знакомых с Дуровым? Как по степени влияния, так и уровнем бизнеса?

скромненько.
 

и конечно, можно легко перенести ваш опыт. И самое интересное, что ваш опыт перенести можно, но других нельзя.

Превосходство не жмёт?

Аватар пользователя Ровлат
Ровлат(13 лет 2 месяца)

Ваш текст сложно понять, будто по-русски пьяный переводчик пишет.

Это вообще не понял, ну да не суть:

умирал под комизмов

Вот это откуда такие выводы? Чёта выдумать и героически опровергнуть? Браво! Только это не ко мне:

Вы сравниваете себя и знакомых с Дуровым? Как по степени влияния, так и уровнем бизнеса?

Если Вам неизвестны понятия "крыша" и "отжим бизнеса", то что Вы вообще знаете о реальной жизни в бСССР?

 

Комментарий администрации:  
*** Уличен в манипуляциях - https://aftershock.news/?q=comment/11411623#comment-11411623 ***
Аватар пользователя Another_jim
Another_jim(10 лет 10 месяцев)

Если Вам неизвестны понятия "крыша" и "отжим бизнеса", то что Вы вообще знаете о реальной жизни в бСССР?

Вопрос, а чем тогда занимался Павел? Он не мог найти себе крышу?

Также компания была нужна целиком, и ее уничтожение, явно не являлось целью, поэтому очень странно, что вы исключаете вариант продажи.

 

Вы привели сомнительное утверждение, что у меня был такой опыт. И что это доказывает и объясняет? 

Вам, возможно, что-то и объясняет. Но с какой радости это должно быть как-то свзано с ВК?

Тезис - "так бывает". Ну, так можно любую ерунжу притянуть и "палка стреляет". 

 

Так вам уже понятнее?

 

Ночью мысли бегут быстрее, чем я успеваю их записывать.

Аватар пользователя Лёва Лупоглазич

Вконтактик после его продажи только лучше становится

Что там можно улучшить в этой копии Пейсбука, настраиваешь подписку на ленту каких то аккаунтов с картинками вот и вся "соцсеть" )

Даже аналога удобства ютуба до сих пор не сделали

Комментарий администрации:  
*** Отключен (инфомусор) ***
Аватар пользователя Many
Many(8 лет 7 месяцев)

Что там можно улучшить в этой копии Пейсбука

Ну например вконтактик лучше и удобнее пейсбука. Такие вот дела.

Даже аналога удобства ютуба до сих пор не сделали

Так и пейсбук не сделал. Это вообще не задача соцсети. А вообще видео во вконтакте есть.

Комментарий администрации:  
*** Ради красного словца, придумал внука-сорванца! ***
Аватар пользователя маша_иванова
маша_иванова(8 лет 6 месяцев)

Не понятный он mail.ru. Давно заметила, что, заголовки российских новостей по утрам на mail.ru русофобские, один ужаснее другого. Попозже более адекватные становятся. В целом, хорошая рабочая новость. Даешь больше баз разных. полезных и новых!smile16.gif

Комментарий администрации:  
*** Уличена в злостной дезинформации ***
Аватар пользователя MEgor
MEgor(6 лет 6 месяцев)

Вперёд Россия!!! Обожаю такие новости. 

Аватар пользователя Гуманитарный погром

В моих краях у ВТБ банкоматы, купленные , похоже на распродаже списанного б/у. Медленные, непонятные . Больше 10 купюр за раз загрузить проблема, чеки размазанные. Надо улучшаться.

Аватар пользователя divan-analyst
divan-analyst(9 лет 9 месяцев)

Работал с историческими продуктами на Оракле. В последнее время меня перекинули на современное направление. Где микросервисы, облака. И что я вижу:

1. База Оракл в облаках не используется. Отчасти в этом виновата сама Оракл - особенности лицензирования делают использование Оракла в облаке нереальным.

2. Вместо Оракла используется Постгрес, который, вроде бы, имеет русские корни, или просто одобрен ФСБ как опенсорс.

3. Кроме Постгреса используются куча недо-SQL баз типа МонгоДБ. В этом зоопарке выделяются ВикторияМетрикс и Кликхаус. Кликхаус написан Яндексом, ВикторияМетрикс - тоже русскими авторами. Удивительно, когда ищешь материалы по некой Айти-системе, и на русском больше информации, чем на английском.

Сабжевый Тарантул тоже, видимо, из той же серии.

Аватар пользователя jamaze
jamaze(14 лет 1 месяц)

Ну да. Облака породили большие нагрузки, и универсальные монстры типа Оракла и Постгреса не вытягивают. Поэтому всплывает куча нишевых решений.

Делал пилот на КликХаусе для отчетности поверх Постгреса. Работает быстро, жрет мало, SQL для звездообразной структуры данных - почти стандартный.

Аватар пользователя Борода Берни
Борода Берни(7 лет 6 месяцев)

smile9.gif Нормуль!

Аватар пользователя Добрыня
Добрыня(13 лет 4 месяца)

А почему название не на русском языке?

Аватар пользователя Исидор Никифорович Курляндский

Да и вообще название неудачное.. я понимаю зачем натовцы нас через свои классификации демонизирую, но нам-то самим это зачем. "Стенобитный инструмент" больше подходит для хакерского софта.

Аватар пользователя UKRUS
UKRUS(12 лет 3 месяца)

Самые квалифицированные архитекторы получают должность ТАРАНТАС по таранному инструменту

Аватар пользователя romaroma
romaroma(11 лет 1 месяц)

ВТБ ещё существует?

Страницы