Свой распределённый S3 на базе MinIO — практический опыт наступания на грабли / Алексей Плетнёв

preview_player
Показать описание
Приглашаем на конференцию HighLoad++ 2024, которая пройдет 2 и 3 декабря в Москве!
--------
Saint HighLoad++ 2022

Презентация и тезисы:

Любому проекту — нагруженному или нет — требуется где-то хранить свои данные. И, если это не тестовая среда, хранилище должно быть надёжным, отказоустойчивым и достаточно быстрым для решения задач, перед ним стоящих. При планировании такого проекта на ум любого архитектора (включая меня) сразу приходят S3-совместимые хранилища...

Рекомендации по теме
Комментарии
Автор

Очень полезный доклад. Спасибо вам за публикацию вашей экспертизы!

nkochubashev
Автор

Так я не понял, разработчики MINio в итоге оформили платную подписку на Алексея Плетнёва?

EEBPioneer
Автор

После 11 минут просмотра я уже в восторге, спасибо большое за доклад. Интересно было бы про балансировку нагрузки послушать, например про sidecar который minio рекомендует. В случае с nginx в качестве load balancer в пределах одного кластера получается что инстанс nginx становится узким местом, может использовать keepalived+nginx?

russiantime
Автор

Я думаю та разница в два раза бы окупилась трижды, это, пожалуй, главный вывод из доклада

silvernurfer
Автор

Можно уточнить, что входит в стоимость решения на Minio? Это было посчитано уже после прохождения всех проблем? Наверняка sber/Yandex вполне могут обеспечить latency, у них же не один ДЦ

GlebWritesCode
Автор

Отличный доклад. Большая часть граблей нами тоже пройдена. Наелись говна по полной с ним в большом кластере и тоже есть ощущение, что до прода этой штуке еще очень далеко. Надежность, мониторинг, эксплуатация - все это огромная боль. Тем больше удивляет обилие рекламы этого решения и применение в reference-имплементациях больших вендоров.

По итогу, да, быстро, модно, молодежно, но такое ощущение, что в больших масштабах лучше поставить старый добрый Ceph. Что мы, собственно, и сделали.

creker
Автор

Доклад хорош, но не понятно почему автор пытается постоянно высмеивать то, что авторы minio предлагают отдельный контракт на решение их проблем. Это нормальная практика, брать деньги за срочный саппорт и помощь. Можно все пытаться и самим разрулить, но это стоит часто дороже и зачем собирать все эти грабли

AleksandrPoslovskii
Автор

"занаменитая формула по физике которую все знают... " .... те это лучшие кадры что остались в стране? Лицо нации?

rukhem