Объектное хранилище и S3

Что это

Объектное хранилище - это отдельный сервис для хранения файлов: картинок, видео, документов, бэкапов. Вы кладёте туда файл (объект), а сервис отдаёт на него ссылку. Самый известный стандарт - S3 (Simple Storage Service от Amazon), и почти все провайдеры дают «S3-совместимое» хранилище, которое работает по тому же протоколу.

Ключевые понятия

• Бакет (bucket) - папка-контейнер верхнего уровня, в которой лежат ваши файлы. У бакета есть имя и регион.
• Объект - сам файл внутри бакета плюс его метаданные.
• Ключи доступа (access key + secret key) - пара «логин-пароль» для программного доступа. Приложение использует их, чтобы загружать и читать файлы. Их нельзя светить в коде.
• Endpoint - адрес, по которому обращаются к хранилищу.

Чем отличается от диска сервера

| | Диск сервера | Объектное хранилище (S3) | |---|---|---| | Что хранит | Систему, код, БД, временные файлы | Пользовательские файлы, медиа, бэкапы | | Объём | Фиксированный, надо докупать | Практически безлимитный, платите за факт | | Доступ | Только через сам сервер | Прямая ссылка, доступно отовсюду | | Надёжность | Завязан на один сервер | Реплицируется, переживает падение сервера | | Цена | Входит в тариф сервера | Отдельно, обычно дёшево за гигабайт |

Зачем

• Видео и картинки. Не забивают диск сервера, отдаются напрямую пользователю, не нагружая ваш сервер.
• Бэкапы. Складываете дампы базы и архивы в хранилище - они переживут даже потерю сервера.
• Загрузки пользователей. Аватары, документы, вложения - всё это логично хранить в S3, а не на диске.

Пример

Веб-приложение, где пользователи грузят фото. Само приложение крутится на VPS, а фотографии летят в S3-бакет. В базе хранится только ссылка на файл. Если сервер придётся пересоздать - файлы на месте, ничего не потеряется. Бэкап базы тоже кладётся в отдельный бакет по расписанию.

Антипаттерны

• Хранить пользовательские загрузки на диске сервера. Диск заполнится, пересоздадите сервер - потеряете файлы.
• Класть ключи доступа в код или в Git. Это утечка. Держите их в переменных окружения и .env, который не коммитится.
• Делать бакет публичным «на всякий случай». Открывайте доступ только к тому, что реально должно быть публичным.

Что дальше

Теперь посмотрим на конкретных провайдеров - кто даёт серверы и хранилища, для кого они и сколько стоят. Практику по S3 на конкретной платформе смотрите в курсах Selectel и DigitalOcean, а про данные в целом - в курсе Хранение данных.