Как работает облачное хранилище: принцип хранения данных по этапам
Облачное хранилище работает так: файлы с вашего устройства передаются через зашифрованное соединение на серверы провайдера, где хранятся в нескольких копиях на разном оборудовании. При необходимости вы получаете файл обратно с любого устройства, имея только логин и пароль.
Загрузка и разбивка файла
Клиентское приложение на вашем компьютере или смартфоне делит каждый файл на блоки фиксированного размера, обычно от 4 до 64 мегабайт. Каждый блок шифруется на стороне клиента или уже на сервере, получает уникальный идентификатор и отправляется по защищённому каналу HTTPS или проприетарному протоколу. Разбивка на блоки позволяет загружать файл частями параллельно, что ускоряет процесс и позволяет возобновить прерванную загрузку с места остановки, а не начинать заново.
Репликация и хранение
Получив блоки, система хранения размещает каждый минимум на трёх физических серверах, расположенных в разных стойках или даже разных дата-центрах. Это называется репликацией. Если один сервер выходит из строя, система автоматически читает данные с резервной копии и создаёт новую реплику на исправном оборудовании. Крупные провайдеры обеспечивают надёжность хранения на уровне 99,999999999%, то есть теоретическая вероятность потери файла составляет менее одного случая на миллиард объектов в год. Такой показатель называется «одиннадцать девяток». Для хранения используются специальные объектные хранилища, например S3-совместимые системы, которые не имеют файловой системы в привычном смысле, а адресуют данные через уникальные ключи.
Индексация и метаданные
Параллельно с блоками система сохраняет метаданные: имя файла, размер, дату изменения, идентификаторы блоков и их расположение. Метаданные хранятся в отдельной базе данных с собственной репликацией. Когда вы открываете папку в облаке, приложение запрашивает именно метаданные, а не сами файлы, поэтому список файлов загружается мгновенно даже при медленном соединении. Файл скачивается только по явному запросу.
Синхронизация между устройствами
Клиентское приложение отслеживает изменения в локальной папке с помощью системных уведомлений операционной системы. Как только файл изменён, приложение вычисляет хеш-сумму нового содержимого и сравнивает с хешем последней загруженной версии. Если хеши различаются, загружаются только изменённые блоки, а не весь файл целиком. Этот подход называется дельта-синхронизацией и экономит значительный объём трафика при редактировании больших файлов. На других устройствах клиент получает уведомление об изменении через постоянное соединение или периодический опрос и скачивает новую версию.
Российские пользователи активно применяют облачные хранилища Яндекс Диск и Облако Mail. Оба используют собственную серверную инфраструктуру на территории страны, что обеспечивает низкую задержку при передаче данных для отечественных пользователей.
Для бизнеса особенно важна функция версионирования: облако хранит несколько последних версий каждого файла, и если сотрудник случайно перезапишет важный документ, его можно восстановить за несколько кликов. Корпоративные тарифы обычно включают 30-дневную или более длительную историю изменений, тогда как на бесплатных планах этот срок нередко ограничен несколькими версиями.
