Edge-вычисления и хранение файлов: снижение задержек

Edge-вычисления сокращают задержку файлов, храня данные в пределах 30–50 мс от пользователя, а не в сотнях миллисекунд до единственного источника. Провайдеры вроде Cloudflare R2 (300+ городов), AWS CloudFront с Lambda@Edge, Fastly Compute@Edge и Akamai NetStorage реплицируют объекты в региональные точки присутствия — и .pdf на 10 МБ загружается за 150 мс из Парижа, а не за 900 мс из Вирджинии. Для медиа, CAD и медицинской визуализации ускорение измеримо, а пользовательский опыт меняется качественно.

Куда уходят миллисекунды

Прежде чем платить за граничную инфраструктуру, измерьте бюджет времени обходного пути. Загрузка файла с источника включает DNS (5–30 мс), TCP-рукопожатие (1 RTT), TLS 1.3 рукопожатие (1 RTT) и время до первого байта. На канале между Сиднеем и us-east-1 — 160 мс на RTT, то есть 480 мс до того, как первый чанк покинет сервер. Граничное кэширование сжимает эти RTT до 10–30 мс, потому что PoP находится внутри ISP или по соседству.

Инструменты WebPageTest и раздел Network в Chrome DevTools точно показывают, какая фаза медленная. Если доминирует DNS — CDN не поможет; если TTFB — граничное кэширование сыграет. Измеряйте с трёх континентов, прежде чем тратить хоть цент на архитектуру.

Топологии репликации объектов

Граничное файловое хранилище бывает трёх видов: кэш с подтягиванием (pull-through), репликация с проталкиванием (push) и active-active. Pull-through (CloudFront, Fastly) загружает при первом запросе, кэширует на время TTL и вытесняет при нехватке места. Push (S3 Cross-Region Replication, R2 с задачами по расписанию) немедленно зеркалирует объекты в указанные регионы. Active-active — через Cloudflare Durable Objects или системы на базе FoundationDB — обращается со всеми регионами как с первичными.

Для видеобиблиотеки, где горячий контент повторяется, pull-through дешевле: платите один раз за промах, кэшируйте 99% последующих обращений. Для регулируемых процессов, где нельзя допустить задержку при первом промахе, важнее push-репликация в указанные регионы. Выбирайте на основе паттернов доступа, а не слайдов вендоров.

Компромиссы согласованности на границе

Граничная репликация вынуждает столкнуться с теоремой CAP. Если пользователь в Токио загружает версию 2 документа .docx на 50 МБ, когда кэш в Сан-Паулу её увидит? S3 теперь обеспечивает строгую согласованность чтения-после-записи глобально, но CDN-кэши поверх него подчиняются своим TTL. Можно пометить объекты Cache-Control: s-maxage=3600 и получать устаревшие данные на протяжении часа.

Обходные решения: версионированные URL (/files/report-v2.docx?h=a3f9), Cache-Control: private, no-store для чувствительных документов и API инвалидации, запускаемые конвейером загрузки. Инвалидация кэша Cloudflare завершается глобально примерно за 5 секунд; Fastly заявляет 150 мс. Для регулируемого контента проектируйте под явную инвалидацию, а не надейтесь, что TTL истечёт вовремя.

Файловые протоколы для Edge

HTTP/2 и HTTP/3 (QUIC, RFC 9000) — обязательный минимум для граничной доставки. 0-RTT возобновление QUIC экономит TLS-рукопожатие при повторных визитах — сокращение на 200 мс в мобильных сетях. Range-запросы (Range: bytes=0-1048575) позволяют клиентам стримить большие файлы без загрузки хвоста сначала — удобно для возобновляемых загрузок и перемотки видео.

Для загрузки файлов протокол tus.io и S3 Multipart (минимальный размер части 5 МБ, максимум 10 000 частей) хорошо сочетаются с граничной загрузкой. R2 Cloudflare поддерживает составную загрузку через S3-совместимый API — видео на 5 ГБ можно загружать параллельными чанками в ближайший PoP и собирать на стороне сервера.

Работа с чувствительными файлами в распределённой инфраструктуре

Перемещение файлов ближе к пользователям означает их перемещение через всё больше юрисдикций. Больничная сеть, использующая граничный CDN для DICOM-исследований, может случайно реплицировать PHI в регион вне своего HIPAA business-associate agreement или нарушить правила передачи данных по статье 44 GDPR, если файл европейского пациента попадёт в американский кэш. Аналогично, по требованиям 152-ФЗ и предписаниям Роскомнадзора персональные данные российских пользователей должны храниться на серверах в России.

Снижайте риски через привязку к региону (Regional Services Cloudflare, географические ограничения AWS CloudFront), клиентское шифрование и теги на уровне объектов, предотвращающие репликацию. Для разового обмена файлами, слишком чувствительными для кэширования где-либо, сквозная зашифрованная передача лучше CDN-ускорения. HexaTransfer шифрует в браузере с помощью AES-256-GCM до загрузки, поэтому даже источник не видит открытый текст — никакого риска отравления кэша, потому что ничего пригодного для использования не кэшируется.

Холодный, тёплый и горячий уровни на границе

Не каждый файл заслуживает граничных ресурсов. Реализуйте трёхуровневую модель: горячий (доступался на этой неделе, закреплён в региональных PoP), тёплый (в этом месяце, в региональном источнике вроде R2 или S3 One Zone), холодный (архивный, в Glacier Deep Archive по $0,00099/ГБ/мес). Автоматизируйте повышение и понижение через lifecycle-политики.

Практическое правило: объекты менее 100 КБ, к которым обращаются более 10 раз в день на регион, относятся к граничному уровню. Объекты более 100 МБ, к которым обращаются еженедельно, — к региональному хранилищу источника с коротким CDN TTL. Видеотеки по требованию часто достигают 98% попаданий на границе при таком разделении, что напрямую снижает счета за исходящий трафик.

Измерение того, что реально чувствуют пользователи

Синтетический мониторинг (Pingdom, Catchpoint, Checkly) показывает медианную производительность из известных мест. Real User Monitoring — через navigator.connection и Performance Timing API — показывает, что реально испытывают клиенты на своём гостиничном Wi-Fi и метрошном 5G.

Отслеживайте Largest Contentful Paint (LCP) для страниц с файлами, Time to First Byte (TTFB) для API-ответов и кастомные метки вокруг завершения загрузки файла. Сигнализируйте, когда 75-й перцентиль превышает 2,5 с LCP или 800 мс TTFB — это пороговые значения Core Web Vitals, которые Google использует как сигналы ранжирования. Если граничное кэширование не улучшает эти цифры, значит, оно не делает свою работу.

Модель затрат на граничное хранилище

Граничный уровень не бесплатен. Cloudflare R2 берёт $0,015/ГБ хранения и ноль за исходящий; S3 — $0,023/ГБ хранения и $0,09/ГБ исходящего; CloudFront добавляет $0,085/ГБ за первые 10 ТБ доставки. Для сайта, отдающего 500 ТБ загрузок в месяц при коэффициенте попаданий в кэш 95%, счёт CDN будет доминировать — моделируйте как случай попадания, так и промаха.

Резервируйте ёмкость там, где это доступно (CloudFront Savings Bundles, скидки за обязательный объём Fastly) и консолидируйте домены, чтобы показатели попаданий в кэш выигрывали от общих рабочих наборов. Раз в квартал проверяйте топ-100 URL — один безудержный эндпоинт (установщик на 2 ГБ, скачанный 10 000 раз) может утроить счёт, прежде чем кто-то заметит.

Попробуйте на hexatransfer.com — бесплатно, без аккаунта, до 10 ГБ.