Как архив VOG за двадцать пять лет — около 17,7 млн партий в собственном файловом формате на диске игрового сервера — переехал в Parquet в S3-совместимом хранилище: почему не Iceberg и не protobuf, почему первое поколение с ходами по колонкам пришлось переделать в «транскрипт как есть», что ломалось при выгрузке, как сверяли результат и как старые партии стали открываться в браузере
Две грани S3 в ClickHouse: многоуровневое хранение (hot/cold-тиринг MergeTree через storage policies и TTL MOVE на S3, separation of storage/compute) и S3 table function для запроса и загрузки Parquet прямо из объектного хранилища. С живым стендом на MinIO
Идемпотентное создание, размер и число объектов, квота и состояние кластера — набор команд, которого хватает в 90% случаев
mc mirror переносит только текущие версии объектов — старые версии и delete-маркеры теряются молча
Алиас mc за одну команду, где он хранится и как не оставить пароль в истории оболочки
Экспорт и импорт IAM одной парой команд — и почему полученный архив нужно затирать, а не просто удалять
mc anonymous set download заодно разрешает перечислять содержимое бакета — кто угодно увидит все ключи; нужна своя политика с одним GetObject
Бакет и отдельная пара ключей для сервиса за четыре команды — вместо того чтобы раздавать root-доступ
Политика на конкретный бакет вместо readwrite на весь кластер, и почему у write-only не должно быть ListBucket
Как вынести resize и конвертацию картинок в WebP/AVIF в отдельный сервис: подписанные URL, кеш перед imgproxy, сложности деплоя и реальные цифры — на примере khorost.tech
