khorost.tech Khorost.tech
  • Инфраструктура
  • Go
  • Docker
    • Хранилища
    • Python
    • Архитектура
    • Kubernetes
    • Наблюдаемость
    • Безопасность
    • Базы данных
    • Фото и игры
    • Сообщения
    • Performance
    • Языки
    • Zig
    • Rust
    • Java
    • AI
    • Инструменты
    • Все публикации
    • Все разделы
    • Серии и карты
  • Поиск
  • Заметки
  • Теги
  • Обо мне

Parquet

Архив партий VOG в Parquet: 17 миллионов игр с диска сервера в S3
24.10.2026

Архив партий VOG в Parquet: 17 миллионов игр с диска сервера в S3

Как архив VOG за двадцать пять лет — около 17,7 млн партий в собственном файловом формате на диске игрового сервера — переехал в Parquet в S3-совместимом хранилище: почему не Iceberg и не protobuf, почему первое поколение с ходами по колонкам пришлось переделать в «транскрипт как есть», что ломалось при выгрузке, как сверяли результат и как старые партии стали открываться в браузере

#storage #go #parquet
#s3 #clickhouse
Все публикации Все разделы Обратная связь Telegram-канал Обсуждение RSS
© 2026 Александр Хохлов. MIT License