Новый инструмент Google помогает удвоить скорость загрузки облачных хранилищ

11 октября 2022 г.

Google Cloud запускает новый инструмент, который позволит пользователям создавать
и управлять ими. определенные ресурсы и службы напрямую, а также дает преимущество в производительности.

Облачный гигант утверждает, что инструмент, получивший название «gcloud storage CLI», позволит передавать данные на 94 % быстрее при использовании его облачное хранилище.

Ранее пользователи могли настраивать свои ресурсы Google Cloud из командной строки или с помощью сценариев через интерфейс командной строки Google Cloud, но предполагается, что новый инструмент предназначен для модернизации работы.

Как это работает?

Google утверждает, что более высокая скорость передачи данных является результатом двух основных нововведений в хранилище gcloud.

Во-первых, хранилище gcloud, очевидно, использует более быстрые инструменты хеширования для проверки целостности данных CRC32C, которые пропускают сложную настройку, необходимую для gsutil, инструмента's Предшественник на основе Python.

Во-вторых, в новом инструменте используется новая стратегия распараллеливания, в которой управление задачами рассматривается как проблема графа, которая, как утверждается, позволяет «выполнять больше работы параллельно с гораздо меньшими накладными расходами».

< p> Google утверждает, что при передаче 100 файлов размером 100 МБ хранилище gcloud на 79% быстрее, чем gsutil, при загрузке и на 33% быстрее при загрузке с использованием стратегии параллельной составной загрузки.

Помимо повышения производительности, Google также представляет новый инструмент как «последовательный способ» управления всеми ресурсами Google Cloud, такими как сегменты Cloud Storage, Compute Engine VM и кластеры Google Kubernetes Engine.