S3DistCp. Копируем данные.

Все началось с миграции. Задача была очень простая. Нужно мигрировать данные, лежащие в S3 из одного региона в другой. Попросту говоря скопировать содержимое одной корзины в другую. И сложностей никаких – данные незашифрованные, почти не меняются, все права чтения-запись есть. Бери и копируй. Один нюанс – размер несколько терабайт. И скопировать нужно быстро.

И так имеем — корзина «source» в регионе eu-central-1(Франкфурт) и корзина «target» в регионе eu-west-1(Ирландия). Цель – содержимое «source» скопировать в «target».

Читать далее