Вопросы по теме 's3distcp'

медленный s3Distcp при копировании с s3 на hdfs
Я использую s3disctcp для копирования 31 16 886 файлов (300 ГБ) с S3 в HDFS, и мне потребовалось 4 дня, чтобы просто скопировать 10 48 576 файлов. Я убил задание, и мне нужно понять, как я могу сократить это время или что я делаю неправильный....
1357 просмотров