Logo ru.boatexistence.com

Можно ли перезаписать факторы репликации в hdfs?

Оглавление:

Можно ли перезаписать факторы репликации в hdfs?
Можно ли перезаписать факторы репликации в hdfs?

Видео: Можно ли перезаписать факторы репликации в hdfs?

Видео: Можно ли перезаписать факторы репликации в hdfs?
Видео: Hadoop. Распределённая файловая система HDFS 2024, Май
Anonim

hdfs-сайт. … xml изменит репликацию по умолчанию для всех файлов, помещенных в HDFS. Вы также можете изменить коэффициент репликации для каждого файла с помощью оболочки Hadoop FS:[training@localhost ~]$ hadoopfs –setrep –w 3 /my/fileИ наоборот, вы также можете изменить коэффициент репликации всех файлов в каталог.

Что произойдет, если мы изменим коэффициент репликации в HDFS?

2 Ответы. Но изменение коэффициента репликации для каталога повлияет только на существующие файлы, а новые файлы в этом каталоге будут созданы с коэффициентом репликации по умолчанию (dfs. репликация с сайта hdfs. … Пожалуйста см. ссылку для настройки коэффициента репликации для HDFS.

Как перезаписать в HDFS?

Скопируйте файлы из локальной файловой системы в HDFS, аналогично команде -put. Эта команда не будет работать, если файл уже существует. Чтобы перезаписать место назначения, если файл уже существует, добавьте флаг -f к команде.

Можно ли изменить фактор репликации в Hadoop?

Вы также можете изменить коэффициент репликации для каждого файла с помощью оболочки Hadoop FS. Кроме того, вы можете изменить коэффициент репликации всех файлов в каталоге.

Что такое сверхрепликация в Hadoop?

Перереплицированные блоки - это блоки, которые превышают свою целевую репликацию для файла, которому они принадлежат. Обычно избыточная репликация не является проблемой, и HDFS автоматически удалит лишние реплики.

Рекомендуемые: