Фактор репликации в SNAPSHOT (в HDFS)

Можем ли мы изменить коэффициент репликации в HDFS. Скажем, если мы включим моментальный снимок в каталоге hdfs, то в этом случае он будет реплицироваться так же, как коэффициент репликации установлен в этом каталоге.

Фактор репликации в каталоге hdfs - 3

Тогда для моментальных снимков это будет - для запрошенного каталога снимков: исходный каталог * 3 раза + снимок * 3 раза

Есть ли способ, с помощью которого мы можем изменить коэффициент репликации для каталога моментальных снимков в hdfs, ничего не изменяя в каталоге hdfs?

Я делаю снимки в заданном каталоге с помощью Cloudera Manager


snapshot hadoop hdfs cloudera cloudera-manager
person Prateek Dubey    schedule 15.02.2016    source источник

Ответы (1)


arrow_upward
0
arrow_downward

Насколько я знаю, на данный момент моментальные снимки HDFS доступны только для чтения, поэтому вы не можете изменить их коэффициент репликации.

Кроме того, Snapshot не копирует/реплицирует данные. Они просто указатели на исходные данные. Таким образом, если у вас настроена репликация x3 в каталоге с таблицей моментальных снимков, она останется x3, независимо от того, сколько снимков вы сделаете.

person facha    schedule 15.02.2016
comment
Спасибо чувак. Очень ценю ответ. Я тоже думал, что его нельзя явно изменить для каталога снимков, если мы не изменим что-то с помощью каталога hdfs. Хотя появилась потребность позаботиться о нем, если это вообще возможно. - person Prateek Dubey; 18.02.2016