Меня немного смущает архитектура Hadoop. Какие метаданные файлов хранятся в Hadoop Namenode? Из вики Hadoop говорится, что Namenode хранит все системное пространство имен. Хранится ли такая информация, как время последнего изменения, время...

Какова роль Secondary namenode, если Namenode вообще не работает?

Я только начал изучать Hadoop по книге Hadoop: полное руководство . Я следовал руководству по установке Hadoop в режиме псевдораспространения. Я включил вход без пароля в ssh . Отформатировал файловую систему hdfs перед первым использованием....

Я пытаюсь понять Namenode и ссылаюсь на онлайн-материалы, а также на книгу Hadoop: полное руководство. Я понимаю, что Namenode имеет такие понятия, как: «редактировать журналы», «fsimage», и я вижу следующие файлы в моем Namenode....

У меня проблема с отображением статуса NameNode в амбари. Происходит следующее: - NameNode продолжает падать через несколько секунд после того, как я запускаю его через амбари (похоже, что он никогда не поднимается, но процесс запуска проходит...

Я настроил кластер из двух узлов, используя Ambari с установленным HBase. Я знаю, что мы не можем добиться высокой доступности Namenode без трех узлов. Но можем ли мы сделать HBase high доступным с двумя узлами, просто добавив резервный мастер...

Я использую версию hadoop 2.7.3, и после настройки namenode не отображается в jps. Кто-нибудь может сказать, по какой причине я дал правильные разрешения на соответствующие файлы. Я удалил файлы / tmp и воссоздал их, и после переформатирования...

Я обновил файл /conf/slaves на главном узле Hadoop, указав имена хостов моих подчиненных узлов, но не могу запустить подчиненные устройства с главного узла. Я должен запускать ведомые устройства по отдельности, после чего мой кластер из 5 узлов...

У меня есть Hadoop 2.9.0 на Ubuntu в /usr/local/hadoop Но когда я пытаюсь start-dfs.sh , при запуске namenode не отображается ошибка. Но когда я набираю jps , только 10900 SecondaryNameNode 11047 Jps 10696 DataNode Швы, чтобы...

Я использую hadoop 3.1.2 и jdk-12.0.1, работающие в псевдораспределенном режиме. Пока из командной строки все работает нормально, я могу загружать файлы из hdfs и локально. По какой-то причине, когда я открываю namenode, который на самом деле...

После сбоя NN-A (активного) из-за нехватки памяти (слишком много блоков/файлов) мы обновляем NN-A с гораздо большим объемом памяти, но не обновляем NN-B (неактивный) сразу. С разницей в HeapSize мы удалили несколько файлов (от 80 до 70 миллионов),...

Я новичок в Hadoop и пытаюсь создать автономный кластер Hadoop в Windows. Я получаю сообщение об ошибке при запуске узла имени, как показано ниже. Однако при проверке в Windows процесса, использующего порт 50070, я не смог найти ни одного процесса....

Я пытался установить Hadoop, и при форматировании узла имени я получаю эту ошибку Re-format filesystem in Storage Directory root= C:\hadoop\data\namenode; location= null ? (Y or N) Y 2021-01-03 11:30:36,360 INFO namenode.FSImage: Allocated new...