Я использую Apache Spark для создания приложения. Чтобы сделать RDD доступными из других приложений, я пробую два подхода:
- Использование тахион
- Использование сервера spark-job
Я новичок в Тахионе. Я выполнил следующие задачи, указанные в запуске Tachyon в кластере
Я могу получить доступ к пользовательскому интерфейсу с master:19999
URL.
Из каталога tachyon я успешно создал каталог./bin/tachyon tfs mkdir /Test
Но при попытке выполнить команду copyFromLocal я получаю следующие ошибки:
FailedToCheckpointException(message:Failed to rename hdfs://master:54310/tmp/tachyon/workers/1421840000001/8/93 to hdfs://master:54310/tmp/tachyon/data/93)
tfs ls
, но они неполные, как сообщается, когда я пытаюсьtfs cat
один из файлов: Файл /data/test.txt не завершен. - person taranaki   schedule 09.07.2015