Знаете ли вы инструменты пакетной обработки журналов для hadoop (альтернативы zohmg)?

Поскольку проект zohmg кажется мертвым (нет новых коммитов с ноября 2009 г.), я хотел бы знать, использовал ли кто-либо из вас его (с успешными результатами). Или если вы знаете что-нибудь о будущем этого проекта.

И если нет, то есть ли альтернатива этому проекту. Я ищу инструмент, который поможет извлечь данные из журналов (apache) (используя Hadoop в качестве системы пакетной обработки), сохранить их в HBase, помочь с запросом этих данных.


person wlk    schedule 23.06.2010    source источник


Ответы (1)


Для этого очень часто используется каскадирование. Он также предоставляет адаптеры для HBase.

Примеры можно найти здесь http://github.com/cwensel/cascading.samples.

Интеграция с HBase http://www.cascading.org/modules.html

person cwensel    schedule 24.06.2010