свинья хауп нужна для того, что я хочу сделать?

У меня к вам вопрос, ну и уточнение...

Я разработал программу, которая использует сокращение карты hadoop, которая получает только столбец из набора данных (файл csv) и обрабатывает эти данные с помощью некоторых функций, поэтому эта программа закончена, но реальный вопрос: это хорошая идея, чтобы разработать эту программу в Pig ? обратите внимание, что в процессе файла я не использую FILTERS COUNTS или любую встроенную функцию Pig...

Прав ли я, если скажу, что передавать эту программу сокращения карты hadoop на Pig не имеет смысла? потому что все мои функции нужно будет переписать как пользовательскую функцию Pig User Defined Function UDF...


person KoRnE    schedule 12.11.2010    source источник


Ответы (1)


на мой взгляд, на самом деле нет необходимости писать очень маленький скрипт на PigLatin. Будет интереснее, когда он станет больше, потому что PigLatin требует меньше строк кода, чем java, и более читаем, особенно для не-java-разработчиков :)

person Christoph    schedule 16.11.2010