Как использовать счетчики в Apache Crunch

Question

В Apache Crunch есть метод с именем increment("any enum"),

я использовал increment(TOTAL_IDS);, но там, где я вижу результат работы счетчиков, счетчики не появляются в журналах после завершения работы.

Что мне там не хватает?

Answer 1

Вы должны увидеть свои счетчики в URL-адресе отслеживания задания mapreduce (если вы используете mapreduce) или извлечь счетчики из конвейера. Было бы полезно, если бы вы могли предоставить свой код, как вы увеличиваете счетчики? это в вашем DoFn, в вашем методе cleanp?

С уважением