Профилирование hadoop работы с yourkit
Я следую этому уроку http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-single-node-cluster
Я хочу увидеть, какой метод или Java-процесс, который использует весь процессор в качестве средства отображения WordCount, проходит через корпус с помощью yourkit. Как я понимаю, тип Hadoop "Text" находится в utf-8, а Java String - в utf-16. Я пытаюсь увидеть, что преобразователь wordCount выполняет большую часть работы по преобразованию из utf-8 в utf-16.
Тем не менее, yourkit не показывает много деталей об этом процессе. Он показывает только время процессора следующим образом: org.apache.hadoop.mapred.Child.main(String[]) ~ 96% и org.apache.hadoop.hdfs.DFSClient$DFSOutputStream$ResponseProcessor.run() ~ 4%
Я не очень знаком с твоим набором. Может ли кто-нибудь указать, как мне подходить к этому?