Всем добрый день.

Я недавно прошел путь CPU-профайлинга hadoop-кластера, однако по факту получился профайлер для любых java приложений, работающих в распределенной среде. Так что решил написать здесь - может кому-то понадобиться. Все open source - никакой рекламы или личной выгоды.

Здесь http://ihorbobak.com/index.php/2015/08/05/cluster-profiling/ полное описание как работает, как все поднять и что это дает.

Кратко суть:
- в JVM процессы внедряется специальный агент, который снимает трассу со всех потоков (то есть делает sampling) и каждые 10 секунд отправляет на выделенный сервер
- есть набор скриптов, которые эти стек-трейсы визуализируют в виде flame graphs

Если у кого-либо будут идеи что можно добавить - пишите в личку на ibobak at gmail dot com.