Сбор статистики Unix машины в оболочке Java или Unix
У меня есть длинный пакет автоматизации, который работает и генерирует файл журнала с чем-то вроде:
Time, API, Min, Max, Average, Current, Invocation
2013-07-22 14:52:39, api1, 167.0, 167.0, 167.0, 167.0, 1
2013-07-22 14:52:39, api1, 167.0, 169.0, 168.0, 169.0, 2
...
...
Когда тест закончен, я хочу автоматически собирать статистику машин Unix через sar (или nmon, но сначала пытаюсь выполнить sar). Команда sar выглядит примерно так:
sar -i 900 -f /var/log/sa/sa22 -s 10:00:00 -e 18:00:00
У меня уже есть класс Java, который будет подключаться по SSH к любому количеству машин и выполнять статическую команду чтения из файла XML. Это сохранит вывод в файл для последующего анализа.
Моя дилемма в том, что я хочу автоматизировать выполнение команды sar на время теста (который, конечно, изменится). Например, я хочу получить время начала и окончания из файла журнала выше и запустить sar с этими датами. С оболочкой Unix я могу получить эти даты следующим образом:
SECOND_LINE=`sed -n '2p' ${LOG_DIR}/${CURRENT_DATE}_results.txt`
START_DATE=`echo ${SECOND_LINE} | cut -c9-10`
START_TIME=`echo ${SECOND_LINE} | cut -c12-13,15-16`
LAST_LINE=`sed -n '$p' ${LOG_DIR}/${CURRENT_DATE}_results.txt`
END_DATE=`echo ${LAST_LINE} | cut -c9-10`
END_TIME=`echo ${LAST_LINE} | cut -c12-13,15-16`
Я мог бы передать их в мой класс Java и каждый раз формировать команду sar, или я мог бы найти и заменить текстовый файл, из которого мой класс Java читает из команд. Тем не менее, я не уверен, что делать, если пакет автоматизации работает в течение нескольких дней или переходит в другой месяц.
Есть ли лучший способ достичь того, чего я хочу, или я должен продолжать мыслить? Моя конечная цель - получить данные sar (загрузка ЦП, дисковый ввод-вывод, использование памяти) за весь период моего теста, который может составлять минуты или дни.
1 ответ
Я пришел с базовым сценарием обработки некоторых параметров. Это вовсе не ответ, а слишком широкий подход, чтобы оставлять его в комментариях:
start_day=22
end_day=$1
sar_path="/var/log/sa"
start_time=14
end_time=17
echo "start_day = $start_day - end_day = $end_day"
echo "start_time = $start_time - end_time = $end_time"
if [ $start_day -eq $end_day ]; then
echo "sar -i 900 -f $sar_path/sa$start_day -s $start_time:00:00 -e $end_time:00:00"
elif [ "$(($start_day + 1))" -eq $end_day ]; then
echo "sar -i 900 -f $sar_path/sa$start_day -s $start_time:00:00 -e 23:59"
echo "sar -i 900 -f $sar_path/sa$end_day -s 00:00:00 -e $end_time:00:00"
elif [ $start_day -gt $end_day ]; then
last_day=$(ls -1 $sar_path/sa[0-9]* | tail -1)
last_day=$(basename $last_day | grep -o [0-9]*)
echo "sar -i 900 -f $sar_path/sa$start_day -s $start_time:00:00 -e 23:59"
for i in $(seq $(($start_day +1)) $(($last_day)))
do
echo "sar -i 900 -f $sar_path/sa$i -s 00:00:00 -e 23:59:00"
done
for i in $(seq 1 $(($end_day -1)))
do
echo "sar -i 900 -f $sar_path/sa$i -s 00:00:00 -e 23:59:00"
done
echo "sar -i 900 -f $sar_path/sa$end_day -s 00:00:00 -e $end_time:00:00"
else
echo "sar -i 900 -f $sar_path/sa$start_day -s $start_time:00:00 -e 23:59"
for i in $(seq $(($start_day +1)) $(($end_day -1)))
do
echo "sar -i 900 -f $sar_path/sa$i -s 00:00:00 -e 23:59:00"
done
echo "sar -i 900 -f $sar_path/sa$end_day -s 00:00:00 -e $end_time:00:00"
fi
Выполнить с ./file <last_day>
,
Обратите внимание, что случай, когда last_day
в следующем месяце не считается. Следует также проверить последний день месяца (наилучшим образом, с ls -l /var/log/sa
), так далее.
Тем не менее, я думаю, что лучше справиться с этим с помощью Java, если он предоставляет вам такой причудливый анализ дат.
Примеры
#same day
$ ./a 22
start_day = 22 - end_day = 22
start_time = 14 - end_time = 17
sar -i 900 -f /var/log/sa/sa22 -s 14:00:00 -e 17:00:00
#one day difference
$ ./a 23
start_day = 22 - end_day = 23
start_time = 14 - end_time = 17
sar -i 900 -f /var/log/sa/sa22 -s 14:00:00 -e 23:59
sar -i 900 -f /var/log/sa/sa23 -s 00:00:00 -e 17:00:00
#>1 day difference
$ ./a 27
start_day = 22 - end_day = 27
start_time = 14 - end_time = 17
sar -i 900 -f /var/log/sa/sa22 -s 14:00:00 -e 23:59
sar -i 900 -f /var/log/sa/sa23 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa24 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa25 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa26 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa27 -s 00:00:00 -e 17:00:00
# change of month
$ ./a 5
start_day = 22 - end_day = 5
start_time = 14 - end_time = 17
sar -i 900 -f /var/log/sa/sa22 -s 14:00:00 -e 23:59
sar -i 900 -f /var/log/sa/sa23 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa24 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa25 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa1 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa2 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa3 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa4 -s 00:00:00 -e 23:59:00
sar -i 900 -f /var/log/sa/sa5 -s 00:00:00 -e 17:00:00