Пример кода Python line_profiler

Я пытаюсь выяснить, как я могу запустить Python line_profiler, чтобы получить построчное время выполнения в формате, указанном в ответе на этот вопрос.

Я установил модуль и звоню его LineProfiler объект, как показано ниже, но вывод я получаю только один раз, а не построчное резюме.

Есть идеи? Кроме того, как я могу получить время для numbers = [random.randint(1,100) for i in range(1000)] линия, которая находится вне какой-либо функции?

from line_profiler import LineProfiler
import random

def do_stuff(numbers):

    s = sum(numbers)
    l = [numbers[i]/43 for i in range(len(numbers))]
    m = ['hello'+str(numbers[i]) for i in range(len(numbers))]

numbers = [random.randint(1,100) for i in range(1000)]
profile = LineProfiler(do_stuff(numbers))
profile.print_stats()
[] Timer unit: 3.20721e-07 s
Источник

2 ответа

line_profiler контрольные примеры (найденные на GitHub) содержат пример того, как генерировать данные профиля из скрипта Python. Вы должны обернуть функцию, которую вы хотите профилировать, а затем вызвать оболочку, передавая любые нужные аргументы функции.

from line_profiler import LineProfiler
import random

def do_stuff(numbers):
    s = sum(numbers)
    l = [numbers[i]/43 for i in range(len(numbers))]
    m = ['hello'+str(numbers[i]) for i in range(len(numbers))]

numbers = [random.randint(1,100) for i in range(1000)]
lp = LineProfiler()
lp_wrapper = lp(do_stuff)
lp_wrapper(numbers)
lp.print_stats()

Выход:

Timer unit: 1e-06 s

Total time: 0.000649 s
File: <ipython-input-2-2e060b054fea>
Function: do_stuff at line 4

Line #      Hits         Time  Per Hit   % Time  Line Contents
==============================================================
     4                                           def do_stuff(numbers):
     5         1           10     10.0      1.5      s = sum(numbers)
     6         1          186    186.0     28.7      l = [numbers[i]/43 for i in range(len(numbers))]
     7         1          453    453.0     69.8      m = ['hello'+str(numbers[i]) for i in range(len(numbers))]

Добавление дополнительных функций в профиль

Также вы можете добавить дополнительные функции для профилирования. Например, если у вас была вторая вызываемая функция и вы только оборачивали вызывающую функцию, вы увидите только результаты профиля из вызывающей функции.

from line_profiler import LineProfiler
import random

def do_other_stuff(numbers):
    s = sum(numbers)

def do_stuff(numbers):
    do_other_stuff(numbers)
    l = [numbers[i]/43 for i in range(len(numbers))]
    m = ['hello'+str(numbers[i]) for i in range(len(numbers))]

numbers = [random.randint(1,100) for i in range(1000)]
lp = LineProfiler()
lp_wrapper = lp(do_stuff)
lp_wrapper(numbers)
lp.print_stats()

Выше приведен только следующий профиль вывода для вызывающей функции:

Timer unit: 1e-06 s

Total time: 0.000773 s
File: <ipython-input-3-ec0394d0a501>
Function: do_stuff at line 7

Line #      Hits         Time  Per Hit   % Time  Line Contents
==============================================================
     7                                           def do_stuff(numbers):
     8         1           11     11.0      1.4      do_other_stuff(numbers)
     9         1          236    236.0     30.5      l = [numbers[i]/43 for i in range(len(numbers))]
    10         1          526    526.0     68.0      m = ['hello'+str(numbers[i]) for i in range(len(numbers))]

В этом случае вы можете добавить дополнительную вызванную функцию в профиль следующим образом:

from line_profiler import LineProfiler
import random

def do_other_stuff(numbers):
    s = sum(numbers)

def do_stuff(numbers):
    do_other_stuff(numbers)
    l = [numbers[i]/43 for i in range(len(numbers))]
    m = ['hello'+str(numbers[i]) for i in range(len(numbers))]

numbers = [random.randint(1,100) for i in range(1000)]
lp = LineProfiler()
lp.add_function(do_other_stuff)   # add additional function to profile
lp_wrapper = lp(do_stuff)
lp_wrapper(numbers)
lp.print_stats()

Выход:

Timer unit: 1e-06 s

Total time: 9e-06 s
File: <ipython-input-4-dae73707787c>
Function: do_other_stuff at line 4

Line #      Hits         Time  Per Hit   % Time  Line Contents
==============================================================
     4                                           def do_other_stuff(numbers):
     5         1            9      9.0    100.0      s = sum(numbers)

Total time: 0.000694 s
File: <ipython-input-4-dae73707787c>
Function: do_stuff at line 7

Line #      Hits         Time  Per Hit   % Time  Line Contents
==============================================================
     7                                           def do_stuff(numbers):
     8         1           12     12.0      1.7      do_other_stuff(numbers)
     9         1          208    208.0     30.0      l = [numbers[i]/43 for i in range(len(numbers))]
    10         1          474    474.0     68.3      m = ['hello'+str(numbers[i]) for i in range(len(numbers))]

ПРИМЕЧАНИЕ. Добавление функций в профиль таким способом не требует изменений в профилированном коде (т. Е. Добавлять не нужно @profile декораторы).

Источник

Как описано в документации:

в своем скрипте вы можете украсить любую функцию, которую хотите профилировать, с помощью @profile

Вы хотите украсить свой do_stuff функция с @profile а потом беги

kernprof.py -v -l script_to_profile.py

чтобы получить аннотированный вывод на ваш терминал. Профиль также будет написан script_to_profile.py.lprof и вы можете заново создать выход позже с

python -m line_profiler script_to_profile.py.lprof
Источник
Другие вопросы по тегам