Как нормализовать массив NumPy с точностью до определенного диапазона?
После некоторой обработки массива аудио или изображений его необходимо нормализовать в пределах диапазона, прежде чем он сможет быть записан обратно в файл. Это можно сделать так:
# Normalize audio channels to between -1.0 and +1.0
audio[:,0] = audio[:,0]/abs(audio[:,0]).max()
audio[:,1] = audio[:,1]/abs(audio[:,1]).max()
# Normalize image to between 0 and 255
image = image/(image.max()/255.0)
Есть ли менее подробный, удобный способ сделать это? matplotlib.colors.Normalize()
не похоже на связь.
8 ответов
audio /= np.max(np.abs(audio),axis=0)
image *= (255.0/image.max())
С помощью /=
а также *=
позволяет исключить промежуточный временный массив, тем самым экономя часть памяти. Умножение дешевле, чем деление, поэтому
image *= 255.0/image.max() # Uses 1 division and image.size multiplications
незначительно быстрее, чем
image /= image.max()/255.0 # Uses 1+image.size divisions
Так как здесь мы используем базовые методы NumPy, я думаю, что это почти столь же эффективное решение, как и NUMPY.
Если массив содержит как положительные, так и отрицательные данные, я бы пошел с:
import numpy as np
a = np.random.rand(3,2)
# Normalised [0,1]
b = (a - np.min(a))/np.ptp(a)
# Normalised [0,255] as integer
c = 255*(a - np.min(a))/np.ptp(a).astype(int)
# Normalised [-1,1]
d = 2*(a - np.min(a))/np.ptp(a)-1
Кроме того, стоит упомянуть, даже если это не вопрос OP, стандартизация:
e = (a - np.mean(a)) / np.std(a)
Вы также можете изменить масштаб, используя sklearn
, Преимущества состоят в том, что вы можете отрегулировать нормализацию стандартного отклонения, в дополнение к центрированию данных по среднему значению, и что вы можете сделать это либо по оси, либо по функциям, либо по записям.
from sklearn.preprocessing import scale
X = scale( X, axis=0, with_mean=True, with_std=True, copy=True )
Ключевое слово аргументы axis
, with_mean
, with_std
говорят сами за себя и отображаются в состоянии по умолчанию. Аргумент copy
выполняет операцию на месте, если она установлена на False
, Документация здесь.
Вы пытаетесь масштабировать min-max значения audio
от -1 до +1 и image
от 0 до 255.
С помощью sklearn.preprocessing.minmax_scale
, должно легко решить вашу проблему.
например:
audio_scaled = minmax_scale(audio, feature_range=(-1,1))
а также
shape = image.shape
image_scaled = minmax_scale(image.ravel(), feature_range=(0,255)).reshape(shape)
Примечание: не путать с операцией, которая масштабирует норму (длину) вектора до определенного значения (обычно 1), что также обычно называется нормализацией.
Этот ответ на аналогичный вопрос решил для меня проблему с
np.interp(a, (a.min(), a.max()), (-1, +1))
Вы можете использовать версию "i" (как в idiv, imul..), и она не выглядит наполовину плохо:
image /= (image.max()/255.0)
В другом случае вы можете написать функцию для нормализации n-мерного массива по столбцам:
def normalize_columns(arr):
rows, cols = arr.shape
for col in xrange(cols):
arr[:,col] /= abs(arr[:,col]).max()
Простым решением является использование инструментов масштабирования, предлагаемых библиотекой sklearn.preprocessing.
scaler = sk.MinMaxScaler(feature_range=(0, 250))
scaler = scaler.fit(X)
X_scaled = scaler.transform(X)
# Checking reconstruction
X_rec = scaler.inverse_transform(X_scaled)
Ошибка X_rec-X будет равна нулю. Вы можете настроить feature_range для своих нужд или даже использовать стандартный скалер sk.StandardScaler()
Я попытался после этого, и получил ошибку
TypeError: ufunc 'true_divide' output (typecode 'd') could not be coerced to provided output parameter (typecode 'l') according to the casting rule ''same_kind''
numpy
массив, который я пытался нормализовать, был integer
массив. Кажется, они не одобряют приведение типов в версиях> 1.10
и вы должны использовать numpy.true_divide()
чтобы решить это.
arr = np.array(img)
arr = np.true_divide(arr,[255.0],out=None)
img
был PIL.Image
объект.