Долговременная кратковременная память. Архитектура нейронной сети, которая содержит повторяющиеся блоки NN, которые могут запоминать значение в течение произвольного промежутка времени. Очень популярный строительный блок для глубокого NN.
0 ответов

Резкий всплеск в начале последовательности при построении прогнозных значений

Я получаю странное поведение при отображении результатов. Предсказанное значение имеет похожий шаблон в начале всех последовательностей. В самом начале, он принимает резкий всплеск вверх и затем начинает следовать желаемому образцу. Что может быть п…
06 май '18 в 20:03
0 ответов

Keras lstm модель прогнозирования

Привет я пытаюсь сделать прогноз для модели этого учебника https://www.kaggle.com/sbongo/for-beginners-tackling-toxic-using-keras с этим кодом import sys from keras.models import load_model from keras.preprocessing.text import Tokenizer from keras.p…
31 авг '18 в 15:36
1 ответ

Использование LSTM для временных рядов с разными интервалами

Я хочу построить классификатор для классификации временных рядов. Для каждой точки во временном ряду есть несколько объектов и временная метка. Иногда между двумя точками есть 1 секунда, но иногда между отметкой времени может быть 1 минута. Я старал…
02 июл '18 в 11:32
0 ответов

Сеть LSTM в R для прогнозирования временных рядов

У меня есть одномерный месячный временной ряд размером 64. Я хотел бы сделать многоэтапный прогноз - последние три месяца (266, 286 и 230) - используя оставшиеся месяцы в качестве учебного набора. data <- c(113, 55, 77, 114, 73, 72, 75, 135, 84, …
22 сен '18 в 15:25
1 ответ

Построение нескольких моделей в одном графике

Я пытаюсь построить две похожие модели, предсказывающие разные типы вывода. Один прогнозирует между двумя категориями, а другой имеет шесть выходных категорий. Их входы одинаковы, и они оба LSTM RNN. Я разделил обучение и прогнозирование на отдельны…
03 авг '16 в 17:58
1 ответ

Как написать индивидуальный LSTM в tenorflow?

Я пытаюсь переопределить эту статью " Создание семантически обусловленных LSTM на естественном языке для систем разговорного диалога", в которых они добавляют шлюз в ячейку LSTM и изменяют способ вычисления состояния. Как я могу сделать это в tenorf…
0 ответов

В модели LSTM для задачи прогнозирования, как я могу получить обратное распространение во времени?

В правиле обучения LSTM я хотел бы вывести алгоритм BPTT. Но большая часть примера деривации, который я нашел, - это предполагаемая задача классификации, выходной функцией которой является softmax. Для типичной модели LSTM на этом рисунке: Термин де…
1 ответ

Пример Keras на уровне слов с целочисленными последовательностями дает `ожидаемый ndim=3, найденный ndim=4`

Я пытаюсь реализовать пример уровня слова Keras в своем блоге, указанном в разделе " Бонус" -> Что, если я хочу использовать модель уровня слова с целочисленными последовательностями? Я пометил слои с именами, чтобы помочь мне позже соединить слои и…
1 ответ

Классификация временных рядов с использованием LSTM - как подойти?

Я работаю над экспериментом с LSTM для классификации временных рядов и прохожу несколько HOWTO, но все же я борюсь с некоторыми очень простыми вопросами: Является ли основная идея для обучения LSTM брать один и тот же образец из каждого временного р…
0 ответов

Как рассчитать ROC для многопеременной модели RNN?

Мне нужно рассчитать кривую ro c для моей модели RNN LSTM Keras с несколькими переменными. Это мой набор данных (число пациентов, время в миль / сек., нормализация X Y и Z, эксцесс, перекос, наклон, крен и рыскание, метка) соответственно. 1,15, -0.2…
01 июн '18 в 15:44
1 ответ

Прогноз временных рядов lstm для данных о событиях

Я пытаюсь решить проблему временного ряда. Набор данных имеет n систем, и мы записываем количество отказов, произошедших в каждой системе, в течение примерно t дней. Тогда моя цель состоит в том, чтобы предсказать количество ошибок, которые могут пр…
04 май '17 в 22:45
1 ответ

Неправильная форма ввода для lstm keras

Я наткнулся на учебник, в котором автор использует сеть LSTM для прогнозирования временных рядов, например: trainX = numpy.reshape(trainX, (trainX.shape[0], 1, trainX.shape[1])) testX = numpy.reshape(testX, (testX.shape[0], 1, testX.shape[1])) model…
11 апр '18 в 13:24
1 ответ

Как обучают матрице встраивания в этом фрагменте кода?

Я следую коду задания Coursera, которое реализует тег NER с помощью двунаправленного LSTM. Но я не могу понять, как обновляется матрица встраивания. В следующем коде build_layers имеет переменную embedding_matrix_variable который действует на входе …
23 июн '18 в 06:49
0 ответов

Прогнозирование двумерного (позиционного) временного ряда в Керасе с использованием LSTM

Я пытаюсь использовать реализацию Keras LSTM для прогнозирования серии пар x, y в будущем. Пары x, y определяют местоположение в 2D плоскости. Я хотел бы предсказать им 60 шагов в будущее. У меня есть 36 тыс. Пар данных, которые я разделил на 30 тыс…
14 июл '17 в 14:39
2 ответа

Как интерпретировать веса в слое LSTM в Керасе

В настоящее время я тренирую рекуррентную нейронную сеть для прогнозирования погоды, используя слой LSTM. Сама сеть довольно проста и выглядит примерно так: model = Sequential() model.add(LSTM(hidden_neurons, input_shape=(time_steps, feature_count),…
17 мар '17 в 15:28
1 ответ

Керас - Нан в сводной гистограмме LSTM

Я написал модель LSTM с использованием Keras и предварительной активации LeakyReLU: # ADAM Optimizer with learning rate decay opt = optimizers.Adam(lr=0.0001, beta_1=0.9, beta_2=0.999, epsilon=1e-08, decay=0.0001) # build the model model = Sequentia…
1 ответ

lstm с переменной batch_size

Мы знаем, что во время обучения нам нужно предоставить feed_dict данные batch_size. Однако в последнюю эпоху количество данных меньше размера пакета. Как я могу это сделать? я пытаюсь использовать переменную batch_size, но я сталкиваюсь с некоторыми…
26 окт '16 в 00:59
0 ответов

Модель LSTM для анализа настроений

Я использую этот учебник: https://github.com/rvinas/sentiment_analysis_tensorflow, чтобы классифицировать короткие текстовые сообщения. В этом уроке прогноз сделан на ранее обученной модели, но я изо всех сил пытаюсь найти способ построить тестовые …
16 янв '18 в 20:41
0 ответов

Как BPTT работает в LSTM? Как определяется усеченный временной лаг?

В LSTM, как BPTT перемещается по временному шагу? Это усеченный BPTT? Если так, как сеть знает, как определить временную задержку усечения?
22 июн '18 в 02:47
0 ответов

Почему вывод Keras LSTM медленнее на jetson gpu, чем на jetson cpu?

Я проверил производительность вывода на JETSON. Я использовал следующий код. https://github.com/keras-team/keras/blob/master/examples/lstm_text_generation.py В результате о скорости вывода GPU LSTM: умозаключение: 0.08-0.17s CuDNNLSTM: вывод: 0,006-…
22 авг '18 в 08:39