Доступ к веб-интерфейсу потоковых наборов на другом узле кластера, кроме установленного, в какую файловую систему он "смотрит"?
У меня кластер машин хостинг hadoop (MapR)
и установить наборы потоков на одном из узлов (скажем, node002), следуя документации RPM. Тем не менее, я получаю доступ к веб-интерфейсу для data collector
с другого узла, узла001.
Мой вопрос: когда я указываю пути к файлам (например, каталог-источник), на какую файловую систему будет ссылаться веб-интерфейс? Например. если я поставлю каталог происхождения как /home/myuser/mydata
будет ли конвейер, созданный в веб-интерфейсе, искать этот каталог в node001 или node002? Новое в использовании потоковых наборов, поэтому более подробный ответ будет принята. Благодарю.
** В конечном итоге я спрашиваю об этом, потому что в настоящее время я получаю "FileNotFound"
а также "permission denied"
ошибки при попытке следовать руководству по документации, и я пытаюсь отладить ситуацию.
1 ответ
На форумах сообщества streamsets: это будет путь к локальному файлу на компьютере, на котором запущен данный экземпляр SDC.
FileNotFound
и ошибки разрешения связаны с тем, что пользователь по умолчанию для службы sdc - это пользователь с именем sdc
, Все еще работаем над тем, как исправить эту часть, но можно создать работоспособный прототип, настроив права на чтение и запись для соответствующих каталогов, чтобы разрешить публичный доступ (по-прежнему нужно работать над этой частью, но это отвечает на опубликованный вопрос).