Доступ к веб-интерфейсу потоковых наборов на другом узле кластера, кроме установленного, в какую файловую систему он "смотрит"?

У меня кластер машин хостинг hadoop (MapR) и установить наборы потоков на одном из узлов (скажем, node002), следуя документации RPM. Тем не менее, я получаю доступ к веб-интерфейсу для data collector с другого узла, узла001.

Мой вопрос: когда я указываю пути к файлам (например, каталог-источник), на какую файловую систему будет ссылаться веб-интерфейс? Например. если я поставлю каталог происхождения как /home/myuser/mydata будет ли конвейер, созданный в веб-интерфейсе, искать этот каталог в node001 или node002? Новое в использовании потоковых наборов, поэтому более подробный ответ будет принята. Благодарю.

** В конечном итоге я спрашиваю об этом, потому что в настоящее время я получаю "FileNotFound" а также "permission denied" ошибки при попытке следовать руководству по документации, и я пытаюсь отладить ситуацию.

1 ответ

Решение

На форумах сообщества streamsets: это будет путь к локальному файлу на компьютере, на котором запущен данный экземпляр SDC.

FileNotFound и ошибки разрешения связаны с тем, что пользователь по умолчанию для службы sdc - это пользователь с именем sdc, Все еще работаем над тем, как исправить эту часть, но можно создать работоспособный прототип, настроив права на чтение и запись для соответствующих каталогов, чтобы разрешить публичный доступ (по-прежнему нужно работать над этой частью, но это отвечает на опубликованный вопрос).

Другие вопросы по тегам