Flume morphline interceptor: для очистки данных

Question

У меня есть простой структурированный ввод в реальном времени. Но он также содержит мусор в значениях, например, в некоторых местах '@' или шестнадцатеричные символы.

Как я могу использовать Morphline Flume Interceptor для очистки данных?

Моя раковина здесь будет hbase.

Answer 1

Похоже, вы можете использовать Morphline over flume для ваших нужд. В целом, Morphline предлагает несколько основных функций для анализа и преобразования данных. Кроме того, вы можете создать свою собственную команду Morphline, а затем использовать свой собственный метод в своем конфиге morphline.