Описание тега hadoop-plugins
Плагины для проекта Apache™ Hadoop™.
1
ответ
Веб-интерфейс Hadoop UI
У меня небольшая проблема. Мне нужно интегрировать веб-интерфейс Hadoop с нашим веб-приложением. Мне просто нужен интерфейс Hadoop, где мы можем запускать некоторые команды hadoop что-то вроде 1 cat hadoop dfs -cat <path>prints the file conten…
22 авг '14 в 06:38
1
ответ
Как собрать разъем MongoDB для последней версии hadoop (1.2.1)
Я пытаюсь создать соединитель MongoDB для Hadoop 1.2.1 со страницы инструкции montogdb ( https://github.com/mongodb/mongo-hadoop), но я получаю следующую ошибку. Следует отметить, что hadoop 1.2.1 не входит в список поддерживаемых версий. Я пытался …
04 сен '13 в 00:10
0
ответов
Задание не выполнено с большим объемом небольших данных: java.io.EOFException
Я столкнулся со странной проблемой, я получил задание MR куста, которое всегда было бы неудачным, если имеется большое количество входных файлов (например, 1500 входных файлов), но всегда было успешным, если входных файлов мало (например, 50 входных…
21 авг '14 в 06:18
1
ответ
Ошибка синтаксиса Apache Pig Latin при использовании SORT
Привет программисты окей? Я программировал и запускаю команду pig, которая возвращает мне синтаксическую ошибку в моем коде, и я не могу ее решить. Ниже я опубликую код и возникшую ошибку. Видимо ошибка происходит в синтаксисе строки 41, которая явл…
21 окт '14 в 00:41
2
ответа
ОШИБКА 1128: Не удается найти поле dryTemp
Мой поросенок запустил код температуры и мне выдавали ошибку, поместили код ниже и произошла ошибка, чтобы облегчить понимание моей проблемы. ошибка в строке 38 столбца 15, попытался удалить dryTemp, но также выдал другую ошибку. Код: --Load files i…
21 окт '14 в 23:35
1
ответ
Загрузка CSV с использованием пользовательского разрыва строки
У меня есть CSV следующим образом, где строка заканчивается "+++" вместо новой строки. Как загрузить CSV, сделав разрыв строки, где присутствует строка "+++"? VTS,51,0071,9739965515,NM,GP,INF01,V,19,072219,291014,0000.0000,N,00000.0000,E,07AE VTS,01…
04 ноя '14 в 06:58
2
ответа
Создание плагина для хранения на Apache Drill для HDFS
Я пытаюсь сделать плагин для хранения Hadoop (hdfs) и Apache Drill. На самом деле я запутался, и я не знаю, что установить в качестве порта для соединения hdfs://, и что установить для местоположения. Это мой плагин: { "type": "file", "enabled": tru…
31 авг '16 в 09:18
3
ответа
Как собрать плагин hadoop1.0.4 eclipse из файла build.xml?
Я должен написать программы MapReduce для Hadoop1.0.4 в Eclipse. Эта версия Hadoop не содержит плагин для затмения. Однако файл build.xml можно найти в $HADOOP_HOME/src/contrib/eclipse-plugin. Как мне сгенерировать или собрать плагин для eclipse из …
31 окт '12 в 17:29
0
ответов
Ошибка при выполнении командной строки Hive
Я получаю следующую ошибку при попытке выполнить интерфейс командной строки куста. Могу ли я узнать о несовместимых файлах Jar, вызывающих проблему и способ ее устранения? Exception in thread "main" java.lang.NoSuchFieldError: ALLOW_UNQUOTED_CONTROL…
30 июл '13 в 14:06
1
ответ
Как я могу скомпилировать собственный кодек Hadoop в libhadoop.so?
Я написал собственный кодек сжатия hadoop. Чтобы он работал с hadoop, мне нужно скомпилировать нативный (C-код) файл в libhadoop.so. Как мне этого добиться?
24 апр '12 в 09:45
3
ответа
Невозможно запустить Hadoop из затмения с указанием местоположения Hadoop в затмении (ошибка:NULL)
Я скачал Hadoop VM с сайта Yahoo и запустил Hadoop VM через проигрыватель VMware. Я не видел проблем. Как упоминалось в Yahoo, я использовал Eclipse Europa (v 3.3.1) и загрузил файл jar (hadoop-0.18.3-eclipse-plugin), чтобы включить плагин MapReduce…
01 окт '13 в 04:35
0
ответов
Как namenode распознает изменения в пространстве имен после контрольной точки
После контрольной точки в hadoop новый файл fsimage копируется обратно в Namenode, а предыдущие журналы редактирования усекаются. Мой вопрос заключается в том, как наменоде узнает о любых изменениях, сделанных после создания нового fsimage, потому ч…
23 апр '18 в 23:35
1
ответ
DatasetNotFoundException - salesforce2hadoop
Я использую библиотеку salesforce2hadoop для экспорта данных из salesforce в hadoop. Я использую приведенную ниже команду для того же. sudo java -jar salesforce2hadoop-assembly-1.0.jar init -u myUsername -p myPassword -b /home/nfsuser/imports/salesf…
06 апр '16 в 10:57
1
ответ
У меня есть tesseract-ocr и hadoop отдельно. Мне нужно их интегрировать
По моему проекту обработки изображений. Мне нужно, чтобы интегрировать Hadoop (параллельный процессор) с Tesseract (обработка изображений в TXT).
13 июн '13 в 06:22
1
ответ
Загрузка файла формата protobuf в скрипт pig с использованием loadfunc pig UDF
У меня очень мало знаний о свинье. У меня есть файл данных формата protobuf. Мне нужно загрузить этот файл в сценарий свиньи. Мне нужно написать LoadFunc UDF, чтобы загрузить его. скажем функция Protobufloader(), мой сценарий PIG будет A = LOAD 'abc…
11 авг '11 в 19:19
2
ответа
Можно ли использовать несколько банок, чтобы указать работу в hadoop?
У меня обычно есть общие / общие библиотеки и фактический код задания в разных файлах jar. Можно ли перекомпилировать только один файл JAR задания для выполнения команды hadoop hadoop jar asd? Если нет, то есть ли обходной путь для упрощения упаковк…
06 июн '12 в 03:37
0
ответов
Подключение Eclipse к Hadoop 2.7.3 (Eclipse-Hadoop-plugin-2.7.3.jar)
Я пытаюсь подключить Eclipse-Mars 1.0 к Hadoop 2.7.3, для которого мне нужен hadoop-eclipse-plugin-2.7.3.jar. Я очень старался, но мне не повезло найти эту банку. Может кто-нибудь указать мне эту версию jar и инструкции о том, как собрать jar на мое…
17 фев '17 в 06:23
1
ответ
Проблема с установкой Hadoop
После установки hadoop на виртуальный ящик Oracle с помощью Ubuntu все работает нормально. Но когда я запускаю localhost:50070 в браузере, я получаю исправное состояние namenode, но не параметр Legacy UI в правом нижнем углу, через который я могу пр…
28 сен '16 в 11:38
1
ответ
Hadoop с использованием C++ каналов: как вызвать Mapper.cleanup()
Используя C++ pipe api(1.2.0), как я могу получить вызов в Mapper.cleanup() после фазы map() маппера? В основном для каждого чанка я хочу сохранить свои записи в памяти во время фазы карты, а затем применить некоторую обработку позже. Любые советы п…
30 май '13 в 12:42
0
ответов
Как собрать eclipse-плагин для CDH4 ( 4.2.0)
Кто-нибудь знает, как создать eclipse-плагин для CDH4 ( 4.2.0)? Я гуглю это все утро и нашел только несколько советов о 4.1.2 или более старой версии. Мой кластер hadoop собран Cloudera Management, и последняя версия CDH - 4.2.0, я не знаю, как собр…
25 мар '13 в 05:32