Описание тега outputformat

For questions relating to the format of an output from a hadoop reducer
0 ответов

Mapreduce Custom TextOutputFormat - Странные символы NUL, SOH и т. Д.

Я реализовал пользовательский формат вывода для преобразования пар ключ-значение в формат Json. public class JSONOutputFormat extends TextOutputFormat<Text, IntWritable> { @Override public RecordWriter<Text, IntWritable> getRecordWriter(…
31 авг '15 в 02:27
2 ответа

Как я могу использовать MultipleoutputFormai в Hadoop 0.20?

Я работаю с Hadoop 0.20 и хочу иметь два выходных файла вместо одного выходного. я знаю это MultipleOutputFormat не работает в Hadoop 0.20. Я добавил jar-файл hadoop1.1.1-core в путь сборки моего проекта в Eclipse. Но это все еще показывает последню…
25 сен '13 в 05:38
1 ответ

Как записать необработанные аудиофайлы AAC в Android с помощью MediaRecorder? AAC_ADTS не работает

Я использую Android MediaRecorder для записи аудиофайлов в кодировке AAC. Установка формата вывода в MPEG-4 работала довольно хорошо. Но поскольку мой аудиоплеер не поддерживает ни MPEG-4, ни 3GP, я попытался получить необработанные файлы AAC, испол…
04 фев '14 в 12:15
1 ответ

ZipFileOutputFormat не выдает выходные данные в формате.zip mapreduce

У меня есть приложение, где я читаю HBase и записываю записи в файлы. Окончательный вывод должен быть в сжатом формате.zip, а не в формате, поддерживаемом hasoop. Для этого я использовал пользовательский ZipFileOutputFormat для получения записей в.z…
27 фев '17 в 06:10
1 ответ

Могу ли я использовать f:convertNumber с h:outputFormat

У меня есть составной компонент, и это фрагмент из него. <h:outputFormat id="output" value="{0} / {1} / {2}" rendered="#{cc.attrs.readOnly}" styleClass="#{cc.attrs.styleClass}"> <f:param value="#{empty cc.attrs.value1 ? '-' : cc.attrs.value…
15 янв '15 в 13:57
0 ответов

Hadoop MultipleOutputFormat.generateFileNameForKeyValue со многими ключами

Я пытаюсь играть с MultipleOutputFormat.generateFileNameForKeyValue() . Идея состоит в том, чтобы создать каталог для каждого из моих ключей. Это код: static class MyMultipleTextOutputFormat extends MultipleTextOutputFormat<Text, Text> { @Over…
09 сен '13 в 07:52
1 ответ

Сохранить результат h:outputFormat в переменную

В настоящее время я успешно получаю ярлыки из своего пакета ресурсов через <h:outputFormat value="#{labels['key']}"> <f:param value="my param1"/> <f:param value="my param2"/> </h:outputFormat> Но как мне сохранить его в перем…
11 апр '14 в 06:09
1 ответ

Вывод результатов в формате conll (POS-тегирование, тег stanford pos)

Я пытаюсь использовать Stanford POS-tagger, я хочу спросить, можно ли проанализировать (на самом деле достаточно только pos-тега) английский текст и вывести результаты в формате conll. Есть ли такая опция? Я использую полную версию 3.2.0 Stanford po…
1 ответ

Запись выходных данных паркета в потоковом задании Hadoop

Есть ли способ записать текстовые данные в файл паркета с помощью потоковой передачи hadoop с использованием Python. По сути, у меня есть строка, отправляемая из IdentityMapper, которую я хочу сохранить в виде файла паркета. входы или примеры были б…
02 июн '16 в 19:48
1 ответ

Как установить выходное имя редуктора в Hadoop?

У меня есть работа, которая будет излучать 900000 различных результатов. каждый из них должен быть идентифицирован определенным уникальным именем... это "имя", которое я имею на mapOutputKey. Как мне сделать это в карте-уменьшить?
10 окт '14 в 21:04
1 ответ

Как получить множественный выход в hadoop

Я новичок в Hadoop, и теперь мне нужно обработать входной файл. Я хочу обрабатывать каждую строку и вывод должен быть один файл для каждой строки. Я занимаюсь серфингом в интернете и нашел MultipleOutputFormat и генерирую FileNameForKeyValue. Но бол…
19 май '13 в 17:25
1 ответ

Использование CqlOutputFormat для оператора INSERT

Я довольно новичок в Кассандре. Я использую hadoop для массовой загрузки данных в кластер cassandra с помощью CqlOutputFormat. Я не могу найти достаточно примеров в интернете, чтобы адаптировать его к своему случаю. Я специально использую его для вс…
18 мар '15 в 15:49
1 ответ

Добавить только значение времени в поле ReportInfo для активных отчетов?

Я пытаюсь добавить время для отчета в разделе сценария, как это using GrapeCity.ActiveReports; public string OutputFormat {get; set;} public void PageHeader_Format() { this.ReportInfoTime.OutputFormat = "hh:mm tt"; this.ReportInfoTime.Value = System…
02 мар '17 в 15:04
1 ответ

Как добавить конвертер в параметризованные сообщения в JSF 1.2?

Я ищу способ преобразования моих параметров в параметризованный текст на странице XSHTML JSF 1.2. Допустим, у меня есть это параметризованное сообщение в моем messages.properties (пожалуйста, игнорируйте глупость этого примера): EXAMPLE_TEXT=Right n…
1 ответ

Как отфильтровать ключи или значения в Hadoop map/ уменьшить выходной файл задания?

Как правило, Hadoop map/reduce job создает список пар ключ-значение, которые записываются в выходной файл задания (используя OutputFormat учебный класс). В редких случаях полезны как ключи, так и значения, обычно либо ключи, либо значения содержат н…
26 ноя '12 в 22:36
2 ответа

Класс не найден исключение при использовании пользовательского формата вывода для hadoop Map Reduce

Я пытаюсь запустить работу по сокращению карты. Я создал исполняемый файл jar, используя eclipse, и мой класс входного формата и класс выходного формата находятся в одном пакете с классом, который запускает задание. Все они включены в банку. Я устан…
1 ответ

Формат Hadoop Custom Output, когда заканчиваются все редукторы?

Я создаю собственный формат вывода для hadoop, и мне было интересно, есть ли способ в формате вывода узнать, когда все редукторы (RecordWriters) завершены? Чтобы узнать, что один RecordWriter завершен, можно использовать метод close RecordWriter, но…
11 ноя '14 в 01:43
1 ответ

Могу ли я создать файл последовательности, используя фреймы данных spark?

У меня есть требование, в котором мне нужно создать файл последовательности. Прямо сейчас мы написали пользовательский API поверх api hadoop, но так как мы движемся в spark, мы должны достичь того же, используя spark.Can это может быть достигнуто с …
2 ответа

AWK - замена значения выбранного столбца разрушает формат вывода

У меня есть файл.csv в следующем формате.id|name|date Я использую следующую команду Awk, чтобы изменить определенный столбец в строке, и это работает.awk -F "|" '{$"'"$col"'"="'"$val"'";}1' filename.csv Я хочу сохранить вывод, однако формат уничтоже…
20 мар '16 в 13:14
0 ответов

Переопределение h:outputFormat

Я хотел бы расширить функциональность h:outputFormat JSF (2.2) тег или компонент. Я хотел бы передать параметры по имени, а не по порядку, например: <h2:outputFormat value="This is a ${code} text."> <f:param name="code" value="sample" />…
25 сен '14 в 11:23