Описание тега combiners

3 ответа

Javascript Array объединяет элементы, чтобы получить уникальный массив

Предположим, у меня есть массив JS, подобный этому: [ { "lat": 49.26125, "lon": -123.24807, "weight": 120 }, { "lat": 49.26125, "lon": -123.24807, "weight": 80 }, { "lat": 49.26125, "lon": -123.24807, "weight": 160 }, { "lat": 49.26229, "lon": 23.24…
28 мар '17 в 05:56
3 ответа

Объединить колонку с NA

У меня есть фрейм данных data <- data.frame('a' = c('A','B','C','D','E'), 'x' = c(1,2,NA,NA,NA), 'y' = c(NA,NA,3,NA,NA), 'z' = c(NA,NA,NA,4,NA)) Это выглядит так: a x y z 1 A 1 NA NA 2 B 2 NA NA 3 C NA 3 NA 4 D NA NA 4 5 E NA NA NA Я ожидаю получ…
30 авг '16 в 21:09
3 ответа

Лучший способ объединить очень большие текстовые файлы

У меня есть несколько текстовых файлов, которые я хотел бы объединить в один. Размер папки, содержащей все отдельные текстовые файлы, составляет почти 8 ГБ. Я попробовал следующее в powershell: cat example*.txt | sc allexamples.txt но как только раз…
04 авг '16 в 09:39
1 ответ

Как связать файлы JavaScript в PhpStorm

Как объединить 2 или более файлов JavaScript в один файл в PhpStorm (ИЛИ WebStorm). Я искал и нашел только этот результат, но это не ответ: Сокращение JavaScript Я хочу что-то вроде этого: плагин Visual studio Bundler & Minifier.
02 июл '17 в 14:08
3 ответа

Как я могу узнать, является ли задача редуктором или объединителем во время выполнения в Hadoop?

Если операция, выполняемая с MapReduce, не является коммутативной и ассоциативной, объединитель не может быть таким же, как редуктор. Например, при вычислении среднего значения сумматоры суммируют значения для ключа, а редуктор суммирует, а затем де…
13 авг '12 в 04:47
1 ответ

Сравнивая пары данных, объединяя только иногда

Я использую Spark. у меня есть JavaPairRDD формы <Documentname, Tuple2<Phrase, URL>>, Я в основном проверил, есть ли фраза на странице, указанной в URL, что приводит к приведенной выше структуре. Теперь у меня есть несколько накладывающи…
14 мар '15 в 22:21
1 ответ

Почему в Hadoop Reduce_input_records меньше, чем comb_output_records?

Я запускаю пример WordCount с помощью сумматора. Вот результат работы: 13/10/07 22:32:38 INFO mapred.JobClient: Map input records=20111076 13/10/07 22:32:38 INFO mapred.JobClient: Reduce shuffle bytes=467280 13/10/07 22:32:38 INFO mapred.JobClient: …
08 окт '13 в 18:11
2 ответа

PHP Объединить два массива для получения ожидаемого O / P

У меня есть массив со значениями [{ "id": "17", "pf_label": "Gender" }, { "id": "18", "pf_label": "Age" }, { "id": "12", "pf_label": "Address Line" } ] и у меня есть другой массив [{ "": "", "17": "male", "18": "27" }, { "": "", "17": "female", "18"…
09 июл '18 в 12:36
1 ответ

Есть 3 матрицы одинаковых размеров - я хочу получить наибольшее значение каждой ячейки из трех разных матриц

В основном у меня 3 матрицы одинаковых размеров. Они состоят только из значений 0, 1, 2,3. Я хотел бы создать новую матрицу, которая принимает наибольшее значение из каждой из соответствующих матриц. Например, если первая строка матриц выглядит след…
15 июн '18 в 23:06
0 ответов

Почему входные записи объединителя больше, чем выходные записи сопоставления?

Combiner работает над выходными записями маппера. Если выходные записи сопоставления поступают в объединитель, то почему входные записи моего объединителя являются более чем выходными записями сопоставления? Я получил эти 80 записей дополнительно. Я…
29 мар '16 в 14:36
1 ответ

Spark тасует большое количество данных

Я написал искровую работу. Который выглядит ниже: public class TestClass { public static void main(String[] args){ String masterIp = args[0]; String appName = args[1]; String inputFile = args[2]; String output = args[3]; SparkConf conf = new SparkCo…
08 мар '17 в 14:01
2 ответа

Как объединить два значения 'count' из разных таблиц (2 столбца, НЕ объединение)

Я хочу получить количество добавленных записей пользователем в 2 таблице. например, у меня есть список пользователей (таблица STF), и я хочу знать, сколько продуктов создал пользователь (в таблице PV1) и сколько продуктов он продал (в таблице dpq), …
13 фев '18 в 12:21
3 ответа

C# Как объединить некоторые выражения Linq в цикле

Я хочу объединить некоторые выражения Linq, поэтому я помогу из следующих статей: http://www.c-sharpcorner.com/uploadfile/04fe4a/predicate-combinators-in-linq/ и http://thanhhh.blogspot.com/2011/10/linq-to-entities-predicatebuilder-and.html и у меня…
25 июл '14 в 11:15
1 ответ

Почему часть моих данных поступает в редуктор напрямую, не входя в сумматор

Я использую версию 0.20.0 Hadoop. Я успешно установил класс комбайнера. И моя программа работает успешно. Однако я обнаружил, что около 5% моих данных не поступают в сумматор после выхода из картографа, эти данные поступают в редуктор напрямую. Не з…
05 апр '13 в 23:04
3 ответа

В чем разница между фазой перемешивания и фазой объединителя?

Я довольно запутался насчет MapReduce Framework. Я запутался, читая об этом разные источники. Кстати, это моя идея работы MapReduce 1. Map()-->emit <key,value> 2. Partitioner (OPTIONAL) --> divide intermediate output from mapper and assi…
06 окт '16 в 10:09
1 ответ

Я нахожу менее похожим на комбинатор / компилятор для JavaScript

Есть ли какой-либо метод или решение для компиляции и комбинации JavaScript, как с lessc? Мне нужна команда cli для объединения javascripts в один файл. Может быть, есть какое-нибудь приложение для nodejs? Ранее я использовал CodeKit на Mac, и это м…
3 ответа

Сократить список префиксов добавления строки только до последнего элемента, используя потоки Java 8

Как я могу уменьшить или собрать список строк, разделенных запятыми и с префиксом "и" только до последнего элемента, использующего потоки Java 8? например. List<String> ls = Arrays.asList("tom","terry","john","kevin","steve"); String result = …
09 авг '16 в 22:57
1 ответ

Помещение комбинера для использования в mapreduce вторичной сортировке

Я реализовал вторичную сортировку для моего приложения. File-1 File-2 File-3 ------ ------ ------ name,pos,r,value name,pos,r,value name,pos,r,value aa,1,0,123 aa,2,1,1 aa,3,1,11 bb,1,0,234 aa,2,2,34 aa,3,2,12 aa,2,3,55 aa,3,3,13 bb,2,1,99 bb,3,1,15…
22 ноя '17 в 09:35
1 ответ

Объединить несколько словарей по ключам и значениям?

После часов и предложений из других постов, я не мог решить свою проблему. Я должен управлять многими словарями (до сих пор единственный способ, которым я знаю, чтобы работать). Для всех четырех словарей, которые я хочу объединить, три из них имеют …
20 ноя '16 в 23:41
1 ответ

Python: Как добавить два списка без повторяющихся значений для того же ключа, что и значение этого ключа?

У меня есть этот файл: domain|nsservers virus.am.|['ns101.yourhostservice.com.', 'ns102.yourhostservice.com.'] rochemme.ae.|['auhans1.ecompany.ae.', 'auhans2.ecompany.ae.', 'dxbans1.ecompany.ae.', 'dxbans2.ecompany.ae.'] virus.am.|['ns101.yourhostse…
07 окт '15 в 09:10