Описание тега cascading

Каскадирование - это API запросов, планировщик запросов и планировщик процессов, используемые для определения и выполнения сложных, не масштабируемых и отказоустойчивых рабочих процессов обработки данных в кластере Hadoop.
1 ответ

Collection_select сохраняет идентификатор вместо имени

Всего у меня 4 модели: марка, год и модель. Это каскадные выпадающие списки, и их данные извлекаются из их баз данных. Я пытаюсь создать представление "Лодка" и позволить пользователю сохранить его в модели "Лодка". Но вместо сохранения имен в модел…
15 апр '15 в 21:31
3 ответа

Какая библиотека является самой зрелой для построения конвейера аналитики данных в Java/Scala для Hadoop?

В последнее время я нашел много вариантов, которые интересны в их сравнении главным образом зрелостью и стабильностью. Хруст - https://github.com/cloudera/crunch Scrunch - https://github.com/cloudera/crunch/tree/master/scrunch Каскадирование - http:…
24 фев '12 в 08:59
1 ответ

Apache Spark или каскадный фреймворк?

Я не совсем понимаю, когда использовать Cascading Framework и когда использовать Apache Spark. Каковы подходящие варианты использования для каждого? Любая помощь приветствуется.
11 авг '14 в 10:04
1 ответ

Можно ли получить доступ к базовому org.apache.hadoop.mapreduce.Job из задания Scalding?

В моей работе Scalding у меня есть такой код: import org.apache.hadoop.mapreduce.lib.input.FileInputFormat class MyJob(args: Args) extends Job(args) { FileInputFormat.setInputPathFilter(???, classOf[MyFilter]) // ... rest of job ... } class MyFilter…
0 ответов

Почему лучше указывать больший поток в крайнем левом аргументе CoGroup?

Я смотрю на каскадное руководство пользователя. Один из разделов говорит При соединении двух потоков через канал CoGroup попытайтесь поместить больший поток в крайний левый аргумент CoGroup. Причина этого заключается в том, что объединение нескольки…
02 ноя '17 в 06:19
1 ответ

Пример каскадного группового

Мне недавно пришлось сделать каскадную работу. У меня никогда не было опыта работы с распределенными системами, поэтому у меня возникли проблемы с пониманием того, как заставить это работать. У меня есть файл конфигурации, который имеет кучу ведер: …
06 июн '16 в 19:12
4 ответа

CascadeType vs FetchType

Хотелось бы узнать, в чем разница между CascadeType и FetchType в Hibernate? Они кажутся очень похожими, но я думаю, они не взаимозаменяемы, верно? Когда их использовать? Могут ли они использоваться одновременно?
09 июл '15 в 13:21
1 ответ

Параметр не может перечислить все возможные значения

My Crystal Report использует одну команду для создания каскадного параметра для warehouse.code: SELECT BILLLINES.RECDATE, ARTICLES.NAME ARTNAME, BILLLINES.QUANTITY QTY, ARTICLES.QTSTOCK,WAREHOUSE.NAME WHNAME,DOCTYPE.AKEY, WAREHOUSE.CODE,DOCTYPE.DESC…
05 окт '16 в 20:09
1 ответ

Перебрать значения в richPipe: ошпаривание

Я пытаюсь решить проблему, в которой я должен пройтись по всем значениям в pipe. Чтобы смоделировать мою проблему, я объясню через примерную проблему Input file : number 1 2 3 4 Output should be number sumOfSmaller 1 0 2 1 3 3 4 6 Поэтому для каждог…
22 янв '16 в 21:57
3 ответа

Запустите простое каскадное приложение в локальном режиме.

Я новичок в Cascading/Hadoop и пытаюсь запустить простой пример в локальном режиме (то есть в памяти). Пример просто копирует файл: import java.util.Properties; import cascading.flow.Flow; import cascading.flow.FlowConnector; import cascading.flow.F…
25 сен '12 в 18:30
2 ответа

Ошибка примера подсчета слов в учебном пособии

Сейчас я учусь каскадированию. Сейчас я смотрю второй учебник на его официальном сайте, который посвящен примеру Work Count. Я копирую код из него и пытаюсь запустить, он всегда дает мне следующие ошибки: Exception in thread "main" cascading.flow.pl…
19 ноя '13 в 18:45
1 ответ

Как принудительно включить редуктор в каскадном режиме?

Получить некоторые из преимуществ можно только с помощью редукторов, а не картографов.
11 апр '13 в 15:12
1 ответ

Вывод Scalding TypedPipe в SequenceFile в нескольких каталогах на основе одного из полей

Я использую Scalding в Hadoop, у меня есть большой набор данных в форме TypedPipe, который я хочу выводить порциями на основе одного из полей данных. Например, данные <category, field1, field2>и я хочу, чтобы данные для каждой категории сохран…
10 май '15 в 10:08
1 ответ

Каскадные множественные отношения

У меня довольно распространенный сценарий, у меня есть две таблицы, которые я хотел бы связать вместе, в частности, Страна и Язык. Я указал мои отображения следующим образом: public LanguageMapping() { Table("Languages"); Id(x => x.Id, "LANG_ID")…
12 июн '14 в 14:43
0 ответов

Kendo Filtering не будет работать на каскадном ComboBox

Я пытаюсь сделать Client Filtering на Cascading ComboBox в Kendo но кажется, что всякий раз, когда я делаю Cascading ComboBox Client Filtering не будет работать, но когда я делаю простой ComboBox Client Filtering буду работать. Что-то не так с моим …
22 фев '16 в 04:07
0 ответов

Каскадное чтение паркетных файлов, выведенных искрой

Так что у меня есть программа spark, которая вывела несколько файлов паркет part-r-00000-4b602595-62c5-4571-b3c6-0df335ffd2da.gz.parquet затем я использую Cascading для чтения этих файлов паркета (эти Cascading код будет преобразован в spark, но сей…
09 ноя '16 в 19:01
1 ответ

Чтение данных с FTP-сервера в Hadoop/Cascading

Я хочу прочитать данные с FTP-сервера. Я предоставляю путь к файлу, который находится на FTP-сервере, в формате ftp: // Имя пользователя: Пароль @ хост / путь. Когда я использую программу преобразования карт для чтения данных из файла, она работает …
06 авг '15 в 14:12
1 ответ

Свойство DropdownList SelectedValue не принимает значение во время операции редактирования

У меня есть каскад dropdownlist внутри gridview который содержит 5 столбцов, которые являются ItemsType, ItemList, UnitPrice, Количество и Итого. Выбор ItemsType в первом dropdownlist будет заполнять элементы во 2-м dropdownlist т.е. ItemList, котор…
09 янв '15 в 16:06
1 ответ

Какие существуют инструменты для сравнительного анализа каскадных операций в Hadoop?

Мне дали многошаговую каскадную программу, которая работает примерно в десять раз больше времени, чем эквивалентное задание M/R. Как мне выяснить, какой из шагов выполняется медленнее всего, чтобы я мог выбрать его для оптимизации?
03 июн '13 в 15:50
0 ответов

Каскадная вставка для mongodb

(После поиска в Google, чтение SOF, все еще с вопросом) Предположим, у нас есть документ "a", имеющий массив документов "b". Теперь, используя концепцию обещания.then(), я мог бы сохранить в "a", только если сохранение в "b" прошло нормально. Что, е…
04 апр '17 в 01:20