Описание тега hama
Apache Hama - это чисто вычислительная среда BSP (Bulk Synchronous Parallel) поверх HDFS (Hadoop Distributed File System) для массовых научных вычислений, таких как матричные, графические и сетевые алгоритмы.
1
ответ
Подходит ли Apache Hama для построения дерева решений?
В настоящее время я внедрил в Hadoop фреймворк Google для построения деревьев решений (также известный как PLANET). Он начинается с одной вершины, и с сокращением заданий карты вы добавляете все больше и больше, пока дерево не будет полностью постро…
10 окт '12 в 17:22
1
ответ
Исключение в Хама БСП
Моя хама выдает следующее исключение на этапе разделения входных данных перед тем, как фактически запустить мое задание BSP. Могу ли я узнать, каковы возможные причины этого исключения? Любые предложения о том, как узнать первопричину, приветствуютс…
06 ноя '13 в 10:01
0
ответов
Умножение больших матриц с использованием Apache Hama
Я пытаюсь умножить плотную матрицу A для ее транспонирования A'. Матрица составляет около 2 миллионов строк и 4 сотни столбцов. Я реализовал умножение в алгоритме преобразования hadoop, но оно выполняется слишком медленно из-за нелокальности задания…
26 фев '14 в 11:39
1
ответ
Где я могу получить Apache Hama-0.6.2 или более старую версию HAMA?
Кто-нибудь может дать мне какую-нибудь ссылку на apache hama 0.6.2 или более раннюю версию? Я получаю 0.6.3 только на официальном сайте. Но мне нужны более ранние версии
14 фев '14 в 11:44
1
ответ
DryadOpt (библиотека для параллельного ветвления и связывания) - доступность
Я пытаюсь реализовать параллельную ветвь и связанную BFS. Я заинтересован в использовании DryadOpt, который работает поверх Dryad LinQ. Кто-нибудь получил DryadOpt. Я знаю, что мы можем получить академическую версию DryadLinQ, и она также присутству…
30 окт '12 в 19:12
0
ответов
Как получить результат, сохраненный в счетчике от BSPJob Hama?
Как и в Hadoop Mapreduce, в Hama также есть счетчики, как описано в этой ссылке. В hadoop mapreduce получение значения Counter так же просто, как показано ниже с использованием функции getCounters(): long value = job.getCounters().findCounter(SomeEn…
05 ноя '13 в 06:40
0
ответов
Не удалось запустить примеры Apache Hama
Я установил HDFS с одним узлом и локальный режим Apache Hama 0.7.1, и установка прошла успешно. Но я не могу проверить это, запустив любой из приведенных примеров, например, запуск PiEstimator: $ $HAMA_HOME/bin/hama jar hama-examples-0.7.1.jar pi 18…
03 апр '18 в 20:40
1
ответ
Есть ли у Apache Hama, как Hadoop Mapreduce, страница мониторинга?
У трекера работы Hadoop mapreduce есть порт мониторинга на его порту 50030, но когда я попытался открыть браузер с моим узлом Hama BSPMaster на его сервисном порту (для которого я установил 40000), кажется, что у Hama такой страницы мониторинга нет.…
15 окт '13 в 22:59
0
ответов
Первый поиск в Хаме
Я делаю проект в Apache hama для реализации поиска в ширину и сталкиваюсь с проблемой при разбиении входного графа. Кто-нибудь может предложить метод, чтобы сделать то же самое? public static class MinIntCombiner extends Combiner<IntWritable> …
24 мар '15 в 09:39
1
ответ
Apache Hama на Амазонке Эластичный MapReduce
Я пытаюсь запустить Apache Hama на Amazon Elastic MapReduce, используя скрипт https://github.com/awslabs/emr-bootstrap-actions/tree/master/hama. Тем не менее, при попытке с одним главным узлом и двумя подчиненными узлами, peer.getNumPeers() в коде B…
03 окт '16 в 04:31
2
ответа
Каковы основные различия между Mapreduce и Apache's hama?
Привет, мне трудно сравнивать mapreduce с hama, я понимаю, что hama использует эту объемную синхронную параллельную модель и что рабочие узлы могут связываться друг с другом, тогда как в apoop apoop рабочие узлы сообщают только верный namenode? Если…
03 май '14 в 21:26
1
ответ
Как запустить мой исходный код Java для Apache hama из терминала
У меня установлен Apache Hama, и я могу вызвать его из Eclipse, и он работает нормально. Как я мог запустить то же самое из терминала Unix. Когда я бегу hama SSSP.java Я получаю ошибку Exception in thread "main" java.lang.NoClassDefFoundError: SSSP/…
08 май '14 в 16:28
1
ответ
Раздел выполнения во время выполнения этой задачи в Hama BSP
Я столкнулся со следующей проблемой при запуске задания BSP hama. Это исключение возникает, когда hama пытается загрузить и разбить входные данные, прежде чем он фактически запустит мой собственный код. Это известная проблема, обсуждаемая на некотор…
18 ноя '13 в 07:34
0
ответов
Теория гадупов и графов
Кто-нибудь когда-либо реализовывал алгоритмы центральности, центральности между центральностью, центральности близости и т. Д. В Hadoop Giraph или Hama? Или, скорее, кто-нибудь когда-либо распараллеливал вычисление метрик на ориентированных взвешенн…
30 май '13 в 10:18
0
ответов
Масштабируемость кластера Apache hama
Я программирую для Apache Hama, используя API графа Hama. У меня проблема с масштабируемостью при запуске моей программы в кластере. Проблема в том, что когда я увеличиваю количество машин в кластере, я ожидаю, что у меня будет меньше время выполнен…
05 янв '14 в 16:45
0
ответов
Невозможно использовать apache hama(установить) в Ubuntu 12.04 LTS
Это файл конфигурации, который у меня есть (hama-site): <configuration> <property> <name>bsp.master.address</name> <value>local</value> </property> <property> <name>fs.default.name</name> &…
25 авг '13 в 18:45
0
ответов
Внедрите поиск в ширину с помощью Hama
Я провел некоторое исследование, и мне кажется, что мне не хватает одной небольшой части. Я понимаю, как работает поиск в ширину, но я не понимаю, как разделить узлы, чтобы они могли вычисляться параллельно с использованием hama. способ сделать это?
24 мар '15 в 16:35
1
ответ
Как обработать большой файл в Hadoophadoop
Это вопрос нуби У меня есть настройка hadoop и я думаю об использовании Giraph или Hama для вычислений на основе графа. У меня большой файл в форме 3 4 3 7 3 8 5 6 где каждый столбец обозначает вершины, а каждая строка обозначает ребра. Для обычных …
12 июн '14 в 02:58
0
ответов
Внутренняя работа Spark - Связь / Синхронизация
Я совершенно новичок в Spark, но уже имею опыт программирования в модели BSP. В модели BSP (например, Apache Hama) мы должны самостоятельно обрабатывать все коммуникации и синхронизацию узлов. Что хорошо с одной стороны, потому что у нас есть более …
06 фев '16 в 12:32
1
ответ
apache hama на EC2 через whirr 0.8
Я пытаюсь взглянуть на Apache Hama, и я следовал инструкциям на http://hama.apache.org/hama_on_clouds.html и скачал whirr 0.8.2, но в этой версии в hama-ec2.properties нет никаких свойств. Рецепты папок, поэтому я не могу попробовать. Есть ли причин…
20 фев '14 в 21:28