Описание тега biginsights
IBM InfoSphere BigInsights brings the power of Hadoop to the enterprise. Apache Hadoop is the open source software framework, used to reliably manage large volumes of structured and unstructured data.
1
ответ
Разъем HDFS-GPFS для использования в Apache Spark
Есть ли возможность читать данные из IBM GPFS (Global Parallel Filesystem) в Apache Spark? Мое намерение состоит в том, чтобы использовать что-то вроде этого sc.textFile("gfps://...") вместо sc.textFile("hdfs://...") Средой, которая предназначена дл…
20 окт '17 в 12:59
1
ответ
Sqoop eval работает, но импорт sqoop выдает ошибку
Когда я запускаю sqoop eval, это дает мне вывод. Но когда я делаю sqoop import его выдача следующая ошибка Error: java.lang.RuntimeException: java.lang.RuntimeException: java.sql.SQLException: The Network Adapter could not establish the connection a…
08 окт '15 в 06:35
0
ответов
(Ошибка: не удалось найти или загрузить основной класс 1638) запрос через соединение JDBC/Thrift на HIVE (beeline)
Когда я запускаю запрос с помощью beeline (или такого инструмента, как Aginity для Hadoop, использующего соединение JDBC или Thrift), у меня возникает эта ошибка: org.apache.hadoop.hive.ql.exec.mr.MapRedTask at org.apache.hive.service.cli.operation.…
09 янв '19 в 15:16
1
ответ
Как удалить фрейм данных с BigR?
У меня есть датафрейм, созданный как таковой (из учебников по BigR): airfile <- system.file("extdata", "airline.zip", package="bigr") airfile <- unzip(airfile, exdir = tempdir()) airR <- read.csv(airfile, stringsAsFactors=F) # Upload the da…
29 апр '16 в 10:16
2
ответа
Hadoop не может установить редукторы> 1
Я использую Hadoop для университетского задания, и у меня работает код, но я столкнулся с небольшой проблемой. Я пытаюсь установить количество редукторов на 19 (что составляет 0,95 *, как и предполагается в документации). Однако, когда я просматрива…
16 май '12 в 11:26
1
ответ
IBM BigInsights (IBM Hadoop) против IBM Watson
В чем разница между IBM Watson и IBM Inforsphere BigInsights (IBM Hadoop)/Streams? Что Уотсон приносит на стол, что BigInsights не будет?
16 июн '15 в 22:21
1
ответ
Настройте IBM Open Platform с внешней базой данных Oracle
Я немного сбит с толку, когда пытаюсь установить кластер IBM Open Platform с одним узлом, используя базу данных Oracle в качестве СУБД. Во-первых, я понимаю, что часть Hadoop IBM Big Insights не является модифицированной версией соответствующей верс…
14 июн '16 в 15:27
1
ответ
Отчет Spark Hive ClassNotFoundException: com.ibm.biginsights.bigsql.sync.BIEventListener
Я пытаюсь запустить скрипт pyspark в BigInsights в Cloud 4.2 Enterprise, который обращается к таблице Hive. Сначала я создаю таблицу улья: [biadmin@bi4c-xxxxx-mastermanager ~]$ hive hive> CREATE TABLE pokes (foo INT, bar STRING); OK Time taken: 2…
21 дек '16 в 13:44
1
ответ
Ambari BigInsights Kafka не запускается
Что ж, похоже, я решил мою первую проблему с изображением BigInsights, не серьезную проблему, а о чем подумать. На моей странице служб браузера Ambari показывалось, что служба Kafka не запущена, я несколько раз пытался перезапустить ее, но, похоже, …
11 авг '15 в 14:43
2
ответа
Сообщение: секретная ошибка премьера RSA. ERRORCODE=-4499, SQLSTATE=08001
Я пытаюсь подключиться к BigSQL в кластере BigInsights on Cloud из записной книжки iPython в Bluemix Spark в качестве службы. Мой блокнот выглядит так: import os cwd = os.getcwd() with open('certificate', 'w') as f: f.write('''-----BEGIN CERTIFICATE…
06 июн '16 в 21:01
1
ответ
Вложенная конкатенация в BigSQL
Я пытаюсь объединить три поля в BigSQL. Я могу успешно соединить два поля с SELECT CONCAT(column1, column2) FROM table; но я не могу объединить три поля с этим (принимает только два аргумента). Я пытался вложенную конкатенацию через SELECT CONCAT(CO…
26 фев '15 в 20:22
1
ответ
Доступ к файлам gpfs через Java API/Python
Я новичок в IBM-GPFS. Как мы можем получить доступ к HDFS через Java API, сценарии Python. Есть ли подобный способ доступа к файлам GPFS? Пожалуйста, предложите мне решение.
18 сен '13 в 15:26
3
ответа
Получение параметров из BigInsights
Я разработал приложение Java и развернул его в BigInsights. Но мне пришлось дать некоторые параметры в коде. Как я могу получить их со страницы приложения BigInsights? Я добавляю поля ввода при публикации проекта BigInsights на вкладке параметров, н…
05 дек '13 в 09:01
1
ответ
Как записать данные в кадре данных в один файл.parquet (данные и метаданные в одном файле) в HDFS?
Как записать данные в кадре данных в один файл.parquet (данные и метаданные в одном файле) в HDFS? df.show() --> 2 rows +------+--------------+----------------+ | name|favorite_color|favorite_numbers| +------+--------------+----------------+ |Aly…
15 мар '17 в 07:36
1
ответ
Секретная ошибка администратора RSA при использовании webHDFS из BigInsights в облаке
Я пытаюсь выполнить пример свободы spark+oozie+bluemix в ветке OozieWorkflowSparkGroovyBluemixDeploy для базового кластера BigInsights for Apache Hadoop. Ошибка, которую я получаю, когда пытаюсь получить доступ к приложению из браузера: There was an…
12 авг '16 в 15:13
2
ответа
sqoop - подключайтесь к оракулу и импортируйте данные в HDFS в IBM BigInsights
Я хочу подключиться к моей базе данных (оракул 10g) и импортировать данные в HDFS, Я использую IBM Big Insight Platform. но когда я использую приведенную ниже команду: sqoop import --connect jdbc:oracle:thin://<IP>:1521/DB--username xxx --pass…
19 апр '16 в 10:47
1
ответ
Как я могу использовать python > 2.6.6 с поддержкой BigInsights в облачных кластерах Enterprise?
Версия Python с BigInsights в настоящее время 2.6.6. Как я могу использовать другую версию Python с моими искровыми заданиями, работающими на пряже? Обратите внимание, что пользователи BigInsights в облаке не имеют root-доступа.
18 дек '16 в 09:04
1
ответ
Hadoop mapreduce Ошибка: org.apache.hadoop.mapreduce.Counter
Я пытаюсь использовать счетчики в моей программе MapReduce, но всякий раз, когда я пытаюсь увеличить его, я получаю следующую ошибку: 14/04/18 12:22:51 INFO mapred.JobClient: Task Id : attempt_201404172237_0052_m_000003_0, Status : FAILED Error: org…
18 апр '14 в 10:48
3
ответа
BigSheets - java.io.IOException: java.lang.reflect.UndeclaredThrowableException
Я не могу просматривать данные с помощью BigSheets на BigInsights on Cloud. Когда я выбираю файл и меняю тип Reader, я получаю исключение (см. Скриншот ниже). Ранее я был в состоянии просматривать данные в порядке.
02 май '16 в 12:56
1
ответ
java.lang.ClassNotFoundException: не удалось найти источник данных: com.cloudant.spark. в кластере IBM BigInsights
Я создал экземпляр службы IBM BigInsights с кластером hadoop из 5 узлов (включая Apache Spark). Я пытаюсь использовать SparkR для подключения к базе данных Cloudant, получения некоторых данных и некоторой обработки. Я запустил оболочку SparkR (терми…
05 авг '16 в 19:16