Описание тега cloudera-cdp
1
ответ
Чтение / запись с помощью Nifi в Kafka в публичном облаке CDP Cloudera Data Platform
Nifi и Kafka теперь доступны в Cloudera Data Platform, публичном облаке CDP. Нифи отлично разговаривает со всем, а Kafka - это основная шина сообщений, я просто подумал: Каковы минимальные шаги, необходимые для производства / потребления данных в Ka…
17 июл '20 в 17:57
0
ответов
Драйвер Hive vs Impala JDBC для CDP 7.1
Недавно мы перешли с платформы HDP 2.x на платформу CDP 7.x. Теперь мы переносим наши приложения (java), чтобы они были совместимы с CDP. Поскольку CDP 7.x использует версию Hive 3.1, в синтаксис и таблицы внесены некоторые изменения. Я читал, что н…
18 фев '21 в 18:39
1
ответ
Невозможно создать управляемую таблицу улья после миграции Hortonworks (HDP) на Cloudera (CDP)
Мы тестируем наши приложения Hadoop в рамках перехода с Hortonworks Data Platform (HDP v3.x) на Cloudera Data Platform (CDP) версии 7.1. Во время тестирования мы обнаружили приведенную ниже проблему при попытке создать управляемую таблицу улья. Посо…
13 апр '21 в 10:26
1
ответ
Подключите HBase через Knox, используя HBase Java Client на CDP
Мне нужно подключиться к HBase через Knox, используя HBase Java Client. У меня есть следующие сведения о Ноксе Knox_Url: https://knox-host:port/gateway/cdp-proxy-api/hbase Username: knox_user_name Password: knox_password С помощью приведенного ниже …
18 июн '21 в 16:46
1
ответ
Частное облако Cloudera CDP - Ошибка установки на хостах
Я получаю сообщение об ошибке установки из-за ошибки хоста при использовании Cloudera Manager для установки среды выполнения CDP 7.1.4 на пробной основе. Для этой цели я создал две виртуальные машины (Ubuntu 18), которые используют NatNetwork для по…
22 июл '21 в 22:46
0
ответов
Как создать внешнюю таблицу Hive поверх объектного хранилища ECS S3 с использованием протокола «S3a//»
Я пытаюсь создать внешнюю таблицу Hive с помощью Beeline поверх хранилища объектов ECS S3, используя схему «S3a //». Я следовал официальной документации cloudera и настроил указанные ниже свойства. fs.s3a.access.key fs.s3a.secret.key fs.s3a.endpoint…
13 авг '21 в 06:12
0
ответов
Невозможно связать мою учетную запись Streamsets с CDP
Я вошел в Streamsets на CDP с учетными данными по умолчанию, а затем меня попросили зарегистрироваться. Я зарегистрировался ранее, поэтому я вошел в систему со своими учетными данными, а затем меня попросили щелкнуть по кнопке «Ссылка сейчас». После…
17 авг '21 в 11:22
1
ответ
Scala - Как читать сообщение MQ, длина которого превышает 4096 символов
Информация о приложении IBM MQ 9.2Cloudera CDP 7.1.6 Spark 2.4.5 Я обновляю искровый код со Spark 1.6 до Spark 2.4.5. У меня есть json-контент (сложная схема), отправляемый в очередь MQ, длина сообщения которого превышает 4096. Я могу напрямую читат…
07 сен '21 в 09:26
0
ответов
Как я могу вернуть свои посылки CDP? Он будет автоматически удален при остановке кластера из aws
Я создал мультиузел CDP с кластером External Metastore на AWS… он работает нормально. Затем я должен остановить кластер на день. На второй день я запустил кластер. Затем при подключении к Cloudera Manager .. Статус доступности посылок не отображаетс…
30 сен '21 в 04:48
1
ответ
Подключение к БД Impala с помощью библиотеки Dask
Я пытаюсь подключиться к Impala DB через библиотеку Dask, чтобы получить все данные из таблицы с помощью read_sql_table(). Нужна строка подключения для подключения, я попытался использовать строку подключения, которую я обычно подключаю в Dbeaver, н…
09 ноя '21 в 12:05
0
ответов
Ошибка при выполнении команды kafka-themes --version в CDP7.1.6
После обновления до CDP7.1.6 с CDH5, чтобы проверить установку kakfa после поиска переменных envionemnet с помощью команды kafka-themes --version, я получаю ошибку ниже run_vol@XXXX:/opt/cloudera/parcels/CDH/lib/kafka/bin> sh -x kafka-topics.sh -…
21 дек '21 в 15:10
1
ответ
Задачи Apache Tez приостановлены на Мастере приложений
У меня проблема с tez, при одновременном выполнении около 14 запросов некоторые из них получают задержки более 5 минут, но загрузка кластера составляет всего 14%. Это то послание, о котором я говорю. INFO SessionState: [HiveServer2-Background-Pool: …
24 дек '21 в 17:36
0
ответов
Не удалось скопировать данные с hdfs на s3 на cdp
ПРЕДУПРЕЖДЕНИЕ impl.MetricsConfig: не удается найти конфигурацию: пробовали hadoop-metrics2-s3a-file-system.properties,hadoop-metrics2.propertiesINFO impl.MetricsSystemImpl: запланированный период моментального снимка метрики в 10 секунд. INFO impl.…
01 фев '22 в 10:21
0
ответов
Создайте сценарий создания таблицы из существующей таблицы Phoenix.
Мне любопытно, есть ли у phoenix в настоящее время возможность генерировать сценарии создания из существующей таблицы phoenix.
28 фев '22 в 16:13
1
ответ
Как перенести роли с одного экземпляра рейнджера Apache на другой экземпляр?
Мы планируем создать кластер-реплику существующего кластера CDP. Я могу импортировать/экспортировать политики, но не могу импортировать/экспортировать роли. У нас есть около 2000+ ролей, используя следующий API, я могу создать роль, но хотел знать, …
14 янв '21 в 08:50
0
ответов
ошибка импорта sqoop HCat вышел со статусом
Я запускаю следующий импорт sqoop из Teradata: sqoop import --driver com.teradata.jdbc.TeraDriver \ --connect jdbc:teradata://telearg7/DATABASE=AR_PROD_HUB_DIM_VW,CHARSET=UTF8,CLIENT_CHARSET=UTF-8,TCP=SEND1500,TCP=RECEIVE1500 \ --verbose \ --usernam…
11 май '22 в 16:00
1
ответ
Программный способ найти версию кластера из CDSW — Cloudera Data Science Workbench
Есть ли программный способ узнать версию кластера (CDH6 или CDP7) из сеанса CDSW? Может ли какая-либо переменная среды дать надежный способ определить версию кластера?
28 апр '22 в 02:56
1
ответ
Проблема OOM контейнера при записи Dataframe в файлы паркета в Spark Job
Я использую рабочую область машинного обучения в Cloudera Data Platform (CDP). Я создал сеанс с памятью 4vCPU/16 GiB и включил Spark 3.2.0. Я использую spark для загрузки данных за один месяц (размер данных за весь месяц составляет около 12 ГБ) и вы…
16 янв '23 в 08:46
0
ответов
Ошибка Pyhive после обновления с CDH до частного облака CDP
Могу ли я получить вашу помощь, чтобы устранить приведенную ниже ошибку из модуля Pyhive. Проблема: мы обновили кластер Cloudera с версии CDH до версии CDP. Мы используем модуль Python Pyhive для получения соединения Impala с Impala, используя pyhiv…
01 дек '22 в 18:21
1
ответ
Apache NiFi в Cloudera Изменение переменных с неавторизованных ссылающихся компонентов на ссылающиеся процессоры
Цель состоит в том, чтобы переместить процессоры, использующие переменную, из «Неавторизованные ссылочные компоненты» на «Ссылочные процессоры». Я недавно перешел с HDP на CFM для Apache NiFi, и переменные, установленные в моих PutHDFS, GetHDFS и Mo…
06 июл '22 в 15:38