Описание тега hiveserver2

Вопросы с тегом
0 ответов

FileNotFoundException для /tmp/hadoop-unjar7189161975267244586/org/apache/hive/service/cli/session/HiveSessionProxy$1.class

[root@hadoop27 hadoop]# hive --service hiveserver2 2020-07-07 22:43:51: Starting HiveServer2 Exception in thread "main" java.io.FileNotFoundException: /tmp/hadoop-unjar7189161975267244586/org/apache/hive/service/cli/session/HiveSessionPro…
07 июл '20 в 18:08
0 ответов

Permission Issue Related To Beeline

Question Why can't I connect to HiverServer2 with the user ubuntu yet by the user hadoop is fine? Brief I created a user, hadoop, on a machine as a namenode where its OS is Ubuntu 18.04.5 LTS and built up a Hadoop cluster with 4 workers. Hadoop 3.3.…
01 сен '20 в 07:28
2 ответа

Нет информации о выполнении задания mr в билайн

В beeline я не мог видеть информацию о выполнении задания (например, о ходе выполнения), я уже установил следующие свойства в hive-site.xml. Может ли кто-нибудь помочь разобраться, как диагностировать такие проблемы? Как я могу проверить правильност…
09 июн '20 в 08:01
0 ответов

Hiveserver2 и zookeeper: что делать, если zookeeper не может прочитать конфигурацию HS2?

Что мне делать в кластере hadoop, если zookeeper не может прочитать конфигурацию HS2? Например: [zk: localhost:2181(CONNECTED) 0] ls /hiveserver2 [serverUri=<URI>;version=3.1.0.3.1.4.0-315;sequence=0000000084] Благодаря этому я знаю, что конфи…
11 июн '20 в 10:37
0 ответов

Ошибка при выполнении запроса вставки на pyhive

Я использую элементарный код для проверки доступа через PyHive к моему HiveServer2, при запуске select я получил ожидаемый результат, но когда я пытаюсь вставить новую запись, у меня возникла эта проблема, которую мне трудно отладить и найти, где на…
19 июн '20 в 17:01
1 ответ

Как найти сведения о подключении к HiveServer2 для визуализации таблицы

Я работаю в редакторе Hue Editor (https://demo.gethue.com/hue/accounts/login?next=/) и хочу подключиться к Tableau для визуализации. Однако в графическом интерфейсе нет места, где я мог бы просто скопировать и вставить детали подключения. Как я могу…
10 авг '20 в 17:10
1 ответ

Обратный прокси-сервер для экономичных серверов-ульев, работающих в кластере Kubernetes

У меня есть требование запускать несколько hiveserver'ов как pod'ов в кластере kubernetes, каждый из которых обслуживает пользователей, принадлежащих к разным группам AD. Эти hiveservers должны быть доступны за пределами кластера kubernetes, но кажд…
13 авг '20 в 14:47
0 ответов

Не удалось подключиться к hiveserver2 >>> FileNotFoundException

Команда : hive --service metastore Exception in thread "main" java.io.FileNotFoundException: /tmp/hadoop-unjar6607348361244494492/org/apache/hive/service/cli/operation/GetColumnsOperation.class (The structure needs to be cleaned up) at jav…
07 июл '20 в 14:26
0 ответов

Spark_to_hive: пробовал все существующие URI HiveServer2 из zooKeeper

Я попытался прочитать таблицу кустов на удаленном сервере. Строка подключения, используемая в scala: val df = spark.read.format ("jdbc").option ("url", "jdbc: // url").option ("dbtable", "table_name").load () Это работает нормально, его распечатка с…
21 июл '20 в 18:02
1 ответ

Hiveserver2 не запускается - обнаружено исключение: узел ZooKeeper / hiveserver2 еще не готов

Я установил трехузловой кластер Ambari (3 виртуальных машины под управлением CentOS 7) с ульем только одной из служб. Все остальные службы запущены вместе с клиентами куста на всех хостах и ​​хранилище метаданных куста. Однако запустить hiveserver2 …
12 окт '20 в 11:42
0 ответов

HDP 3.1.5 - HiveServer не может подключиться к билайн

При попытке подключения hiveserver с помощью beeline мы получаем указанную ниже ошибку. HiveServer и Metasore по-прежнему работали без проблем. Metastore работает с одним экземпляром Mysql. Это началось, когда мы провели стресс-тестирование, выполня…
02 дек '20 в 08:49
0 ответов

HDP 3.1.5 - Текущее подключение HiveServer к HiveMetaStore продолжает расти

Мы замечаем, что текущее соединение HiveServer с HiveMetaStore постепенно увеличивается и не прекращается, даже если в кластере не выполняется никаких заданий. Пожалуйста, помогите определить проблему и возможное решение. HiveMetastore работает с од…
02 дек '20 в 12:49
1 ответ

Как распечатать размер выходного файла при использовании данных экспорта куста с помощью команды "вставить перезапись каталога"

Я использую beeline для экспорта данных в hdfs с помощью команды: INSERT OVERWRITE DIRECTORY $export_tmp ROW FORMAT SERDE 'org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe' select * from xxx_table_name; Я хочу установить размер выходного файл…
04 дек '20 в 11:45
0 ответов

Подключение к kerberized hiveserver2 из api python flask

Нам требуется помощь в решении указанной ниже проблемы в Windows 10. Проблема связана с библиотекой sasl, которая является зависимостью как для pyhive, так и для impyla. когда мы пытаемся установить sasl с pip install sasl == 0.2.1 или же easy_insta…
11 сен '20 в 09:36
0 ответов

Проблема с запуском Hive Metastore и HIveServer2

Я новичок в среде Hive. Получение следующей ошибки при запуске HiveMetastore или HiveServer2 Exception in thread "org.apache.hadoop.hive.common.JvmPauseMonitor$Monitor@4330e9c7" java.lang.IllegalAccessError: tried to access method com.google.common.…
18 фев '21 в 09:16
0 ответов

Исполнение HIVE и режимы установки

При установке и исполнении HIVE я сталкиваюсь со следующей терминологией. Может ли кто-нибудь подтвердить мое понимание и дать ценные ответы на некоторые из моих вопросов. После того, как мы установили HIVE, никакие процессы не выполняются и не слуш…
25 мар '21 в 06:41
0 ответов

проблема сберегательного сервера beeline spark

Я пытался получить доступ к Spark sql через jdbc, но столкнулся с некоторой ошибкой. Я пытаюсь запустить билайн ! /usr/lib/spark/bin/beeline -u 'jdbc:hive2://host:10016/default;transportMode=binary' -e '' 2>&1| awk '{print}'|grep -i -e 'Conne…
13 май '21 в 20:58
1 ответ

PyHive не может получить журналы с HiveServer2 при работе в асинхронном режиме

У меня возникла странная проблема с PyHive, выполняющим запрос Hive в асинхронном режиме. Внутри PyHive использует клиент Thrift для выполнения запроса и получения журналов (вместе со статусом выполнения). Я не могу получить журналы запроса Hive (от…
28 май '21 в 00:25
0 ответов

Hive Server 2 не запускается в Билайн [закрыто]

сильный текст Я установил hadoop и hive и запустил namenode, jobtracker, tasktracker, namenode и hive работают, но когда я пытаюсь открыть в beeline, hive server2 закрывается
01 июн '21 в 13:08
0 ответов

каков механизм синхронизации данных HiveMetaData между несколькими HiveServer2

Существует развертывание HiveServer2 High Availability с Zookeeper. Когда я создаю постоянную функцию на одном HiveServer2, ее нельзя найти на другом HiveServer2. Единственное действенное решение - перезапустить все остальные HiveServer2. Мне просто…
12 июн '21 в 08:16