Описание тега apache-hive

0 ответов

Использование функции маскировки Apache Hive и фильтрации строк / столбцов

Недавно я узнал, что в Hive была добавлена ​​функция маскирования и фильтрации строк / столбцов. https://issues.apache.org/jira/browse/HIVE-13125 Но до сих пор нет документации по этому поводу. В ходе моих исследований я обнаружил, что мы можем испо…
16 фев '17 в 13:50
1 ответ

Apache Hive получает ошибку при использовании Python UDF

Я использую пользовательскую функцию Python в улье Apache, чтобы изменить символы из строчных букв в прописные. Я получаю сообщение об ошибке "Ошибка выполнения Hive при закрытии операторов". Ниже приведен запрос, который я пробовал: describe table1…
16 авг '15 в 05:33
1 ответ

Использование Python UDF с Hive

Я пытаюсь научиться использовать Python UDF с Hive. У меня есть очень простой UDF Python: import sys for line in sys.stdin: line = line.strip() print line Затем я добавляю файл в Hive: ADD FILE /home/hadoop/test2.py; Теперь я называю Hive Query: SEL…
13 фев '17 в 22:23
1 ответ

Соединение за одним столом два раза в улье

Я не понимаю, как реализовать это в Hive. Пожалуйста, предложите способ. Предположим, у меня есть таблицы ульев, как это Table1: id | primary | secondary ------------------------- 1 | A | [B,C] 2 | B | [A] 3 | C | [A,B] Table2 id | primary | Heart |…
08 апр '16 в 04:51
1 ответ

Прочитайте таблицу Apache HIVE от Informatica

Мне нужно рассмотреть таблицу HIVE с помощью Informatica, а затем записать данные после некоторых преобразований в таблицу MS SQL. Может кто-нибудь, пожалуйста, дайте мне знать, какой драйвер / разъем требуется для подключения к Apache HIVE от Infor…
11 апр '16 в 16:00
2 ответа

Добавление локальных файлов в Билайн (Hive)

Я пытаюсь добавить локальные файлы через клиент Билайн, но продолжаю сталкиваться с проблемой, которая говорит мне, что файл не существует. [test@test-001 tmp]$ touch /tmp/m.py [test@test-001 tmp]$ stat /tmp/m.py File: ‘/tmp/m.py’ Size: 0 Blocks: 0 …
27 фев '17 в 22:08
1 ответ

Hive LATERAL VIEW и WHERE, используя подзапрос

Я ищу способ оптимизировать мой запрос. У нас есть таблица с событиями под названием leaс колонной app_properties, которые являются тегами, хранятся в виде строки через запятую. Я хотел бы выбрать все события, которые соответствуют результату запрос…
22 июл '15 в 11:26
5 ответов

Улей - Как я могу остановить отображение журналов в консоли?

Я пытался выдавать журналы из консоли во время запросов в куст, но все равно он обнаруживается.
05 мар '17 в 08:57
1 ответ

Не удается связаться с разделом таблицы кустов, после удаления файла hdfs, связанного с разделом

Мой кластер Hadoop выполняет пакетную работу для всех данных в 11:00. Задание создает раздел таблицы кустов (например, p_date=201702,p_domain=0) и импортирует данные rdbms в раздел таблицы кустов, например ETL....(таблица кустов не является внешней …
01 мар '17 в 10:12
0 ответов

Apache Hive и запись обновлений

У меня есть потоковые данные, поступающие в мое потребительское приложение, которые я в конечном итоге хочу показать в Hive/Impala. Одним из способов будет использование API на основе Hive для вставки обновлений пакетами в таблицу Hive. Альтернативн…
26 дек '15 в 01:17
0 ответов

Сервер Hive2 мертв и файл pid существует [СБОЙ]

У меня простой двухузловой кластер cloudera CDH5, а на подчиненном компьютере я настроил Hive & Hue. Я могу работать в улье через CLI, а именно. Создавая базы данных и таблицы, я не могу настроить hive/beeswax по оттенку, и это может быть причиной с…
17 апр '15 в 03:16
1 ответ

Как бросить несколько баз данных в куст?

Можно ли отбросить несколько баз данных в улей? Как увидеть комментарий, приведенный для таблицы, описать, не показывая его? а также с примитивным типом данных, как использовать предложение where? Благодарю.
18 ноя '15 в 12:09
1 ответ

Каково ограничение типов данных BINARY в Hive 1.2?

Я не нашел много о BINARY типы данных в документах apache: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types Я создал таблицу с BINARY использование столбца create table table1(col1 binary); После получения метаданных через JDBC …
07 июн '16 в 11:39
0 ответов

Объем переменной сумки в PIG

Я новичок в PIG, застрял на этой проблеме Я загрузил таблицу кустов, используя хранилище HCat в pig, у которого есть поле current_hour: long delta = LOAD 'alpha.table1' USING org.apache.hive.hcatalog.pig.HCatLoader(); теперь для некоторого другого в…
23 сен '16 в 16:28
1 ответ

Пытаясь найти максимум выбора оператора в HIVE

Я пытаюсь найти лучшего человека по весу в приведенном ниже сценарии. Ниже у меня есть рабочая версия, которая возвращает Мэтта Холидея с весом 250, и теперь это все, что я хочу. Игрок с максимальным весом и только он, а не кто-то другой SELECT DIST…
18 апр '16 в 17:28
1 ответ

Количество запросов Hive для полей, в которых они заполнены

У меня есть огромная таблица Hive, состоящая из десяти полей продукта, полей даты покупок и идентификатора. Поля продукта названы как prod1, prod2,..., prod10 и обратитесь к последним десяти купленным продуктам. Для большинства идентификаторов у нас…
19 окт '15 в 18:35
2 ответа

Улей конфигурации с sentry: NullPointerException privilegeObj имеет значение null для

Я следовал за руководством шаг за шагом. Но произошла ошибка, когда я попытался предоставить привилегию роли: 0: jdbc:hive2://localhost:10000/> GRANT ALL ON SERVER server1 TO ROLE admin_role; Error: Error while compiling statement: FAILED: NullPo…
12 сен '16 в 08:21
0 ответов

Установка Apache Hive в Windows без использования виртуальной машины

Недавно я начал изучать Улей. Поэтому я хотел попробовать свои силы, но проблема в том, что у меня нет учебника по установке куста на машине с Windows. У меня есть ограничение: 1. Невозможно установить Linux на мою машину с Windows в качестве двойно…
02 май '16 в 13:07
1 ответ

Управление отчетами, когда нашей базой данных является Cassandra ...Spark или Solr... или ОБА?

Моя база данных - Кассандра (datastax enterprise => linux). Так как он не поддерживает группирование, агрегирование и т. Д. Для отчетности, в соответствии с его основами, использование Cassandra не является правильным решением. Я погуглил об этом де…
09 мар '16 в 12:53
2 ответа

Выбрать все столбцы структуры улья

У меня есть требование выбрать * из всех столбцов в структуре улья. Скрипт создания таблицы Hive здесь Скрипт создания таблицы Select * из таблицы отображает каждую структуру в виде столбца select * from table Требование, которое я имею, состоит в т…
16 мар '17 в 22:54