Описание тега apache-drill
Apache Drill - это механизм распределенных запросов с малой задержкой для крупномасштабных наборов данных, включая структурированные и полуструктурированные / вложенные данные. Он может запрашивать вложенные данные в таких форматах, как JSON и Parquet, и выполнять динамическое обнаружение схем.
1
ответ
Apache Drill выбирает пустые массивы из JSON
Я использую Apache Drill для хранения больших файлов JSON, которые я запрашиваю с помощью Drill API следующим образом: { "queryType": "SQL", "query": "select * from db.table.`/path/to/JSON.json` w " } Это правильно возвращает данные. Однако некоторы…
24 авг '16 в 14:00
0
ответов
Невозможно подключиться к локально запущенной Apache Drill от JAVA
Я получаю следующую ошибку Running com.rms.importnumbermatching.TestExecuteDrillQuery SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder". SLF4J: Defaulting to no-operation` (NOP) logger implementation SLF4J: See slf4j.org/codes.html#Sta…
17 июн '16 в 23:55
1
ответ
Apache Drill запрашивает имена столбцов из данных CSV
У меня есть файл CSV в локальной файловой системе, который я могу запросить как SELECT * FROM dfs.`/Users/HOF/Downloads/cars.csv`; Примечание: у меня есть "skipFirstLine": true, "extractHeader": true, в плагине хранения для CSV Данные в CSV-файле вы…
06 янв '18 в 18:10
2
ответа
Реализация нумерации страниц с использованием смещения в java jdbc
Я пытаюсь реализовать нумерацию страниц, используя java jdbc. Мой запрос принимает ограничение, которое является размер пакета и смещение. Как я могу увеличить смещение после завершения каждой партии. Я не могу понять, как я могу использовать это см…
31 янв '17 в 23:36
2
ответа
Apache Drill: Как запросить все файлы в корзине S3?
Я использую Apache Drill 1.10 на OSX. У меня есть S3 bucket с примерно 150 файлами, и я установил соединение между ними согласно документации Drill. Я могу видеть все файлы в ведре от Drill: jdbc:drill:zk=local> USE `s3`.`root`; +-------+--------…
27 июн '17 в 16:08
1
ответ
Использование Apache Drill для запроса kafka
Я пытался выяснить, как использовать Apache Drill для запроса тем Kafka с помощью SQL. Кто-нибудь может дать мне стартовую точку, чтобы я мог подключить тренировку к кафке. Любая помощь будет оценена.
14 янв '16 в 06:33
0
ответов
Как запросить семейство динамических столбцов HBase с помощью Apache Drill?
У меня есть требование запрашивать данные HBase, используя Apache Drill, где столбцы в семействе столбцов являются динамическими (каждый столбец является элементом массива) Схема HBase: salesInfo - это имя семейства столбцов column=salesInfo:custome…
14 дек '17 в 16:18
1
ответ
Как читать файлы с заголовками в Apache Drill
Когда я настраиваю Apache Drill примерно так: "csv": { "type": "text", "extensions": [ "csv2" ], "skipFirstLine": false, "extractHeader": true, "delimiter": "," }, SkipFirstLine исчезает, когда я сохраняю файл конфигурации. Почему?
15 июл '16 в 00:11
1
ответ
Веб-интерфейс Apache Drill
У меня включена аутентификация Apache Drill 1.10, и я могу использовать sqlline и jdbc нормально с моими настроенными пользователями. Однако, когда я пытаюсь войти в веб-консоль, я могу войти в систему, но затем, когда я нажимаю кнопку запроса, я вс…
13 июл '17 в 12:38
1
ответ
Как сделать запрос на создание сжатого паркетного файла?
Я сделал программу изменения формата данных, используя Apache Drill. В этой программе, если CSV-файл конвертировать в JSON, JSON-файл выполнен в формате hdfs. Но я хочу, чтобы выходной файл был сжат. Является ли это возможным?? Если это возможно, ка…
28 сен '16 в 12:30
1
ответ
org.apache.drill.common.exceptions.UserRemoteException: происходит при запросе от localhost:8047
Я получаю следующее исключение, только доступ к моей HDFS через веб-страницу, и то же самое работает нормально с sqlLine из терминала. Query Failed: An Error Occurred org.apache.drill.common.exceptions.UserRemoteException: VALIDATION ERROR: From lin…
11 мар '17 в 07:36
0
ответов
Apache Drill в контейнере Docker: java.net.BindException: адрес уже используется
Я использую Apache Drill для преобразования данных CSV в паркет. Я хочу сделать это распределенным способом, поэтому я раскручиваю контейнер Docker, запускаю код, подобный приведенному ниже, для преобразования в CSV. Когда я запускаю один экземпляр …
10 апр '17 в 19:08
1
ответ
Может ли Tableau делать олицетворение при подключении к Drill?
У меня есть Tableau Server, подключающийся к представлению Drill. Я хочу иметь дело с авторизацией в Drill, поэтому мне нужно, чтобы Drill знал, кто запрашивает данные с сервера Tableau. Для этого мне нужно олицетворение для работы, так как в против…
11 янв '18 в 17:14
0
ответов
Настройка производительности для больших запросов в Apache Drill
Я пытаюсь выполнить большие запросы на Apache Drill, и это занимает более 1 часа, хотя процессоры, память и ввод-вывод используются недостаточно. Размер базовых данных в формате паркета: 30 ГБ Размер кластера: один узел Оперативная память: 512 ГБ, 3…
16 янв '17 в 10:06
2
ответа
Apache Drill - запрос HDFS и SQL
Я пытаюсь изучить Apache Drill. Я не аналитик данных, а просто парень из службы поддержки. Я вижу, что документация по Apache Drill слишком ограничена Мне нужны некоторые сведения о пользовательском хранилище данных, которое можно использовать с Apa…
27 фев '15 в 12:50
1
ответ
VBA/Excel - запрос Apache Drill
Я пытался построить макрос для запроса Apache Drill. Я не могу заставить его работать. Я попробовал два способа. Сначала с помощью QueryTables.Add, Он продолжает добавлять результаты, чтобы не обновлять результаты, а только сдвигать старые результат…
22 июн '17 в 09:52
1
ответ
Apache Drill выполнить UDF 2 раза, и ответ не хочу
Я написал класс для расшифровки идентификатора клиента нашей компании с секретным ключом. Алгоритм дешифрования - DES. Затем я повторно проанализировал приведенный ниже код и изменил алгоритм с DES на AES, но когда я запускаю функцию выбора, расшифр…
31 июл '17 в 09:33
3
ответа
Использование TO_DATE в Apache Drill для преобразования UNIXTIMESTAMP в читаемый человеком формат времени
Мой файл JSON содержит поле метки времени в формате метки времени загрузки UNIX, например 1501580484655, Это преобразует в GMT: 01-08-2017 9:41:24.655 AM Моя попытка преобразовать эту метку времени в читаемый человеком формат времени до миллисекунды…
17 авг '17 в 08:11
2
ответа
Apache Drill Ошибка "Нет текущего подключения"
Я использую самую последнюю версию сверла на Windows-машинах во встроенном режиме. Тем не менее, я всегда получаю ошибки "нет текущего соединения" при отправке любых запросов. Также не работает веб-сервер localhost:8047. Вот что я вижу, когда пытаюс…
30 янв '18 в 22:01
1
ответ
Как заставить Apache Drill анализировать файл JSON с недопустимыми символами UTF8
Я пытаюсь выполнить запрос SELECT над файлом JSON, используя Apache Drill. Я получаю различные ошибки для разных файлов. Все ошибки являются ошибками синтаксического анализа JSON: Ошибка: DATA_READ ОШИБКА: ошибка синтаксического анализа JSON - Невер…
05 янв '17 в 07:59