Описание тега pinot

0 ответов

Интеграция Kerbenous kafka и Acache pinot

Я пытаюсь интегрировать Kerbonous Kafka и apache pinot. У меня есть некоторые данные в моей теме, и я хочу загрузить их в свою таблицу Пино в реальном времени. Я завершил этот процесс с помощью пользовательского интерфейса, где в пользовательском ин…
0 ответов

Добавление функции аутентификации пользователя в пользовательский интерфейс Apache Pinot

Есть ли способ добавить функцию аутентификации пользователя в Apache Pinot. т.е. после запуска Пино я использую localhost:9090, тогда я могу видеть страницу Пино напрямую со всей таблицей и деталями конфигурации. Я хочу добавить какую-то функцию без…
05 май '21 в 18:26
1 ответ

Код ошибки PINOT_UNABLE_TO_FIND_BROKER: допустимые брокеры не найдены

Я пытаюсь запросить данные таблицы пино с помощью presto, ниже приведены сведения о моей конфигурации. started Pinot is one of the sit server.i.e. 10.184.160.52 Controller: 10.184.160.52:9000 server: 10.184.160.52:7000 broker: 10.184.160.52:8000 У м…
19 май '21 в 15:56
1 ответ

Как ввести данные в apache pinot из темы kafka с помощью схемы avro?

Я начал изучать apache pinot, есть несколько запросов относительно схемы apache pinot. Я хочу понять, как apache pinot работает с темой Kafka, которая имеет схему AVRO (схема включает вложенный объект, массив объектов и т. Д.), Потому что я не нашел…
21 май '21 в 14:30
0 ответов

Гибридный стол в пино

Я создаю одну гибридную таблицу в Pinot, чтобы она могла принимать данные из kafka, а также из местоположения hdfs. Я слежу за этим документом. Https://docs.pinot.apache.org/basics/components/table. До сих пор я выполнял следующие шаги. 1. bin/pinot…
01 июн '21 в 14:58
0 ответов

pinot-plugins.tar.gz не существует Проблема в Пино

Я загружаю данные из местоположения HDFS в таблицу Pinot Hybrid. Я создал одну таблицу и теперь пытаюсь переместить данные из hdfs в таблицу Pinot. Вот мой файл конфигурации. executionFrameworkSpec: name: 'hadoop' segmentGenerationJobRunnerClassName…
02 июн '21 в 19:54
1 ответ

Проблема с аутентификацией пользователя В Kerberos с keytab

Я пытаюсь интегрировать Kerberos Hadoop с Pinot. И использую указанные ниже конфигурации. Исполняемые файлы: export HADOOP_HOME=/usr/hdp/2.6.3.0-235/hadoop export HADOOP_VERSION=2.7.3.2.6.3.0-235 export HADOOP_GUAVA_VERSION=11.0.2 export HADOOP_GSON…
28 июн '21 в 16:48
0 ответов

Не удалось найти запись «KafkaClient» в конфигурации JAAS. Системное свойство java.security.auth.login.config не установлено: Pinot + Kafka

Есть ли способ получить данные из Kerberous Kafka в таблице Pinot. Когда я запускаю Pinot с помощью файла quick-start-batch.sh и устанавливаю местоположение файла JAAS в quick-start-batch.sh, он работал, как ожидалось, и я я могу принимать данные из…
07 июл '21 в 02:38
0 ответов

Как повторно обучить модель ИИ, чтобы иметь меньший размер входных данных

Мне нужна модель PyTorch, которая может сегментировать дороги на камере OAK-D. Для модели, представленной здесь, требуется размер входного изображения: 896*512, что слишком велико для работы с камерой OAK-D. Таким образом, мне нужно переобучить его,…
15 авг '21 в 08:12
1 ответ

Как Apache Pinot индексирует данные по сравнению с Elasticsearch?

И Elasticsearch, и Pinot используют Apache Lucene для внутренних целей. Чем они отличаются в своих стратегиях индексации? PS Мой совершенно правильный ответ был удален из-за плохого вопроса, который был закрыт, поскольку он был «основан на мнении». …
31 янв '21 в 10:52
1 ответ

Вложенный ввод json Pinot

У меня есть эта схема json { "name":"Pete" "age":24, "subjects":[ { "name":"maths" "grade":"A" }, { "name":"maths" "grade":"B" } ] } и я хочу поместить это в таблицу пино, чтобы выполнить запрос, например select age,subjects_grade,count(*) from tabl…
25 янв '21 в 14:01
0 ответов

Функция Groovy для использования условного оператора и синтаксического анализа даты и времени

Я хочу написать отличную функцию в «transformConfigs» конфигурации таблицы в Apache Pinot. Я хочу присвоить значение «A», если моя метка времени больше 7:00:00, но в противном случае присвоить значение «B» в столбце. Это то, что я пробовал, но ни од…
09 май '22 в 04:35
0 ответов

Pino logger: как вести журнал в динамически создаваемых папках

В моем проекте есть возможность создавать приложения. На основе идентификатора приложения мне нужно создать папку с именем идентификатора приложения и хранить файлы trace.log, out.log и т. д. отдельно. Для ведения журнала используется pino. let dir …
07 апр '22 в 12:38
0 ответов

Есть ли эквивалент/замена ANY_VALUE (из SQL) в Apache Pinot Query

Я ищу функцию в Apache Pinot, которая может заменить ANY_VALUE из SQL. Мой запрос в SQL SELECT id, ANY_VALUE(kind) AS kind ... GROUP BY id Ближайшая функция, которую я нахожу в Pinot, этоFIRSTWITHTIME SELECT id, FIRSTWITHTIME(kind, date, 'STRING') a…
25 июл '22 в 20:03
1 ответ

Компонент сервера Apache Pinot потребляет непредвиденный объем памяти

Описание проблемы: Docker используется для развертывания Apache Pinot на рабочих серверах (ВМ). Для этой цели использовалась официальная документация Пино . Что было сделано Серверы Pinot потребляют больше памяти, чем данные и фактор репликации, кот…
31 дек '22 в 13:41
1 ответ

Пино – преобразование строки в проходимый JSON

У меня есть строка, поступающая из потока Kafka, которая очень похожа на пример использования документации JSONFORMAT . Сейчас я борюсь с тем, как преобразовать его в проходимый JSON, чтобы я мог, в примере из документации, поместить значение «возра…
28 июн '23 в 17:56
0 ответов

Соединение Apache Пино

Я новичок в работе с Apache Pinot, и мне бы хотелось, чтобы вы помогли мне понять, как он работает. В настоящее время мы работаем с AWS, и в кластере AWS EKS установлен Apache Pinot. У меня есть прямая ссылка/соединение, и я могу использовать нескол…
0 ответов

Ошибка приема потока Kafka в Pinot, неверный стартовый байт utf-8

Версия Pinot: 0.12.1Java JDK: 11 Я пытался принимать данные в реальном времени из Кафки в Пино в двух случаях: Случай 1: Это работает как шарм. {"event":{"header": "v1","body":{"gender":"M", "region":"London"}}} Но когда я использую данные, содержащ…
16 июн '23 в 07:26
1 ответ

Аутентификация Pinot Kubernetes/ACL

Я новичок в Pinot и K8s, я настроил Pinot в среде K8s с помощью helm и пытаюсь добавить свойства аутентификации с помощью этой инструкции (https://docs.pinot.apache.org/operators/tutorials/authentication/basic-auth-контроль доступа ). Как добавить э…
22 авг '23 в 13:33