Описание тега jsonlines
JSON Lines - это формат для хранения структурированных данных, которые могут обрабатываться по одной записи за раз. Это удобный формат для хранения структурированных данных, которые можно обрабатывать по одной записи за раз. Он хорошо работает с инструментами обработки текста в стиле unix и конвейерами оболочки.
1
ответ
Соответствие JSONlines из списков в новый список JSON
Я пытаюсь сопоставить списки продуктов в формате строк JSON с продуктами в другом файле, также в формате JSON. Иногда это называется связью записей, разрешением сущностей, сверкой эталонов или просто сопоставлением. Цель состоит в том, чтобы сопоста…
07 окт '17 в 21:56
2
ответа
Преобразование строк JSON в массив JSON с использованием jq
Во -первых, я новичок в jqКак 1-й новый день, я также новичок в JSON, я парень по SQL, поэтому я быстро учусь, но не могу разобраться с этим... так что, пожалуйста, потерпите меня. Я использую Windows, используя jq v1.5 на PowerShell. У меня загруже…
02 авг '17 в 09:10
1
ответ
Ошибка JSON Line при загрузке из import.io с использованием Python
Я с трудом пытаюсь загрузить ответ API из import.io в файл или список. Я использую точку зрения https://data.import.io/extractor/{0}/json/latest?_apikey={1} Ранее все мои сценарии были настроены на использование обычного JSON, и все работало хорошо,…
29 ноя '16 в 10:05
5
ответов
Как проанализировать большой файл JSON, разделенный символом Newline, с помощью модуля JSONStream в node.js?
У меня есть большой файл JSON, это JSON, разделенный символом Newline, где несколько стандартных объектов JSON ограничены дополнительными символами новой строки, например {'name':'1','age':5} {'name':'2','age':3} {'name':'3','age':6} Сейчас я исполь…
27 фев '13 в 20:19
1
ответ
Эффективно получить первую запись файла JSONL
Можно ли эффективно получить первую запись файла JSONL без использования всего потока / файла? Один из способов, которым я смог сделать это неэффективно, заключается в следующем: curl -s http://example.org/file.jsonl | jq -s '. [0]' Я понимаю что he…
02 мар '16 в 14:51
1
ответ
Как решить ошибку CORS, использующую API, используя гобой в приложении Angular2?
У меня есть API, который возвращает данные, как это: {"t":"point","id":817315,"tableid":141,"classid":142,"state":0,"loc":[6850735.34375,24501674.0039063]} {"t":"line","id":817314,"tableid":204,"classid":2102,"loc":[[6850335.8828125,24501476.5039062…
25 фев '19 в 18:44
2
ответа
Изменить JQ вложенный файл и сделать CSV
Я боролся с этим весь день, который я хочу превратить в CSV. Он представляет сотрудников, прикрепленных к компании, чей номер "OC418979" в API британской компании. Я уже обрезал json, чтобы он содержал только 2 объекта внутри "items". То, что я хоте…
28 фев '19 в 18:36
1
ответ
Сделать один (под)JSON-объект, появляющийся в одной строке с помощью jq
В Cloud BigQuery принятым форматом JSON является: Один объект JSON, включая любые вложенные / повторяющиеся поля, должен появляться в каждой строке. обратитесь к: https://cloud.google.com/bigquery/data-formats Теперь, учитывая JSON: { "1": { "kind":…
11 май '17 в 08:55
2
ответа
Чтение больших файлов JSON линий в Javascript / реагировать
Я получил большой файл (300 МБ), который сохраняется в jsonlines. Означает, что файл содержит тысячи объектов JavaScript, разделенных переносами строк. К сожалению, я не знаю, как работать с таким файлом. Может ли кто-нибудь дать мне какое-то кратко…
11 июн '18 в 14:12
2
ответа
Как использовать jq для вывода JSONL (один независимый объект JSON на строку)
Моя просьба звучит тривиально, но я не смог найти способ сделать это. Я имею в качестве входных данных массив объектов JSON: [ { "foo": 1, "bar": 2 }, { "foo": 3, "bar": 4 }, (...) ] и я хочу в качестве вывода JSONL-версию того же, иначе один объект…
11 фев '17 в 17:02
3
ответа
JSON линии Mime тип
Я хочу знать, какой Content-Type установить для строк JSON ( http://jsonlines.org/)? Я пытался искать. Это не совсем приложение / JSON, так как весь контент не является JSON (каждая строка). Спасибо
05 авг '18 в 00:51
1
ответ
Добавить данные в файл JSON с "JQ"
У меня есть файл "stats.json" со следующей исходной структурой " [{ "price": 66.55, "created": "2018-02-24T14:32:57" }] С помощью скрипта bash/curl я беру каждые 10 минут данные из API и сохраняю их в "temp.json" { "price": 88.55, "created": "2018-0…
24 фев '18 в 13:13
0
ответов
Как вставить файл JSONL в postgresql?
Как я могу загрузить файл JSONlines в базу данных PostgreSQL, не упоминая значения при загрузке файла, поскольку существует так много пар ключ-значение, что трудно упомянуть их все при создании таблицы?
01 сен '18 в 19:15
1
ответ
JQ '.' отформатированный файл json обратно в исходный формат json с использованием jq
Вот мой JSON: [ { "ReferringUrl": "N", "OpenAccess": "0", "ItmId": "1694738780" }, { "ReferringUrl": "L", "OpenAccess": "1", "ItmId": "1347809133" } ] Я хочу вернуть его в исходный формат JSON: [{"ReferringUrl": "N","OpenAccess": "0","ItmId": "16947…
29 июн '17 в 13:36
1
ответ
Ошибка синтаксического анализа файла sagemaker
Я пробую Deep AR для Deep AR Прогнозирование алгоритма обучения кастинга. Моя учебная работа не выполняется со следующей ошибкой при разборе файла jsonlines: строка: 1) Причина сбоя ClientError: Ошибка при разборе json (источник: /opt/ml/input/data/…
01 авг '18 в 21:23
0
ответов
Сроки, сколько времени требуется, чтобы прочитать файл
Я пишу процесс, который требует от меня построчно читать в большом файле jsonl (в некоторых случаях +4 гигабайта), выполнять операции с этими строками, а затем записывать их в файл. Я пытаюсь профилировать приложение, синхронизируя определенные опер…
22 фев '18 в 19:21
1
ответ
Обработка и запрос большого количества больших файлов в формате JSON Lines
По какой технологии лучше всего импортировать большое количество больших файлов формата JSON Line (около 2 ГБ на файл). Я думаю о Solr. После того, как данные будут импортированы, они должны будут иметь возможность запроса. Какую технологию вы бы пр…
28 июл '17 в 13:52
1
ответ
Определить родителя в asticsearch-dsl-py
Я пытаюсь использовать Elasticsearch-dsl-py, чтобы индексировать некоторые данные из файла jsonl со многими полями. игнорируя менее общие части, код выглядит так: es = Elasticsearch() for id,line in enumerate(open(jsonlfile)): jline = json.loads(lin…
07 ноя '16 в 11:50
1
ответ
Logstash - выпуск разбора формата json_lines
Вероятно, проблема n00b при попытке получить кодек json_lines для чтения данных из файла. Вот как выглядит мой конфигурационный файл input { file { path => ['C:/dev/logstash-5.1.2/data/sample.log'] start_position => "beginning" sincedb_path =&…
03 фев '17 в 16:49
2
ответа
Проверьте порядок сортировки полей JSON
У меня есть следующие записи JSON, хранящиеся в контейнере {"memberId":123,"memberCity":"Chicago","lastTransaction":1504155600000} {"memberId":123,"memberCity":"Chigago","lastTransaction":150175600000} {"memberId":123,"memberCity":"New York","lastTr…
26 дек '18 в 19:07