Описание тега ndjson
NDJSON - это формат JSON с разделителями новой строки.
3
ответа
Как разобрать ndjson в Pharo с помощью NeoJSON
Я хочу проанализировать данные ndjson (json с разделителями новой строки) с NeoJSON на Pharo Smalltalk. Данные ndjson выглядят так: {"smalltalk": "cool"} {"pharo": "cooler"} В данный момент я конвертирую свой файловый поток в строку, разделяю ее на …
20 янв '16 в 15:41
1
ответ
Как закрыть поток https в Node.js
Я загружаю .ndjson файл через https. Я хочу закрыть его после прочтения 100 строк файла. const amount = 100; https.get(url, (res) => { var { statusCode } = res; if (statusCode !== 200) { throw new Error(`Request Failed.\n Status Code: ${statusCod…
29 авг '17 в 12:28
1
ответ
Очистка необработанных данных R
У меня есть текстовый файл данных низкого и низкого уровня, который содержит данные сетевого журнала. Мне нужно упорядочить эти исходные данные низкого уровня и экспортировать упорядоченные данные в файл.csv. Пример необработанных данных выглядит пр…
08 сен '16 в 00:00
3
ответа
JQ добавить значение ключа во вложенном массиве и дать новый ключ
У меня есть поток массивов JSON, как это [{"id":"AQ","Count":0}] [{"id":"AR","Count":1},{"id":"AR","Count":3},{"id":"AR","Count":13}, {"id":"AR","Count":12},{"id":"AR","Count":5}] [{"id":"AS","Count":0}] Я хочу использовать JQ, чтобы получить новый …
19 июл '17 в 15:25
1
ответ
Ошибка с допустимым геойсоном при попытке разбить файл с помощью ndjson-split
Я хочу удалить все свойства из моего файла geojson, поэтому сначала я попытаюсь создать файл ndjson следующим образом: /root/npm/bin/ndjson-split 'd.features' < test.json > test.ndjson но я получаю эту ошибку: stdin:1 {"type":"FeatureCollectio…
06 дек '18 в 14:08
1
ответ
Как решить ошибку CORS, использующую API, используя гобой в приложении Angular2?
У меня есть API, который возвращает данные, как это: {"t":"point","id":817315,"tableid":141,"classid":142,"state":0,"loc":[6850735.34375,24501674.0039063]} {"t":"line","id":817314,"tableid":204,"classid":2102,"loc":[[6850335.8828125,24501476.5039062…
25 фев '19 в 18:44
0
ответов
Используйте `can-ndjson-stream` в Firefox, Edge для анализа ответа ndjson
Я использую can-ndjson-stream для анализа ответа ndjson, полученного от fetch вызов. Все работает в Chrome, но не в Firefox и Edge. Firefox не поддерживает ReadableStream и выдает ошибку: ReadableStream is not defined, Edge throws error Function exp…
15 ноя '18 в 11:38
1
ответ
Экспортировать вложенный JSON из GCS в электронную таблицу
У меня есть вложенный файл NDJSON, который я экспортировал из BQ в Google Cloud Storage. Оттуда я хотел бы снова открыть его в Spreadsheet как вложенную таблицу. Я вижу множество приложений для импорта файлов JSON, но ни один не предназначен для фай…
19 ноя '18 в 15:05
1
ответ
При левом соединении для отображения D3 возвращается ноль, что препятствует следующему шагу командной строки обработки данных (ndjson-join или jq)
Я делаю D3 картографирование на государственном уровне. Вот одна проблема, с которой я столкнулся при обработке данных. Например, данные карты такие, (dat1.ndjson) {state: a, code: aa} {state: b, code: bb} {state: c, code: cc} Но обычно информация, …
09 дек '17 в 04:45
2
ответа
Сериализация как NDJSON с использованием Json.NET
Можно ли сериализовать в NDJSON ( Newline Delimited JSON), используя Json.NET? Elasticsearch API использует NDJSON для массовых операций, и я не могу найти ничего, свидетельствующего о том, что этот формат поддерживается любыми библиотеками.NET. Это…
27 июн '17 в 18:43
1
ответ
Pandas df ndjson дает неверный счетчик строк
У меня есть датафрейм с 320 строками. Я преобразовал его в ndjson с пандами: df.to_json('file.json', orient='records', lines=True) Однако после загрузки данных я получаю только 200 строк. with open('file.json') as f: print(len(f.readlines())) дает 2…
16 фев '17 в 22:48
0
ответов
Ошибка ndjson-split - Ошибка типа: не массив
При попытке создать ndjson из файла формы данных естественной земли для стран-администраторов (используя ndjson-split) я получаю ошибку как TypeError: not array Команда, используемая после преобразования шейп-файла в geojson с использованием shp2jso…
05 дек '17 в 02:00
0
ответов
Ошибка при загрузке файла json в rstudio
Я пробовал rjson, jsonlite и ndjson. Все они возвращают следующее сообщение об ошибке при попытке загрузить файл JSON. т.е. data <- read_json("/home/stathis/Desktop/09-02-2019_16") Error in parse_con(txt, bigint_as_char) : lexical error: invalid …
09 фев '19 в 19:29
0
ответов
Как лучше сгладить данные NDJson в Python
У меня есть огромный файл (>400 МБ) данных в формате NDJson, и я хотел бы преобразовать его в формат таблицы для дальнейшего анализа. Я начал перебирать различные объекты вручную, но некоторые из них довольно глубоки и могут даже со временем менятьс…
10 июн '18 в 19:43
1
ответ
JSON в NDJSON на облачной платформе Google
Я разрабатываю прототип на облачной платформе Google, для которой я использую облачное хранилище, appengine и bigquery. Теперь одна из задач - ежедневно загружать файл из облачного хранилища Google в bigquery, для которого я использую задачу Cron в …
09 авг '16 в 10:47
1
ответ
Чтение в очень, очень большом NDJSON
У меня есть файл NDJSON размером 33 ГБ, который мне нужно прочитать в data.table в R. Он сжат в файл 2 ГБ, в идеале я бы хотел сохранить его сжатым. Структура не так важна, за исключением этого (при импорте через jsonlite::stream_in), данные мне нуж…
25 июн '18 в 21:39
0
ответов
AJAX ndjson без ошибки политики того же происхождения
Я пытаюсь получить данные из быстрого набора данных рисования (мои ссылки - с маленькой вкладки общедоступных ссылок справа). Формат данных ndjson. Я не хотел загружать весь набор данных, потому что он огромен! Я пытался получить данные с помощью aj…
07 фев '18 в 22:15
2
ответа
Как сопоставить каждый новый объект json с разделителями строк в узле-событии Гобой в приложении Angular2?
У меня есть API, который возвращает данные, как это: {"t":"point","id":817315,"tableid":141,"classid":142,"state":0,"loc":[6850735.34375,24501674.0039063]} {"t":"line","id":817314,"tableid":204,"classid":2102,"loc":[[6850335.8828125,24501476.5039062…
26 фев '19 в 10:59
1
ответ
Как мне разобрать этот файл ndjson в python?
Я получил этот файл ndjson из набора данных Google Quick draw, который недавно был открыт. Я пытаюсь сделать изображение PNG из этих координат. Мне нужно разобрать этот файл ndjson в python [{'key_id': 5344373355053056, 'image': [((2, 38, 71, 108, 1…
24 май '17 в 13:30
0
ответов
Обрабатывать тело json и тип содержимого HttpServletRequest
Я работаю над кодом http Gateway, чтобы сделать патч. Проблема: приложение отправляет http-запрос с типом контента "application/json", но в его теле есть несколько json. Моя работа состоит в том, чтобы отфильтровать и переписать этот тип http-запрос…
15 ноя '18 в 15:50