Сократный ряд дросселирования при загрузке файлов

Question

Я пытаюсь загрузить файлы CSV из набора данных состояния, для локального анализа. Данное государство работает на платформе Сократа. При нажатии на URL, CSV всегда возвращаются.

Например, https://data.mass.gov/resource/dnyu-v8e9.csv&&$$app_token=xxxx предположительно имеет 12,9 тыс. Строк. При загрузке я иногда получаю файл CSV с 12,9K строк. В других случаях это 1001 ряд, и хотя бы один раз - 5 строк.

Есть ли способ обойти это ограничение? Кажется, это не задокументировано.

Answer 1

При обращении к URL-адресу API SODA существует недокументированное поведение. Вы можете обойти это, используя веб-адреса сайта. Например, dnyu-v8e9 - это набор данных, размещенный в Кембридже, штат Массачусетс, который является частью федерации MA. Так что вместо

https://data.mass.gov/resource/dnyu-v8e9.csv

пытаться

https://data.cambridgema.gov/api/views/dnyu-v8e9/rows.csv?accessType=DOWNLOAD