Github API v3 не показывает все репозитории пользователей

Question

Если я наберу эту команду:

$ curl https://api.github.com/users/KiCad/repos | grep full_name

Я ожидаю, что он вернет все хранилища KiCad, но возвращает:

"full_name": "KiCad/Air_Coils_SML_NEOSID.pretty",
"full_name": "KiCad/Buzzers_Beepers.pretty",
"full_name": "KiCad/Capacitors_Elko_ThroughHole.pretty",
"full_name": "KiCad/Capacitors_SMD.pretty",
"full_name": "KiCad/Capacitors_Tantalum_SMD.pretty",
"full_name": "KiCad/Capacitors_ThroughHole.pretty",
"full_name": "KiCad/Choke_Axial_ThroughHole.pretty",
"full_name": "KiCad/Choke_Common-Mode_Wurth.pretty",
"full_name": "KiCad/Choke_Radial_ThroughHole.pretty",
"full_name": "KiCad/Choke_SMD.pretty",
"full_name": "KiCad/Choke_Toroid_ThroughHole.pretty",
"full_name": "KiCad/Connect.pretty",
"full_name": "KiCad/Connectors_Molex.pretty",
"full_name": "KiCad/Converters_DCDC_ACDC.pretty",
"full_name": "KiCad/Crystals.pretty",
"full_name": "KiCad/Crystals_Oscillators_SMD.pretty",
"full_name": "KiCad/Diodes_SMD.pretty",
"full_name": "KiCad/Diodes_ThroughHole.pretty",
"full_name": "KiCad/Discret.pretty",
"full_name": "KiCad/Display.pretty",
"full_name": "KiCad/Displays_7-Segment.pretty",
"full_name": "KiCad/Divers.pretty",
"full_name": "KiCad/EuroBoard_Outline.pretty",
"full_name": "KiCad/Fiducials.pretty",
"full_name": "KiCad/Filters_HF_Coils_NEOSID.pretty",
"full_name": "KiCad/Fuse_Holders_and_Fuses.pretty",
"full_name": "KiCad/Hall-Effect_Transducers_LEM.pretty",
"full_name": "KiCad/Heatsinks.pretty",
"full_name": "KiCad/Housings_DFN_QFN.pretty",
"full_name": "KiCad/Housings_QFP.pretty",

Если вы посмотрите на https://github.com/KiCad, вы увидите, что есть еще репозитории.

Кто-нибудь сталкивался с этой проблемой? Как вы это решаете?

Answer 1

GitHub API использует разбиение на страницы и по умолчанию составляет 30 элементов на странице. Вам придется использовать

curl -i https://api.github.com/users/KiCad/repos?per_page=100

100 - это наибольшее количество элементов, которые вы можете получить на одной странице. С -i указан вы увидите заголовки распечатаны и заголовок, который вы ищете, является Links заголовок. Там будут ссылки, которые помогут вам перемещаться по страницам. Одна из этих ссылок должна выглядеть

https://api.github.com/users/KiCad/repos?per_page=100&page=2

Так что если вы делаете

curl -i https://api.github.com/users/KiCad/repos?per_page=100&page=2

Вы получите репо 101-200. Вы можете продолжить это, пока нет next ссылка в Links или пока вы не поймете, что получили менее 100 результатов.