git リポジトリが取得できない

Question

目的：
社内サーバにあるgitlab の全てのリポジトリ一覧を取得
（最終的には全てのリポジトリ内のファイルから特定の文字列を検索する）

試したこと：
以下のコマンドで8件のリポジトリは取得できるが実際は100件以上ある。
①curl "****/api/v4/projects"
**** gitlabのホストアドレス

上記の①と同じ結果が返る。
②curl "****/api/v4/projects?page=1"

リポジトリは返ってこない。
③curl "****/api/v4/projects?page=2"
% Total (略)
100 (略)--:-- 4[]

トークンを追加するとエラーが返る。
④curl --header "PRIVATE-TOKEN:<my_token>" "****/api/v4/projects"
message":"401 Unauthorized"}

Webからgitlabにアクセスでき、「Explore projects」タブを選択すれば1頁ずつリポジトリを表示できますが手作業では時間がかかりすぎます。

Comments

[ShortArrow]

社内サーバーなら、直接ストレージを読みに行くとかのほうが速そうですね。
あとはElasticSearchを使うとか。

Answer 1

以下のコマンドで8件のリポジトリは取得できるが実際は100件以上ある。
①curl "****/api/v4/projects"
**** gitlabのホストアドレス

正直、これだけの情報では判断が難しいですが推測で...

curl コマンドに認証関係が記載されていませんので、 Public リポジトリだけを表示しているということはないですか？
Public リポジトリが 8件で、それ以外は、Private リポジトリに設定されているとか。

たとえば、認証するアクセストークンを付加して curl --header "PRIVATE-TOKEN: <your_access_token>" "https://gitlab.example.com/api/v4/projects" のようにアクセスするとどうなりますか？

Webからgitlabにアクセスでき、「Explore projects」タブを選択すれば1頁ずつリポジトリを表示できますが手作業では時間がかかりすぎます。

Web ブラウザでアクセスすると　全部見えるのは、 Web ブラウザでは、ユーザーログインしているので Private リポジトリも見えていると...

Comments

[prslt]

回答ありがとうございます。

確かに表示されたリポジトリはPublic権限でした。
記載していただいたようにコマンドを実行すると許可されていないと表示されました。
message":"401 Unauthorized"}

トークンはwebで作成したものとFeed tokeで試しましたが結果は同じでした。

[prslt]

正常にリポジトリが返ってきました。
ありがとうございます。
<your_access_token> の<>をつけていた影響でエラーが返っていました。

?per_page=10&page=1 で区切りをつけないと全て取得できないようですが、目的通りにリポジトリを全て取得できました。