ハローワークの案件を取得しようとすると、都道府県一覧ページにリダイレクトされる

Question

いつもお世話になっております。
今回ハローワークのスクレイピングURLを作成し、そのURLからhtmlを作成しようとしても、なぜか
###やりたいこと
スクレイピングにてハローワークの案件URLを取得し、そこからデータをとってくる。

###不明点
ハローワークの都道府県一覧のページから各都道府県のページに遷移し、そこで各案件のURLを取得し、PowerShellにて案件の内容を表示させること。

###コード

    $formArray = array(130020, 139010);
    foreach($formArray as $form){
        $url = 'https://www.hellowork.go.jp/servicef/'.$form.'.do?action=initDisp&screenId='.$form;
        
        $crawler = $GoutteClient->request('GET', $url);

        $prefectures = $crawler->filter('table td')->selectButton($pref[$cnt])->form();
       
        $crawler = $GoutteClient->click($prefectures);

        $crawler = $crawler->filter('td.center a[href]')->each(function($node) {
                return $node->text();
        });
        foreach ($crawler as $key => $value) {
            
            $value = explode('-', $value);
            $aa = trim($value[0]);
            $vv = trim($value[1]);

        $url = 'https://www.hellowork.go.jp/servicef/'.$form.'.do?screenId='.$form.'&action=initDisp&action=commonDetailInfo&kyujinNumber1='.$aa.'&kyujinNumber2=%0A'.$vv.'&kyushokuUmuHidden=&kyushokuNumber1Hidden=&kyushokuNumber2Hidden=';
        $ccccc = $GoutteClient->request('GET', $url);
        }
    }

上記の$cccccにてvar_dumpをかけても都道府県一覧ページにリダイレクトされてしまいました。
何かパラメータを持たせたうえでないとできないのかわかっておりません。
リダイレクト先のURLは下記になります。
https://www.hellowork.go.jp/servicef/130020.do?action=initDisp&screenId=130020

何卒よろしくお願いいたします。

Answer 1

一度見てみたのですが、130020.doが一覧表示で、詳細は130050ではないですか？
私の方では130050になっていましたが・・・。

Comments

[退会済みユーザー]

大変恥ずかしいです・・・
fagai様の仰る箇所を誤っておりました。
ご回答ありがとうございます。
正常に開くことができました！

[aro10]

ハローワークはAPI提供もあるみたいなので、該当する法人等ならばAPIも使えるかもしれません。
[求人情報オンライン提供 職業紹介事業者ご担当者様へ](https://www.hellowork.go.jp/info/online02.html)
[求人情報外部提供用ウェブＡＰＩ利用手順書](https://www.hellowork.go.jp/dbps_data/_material_/localhost/doc/APImanual2902.pdf)

[退会済みユーザー]

ご提示ありがとうございます！
今回はこちらである程度取得の仕方を選びたいので、APIは使用せず進めていこうと考えております。
ただ、こういったものがあるのですね。勉強になりました。

[aro10]

見た感じあまりサイトリニューアルはしなさそうなので、スクレイピングでも大丈夫かと思います。
質問のサンプルのコードは全力で動くので相手先のアクセス負荷等の問題にならないように1ページアクセス毎にsleep(1)とか付けるほうがいいかと思います。

[退会済みユーザー]

ご回答ありがとうございます。
一応すでにファイル下部にsleep(1)は付けてあります。
別途すべき質問かもしれませんが、現在xmlでのパスを取得できず困っております。
ぜひともご助力いただきたいので、質問を作成後にご回答いただければ幸いです。