パラメータがURLに含まれていないPOST遷移するページをスクレイピングしたい。

前提・実現したいこと

下記サイトをスクレイピングしたいです。
https://www.hellowork.mhlw.go.jp/kensaku/GECA110010.do?action=initDisp&screenId=GECA110010

上記ページform内の情報を受けて下記URLに遷移するようなので、今回は都道府県とページ数を指定して検索結果を取得しようと考えています。
https://www.hellowork.mhlw.go.jp/kensaku/GECA110010.do

発生している問題・エラーメッセージ

下記エラー文が表示されています。

Notice: file_get_contents(): Content-type not specified assuming application/x-www-form-urlencoded in C:\xampp\htdocs\get_post\index.php on line 13

該当のソースコード

php
1<?php
2
3$url = "https://www.hellowork.mhlw.go.jp/kensaku/GECA110010.do";
4$data = array(
5  "tDFK1CmbBox" => 13,
6  "fwListNaviBtn1" => 1
7);
8
9$options = array("http" => array(
10  "method" => "POST",
11  "content" => http_build_query($data),
12));
13$text = file_get_contents($url, false, stream_context_create($options));

試したこと

コンテンツタイプの指定、ヘッダー情報がないことでのエラーではないかと下記コードを実行しましたがエラーになりました。

php
1<?php
2
3$url = "https://www.hellowork.mhlw.go.jp/kensaku/GECA110010.do";
4$data = array(
5  "tDFK1CmbBox" => 13,
6  "fwListNaviBtn1" => 1
7);
8
9$header = array(
10    "Content-Type: application/x-www-form-urlencoded",
11    "Content-Length: ".strlen($data)
12    );
13    
14$options = array("http" => array(
15  "method" => "POST",
16  "content" => http_build_query($data),
17));
18$text = file_get_contents($url, false, stream_context_create($options));

エラーメッセージ

Warning: strlen() expects parameter 1 to be string, array given in C:\xampp\htdocs\get_post\index.php on line 11

Notice: file_get_contents(): Content-type not specified assuming application/x-www-form-urlencoded in C:\xampp\htdocs\get_post\index.php on line 18

どうすれば情報を取得できるでしょうか？
よろしくお願いします。

退会済みユーザー

2020/03/29 15:21

ハローワークの開設者（国）に利用方法の確認をした方がいいと思うぞ。企業とちがって刑事罰発生とか馬鹿にならんことになる前に

m.ts10806

2020/03/29 21:28

そもそも、公式に提供されたAPIでなかったり、許可を得ていないスクレイピングはトラブルのもとです。それこそ不要不急の利用は避けるべき概念ですよ。

ppap115

2020/03/30 02:32

ありがとうございます。サイトの利用に注意します。

m.ts10806

2020/03/30 02:49

「注意」では行動にならないので、確実に許可をえてください(非公開求人ではないとは言え、得られる可能性は低いと思うけど)。

行動規範の内容に同意します

回答1件

ベストアンサー

エラーではありません。Noticeの意味を調べましたか？「通知」という意味です。

POSTでデータを投げるとき、Content-type: application/x-www-form-urlencodedというヘッダが必要ですが、「指定しなかったので、勝手に追加しときましたよ」というお知らせです。

お知らせを消すには、上記ヘッダを指定します。

PHP
1$options = array("http" => array(
2  "method" => "POST",
3  "header" => "Content-type: application/x-www-form-urlencoded",
4  "content" => http_build_query($data),
5));