複数のサイトにPOSTデータを送信し非同期でHTMLを取得する方法

Question

複数のサイトにPOSTデータを送信し非同期でHTMLを取得するプログラムが書けません。

POSTデータなしで複数のURLからHTMLを非同期で取得することと、POSTデータを送信してサイトからHTMLを取得すること（1つのみ）はできました。

以下のサイトのプログラムを組み合わせればできるかと思い、POSTがあるときとないときをif文で分ければ良いと思ったのですが、上手くできませんでした。

回答よろしくお願い致します。

[PHP]file_get_contenst()で複数サイトのhtmlを非同期・高速に取得する | nanoblog
http://nanoappli.com/blog/archives/5743

file_get_contentsでPOSTデータ送信 - Qiita
https://qiita.com/songfei1983/items/fad52c87f84999fb0a45

回答を受けていま現時点でのプログラムを以下に追記しました。

質問をしてからプログラムを修正していたら非同期で取得することはなんとかできましたのですが、以下のプログラムを実行するとPOSTで取得したHTMLが画面に表示されてしまします。

元々の質問からは外れてしまいましたが、回答よろしくお願い致します。

//取得したいページのURL
$url = array();
$url[] = '';
$url[] = '';

//POSTするkey
$postName = array();
$postName[] = '';
$postName[] = '';

//POSTする値
$postValue = array();
$postValue[] = '';
$postValue[] = '';

$htmlText = getHtml( $url, $postName, $postValue);

if (!function_exists('getHtml')){
  function getHtml( $urlList, $postName, $postValue ) {
    $resList = array();
    
    $handle = curl_multi_init();
	
	for($n = 0; $n < count($urlList); $n++){
	    $res = curl_init( $urlList[$n] );
	  
	  if (!empty($postName[$n])){
		  $postData = array( $postName[$n] => $postValue[$n] );
		  curl_setopt( $res, CURLOPT_POST, TRUE);
		  curl_setopt( $res, CURLOPT_POSTFIELDS, http_build_query($postData));
	  }else{
	      curl_setopt( $res, CURLOPT_RETURNTRANSFER, TRUE );
	  }
     
      curl_multi_add_handle( $handle, $res );
     
      $resList[] = $res;
    }
    
    do {
      curl_multi_exec( $handle, $isRunning );
    } while ( $isRunning );
    
    $htmlTextList = array();
    foreach ( $resList as $res ) {
      $htmlTextList[] = curl_multi_getcontent( $res );
	}
	
    foreach ( $resList as $res ) {
      curl_multi_remove_handle( $handle, $res );
      curl_close( $res );
    }
    
    curl_multi_close( $handle );
	
    return $htmlTextList;
  }
}
add_shortcode('getHtml', 'getHtml');

Comments

[kei344]

ご自身で試されたコードを質問文に追記し、「何」が「どのように」わからないのか、コードのどの部分で詰まっているのかなどを具体的に追記されたほうが回答が望めると思います。

Answer 1

mpyw/co
コードも書いてないんで、ざっくり回答ですが、v7.0- ならこれ使うといろいろ制御できて面白かったです。

Answer 2

curl_setopt( $res, CURLOPT_RETURNTRANSFER, TRUE );

これを記述すれば出力されないんですね。

またわからないところが出てきましたが、とりあえず今回疑問だった分は解決できました。

ありがとうございました。