htmlファイルのパスをURLにしてGoutteでクローリングすると値が取れない

Question

（追記：仮想環境）
CentOS7
Vagrant 1.8.1

使っている環境
php 5.6
symfony 2.2
goutte 3.1

上記環境でクローラーを作っています。
最初は何度も実行をするから、クローリングするサイトへ負荷がかかるだろうと思い、
サイトトップページのhtmlを丸々コピーして仮想環境で作業しています。

ところが、そのhtmlファイルのパスをURLとして、
トップページの情報をvar_dumpしてみたところテキストなどの値が何も取れておりませんでした。

試しにファイルのパスではなく、実際にクローリングしたいサイトのURLで実行してみると
テキストなどの値が取れました。

require_once "/var/www/html/crawler/vendor/autoload.php";

use Symfony\Component\DomCrawler\Crawler;
use Goutte\Client;

    
$cli = new Client();
// 仮想環境に設置したhtmlファイルのパスををurlにしてクローリングすると $crawler に値が入ってこない。
$url = "http://user.com/crawler/top.html";

	// 実際に値を取得したいサイトのURLをurlにすると $crawler に値が入ってきた。
	// $url = "http://www.××××××.co.jp";

// ここでvar_dumpすると上記の違いが出てくる。
$crawler = new Crawler($url);

// サイトトップページの情報をリクエスト
$crawler = $cli->request("GET", $url);
var_dump($crawler);

なぜhtmlファイルのパスだと値が取れないのかお分かりになる方がいらっしゃいましたら
教えていただけますと幸いです。goutteを使っての解決方法でお願いします。
どうぞよろしくお願いします。

確認したこと
・ファイルのパスは間違っていないか。
・htmlファイルの中身がちゃんと入っているか。
・var_dumpした時に下記を見て値が取れていないと判断しました。

["textContent"]=>
    string(1221) "
function getCookie(c_name) { // Local function for getting a cookie value
    if (document.cookie.length > 0) {
        c_start = document.cookie.indexOf(c_name + "=");
        if (c_start!=-1) {
        c_start=c_start + c_name.length + 1;
        c_end=document.cookie.indexOf(";", c_start);

        if (c_end==-1) 
            c_end = document.cookie.length;

        return unescape(document.cookie.substring(c_start,c_end));
        }
    }
    return "";
}
function setCookie(c_name, value, expiredays) { // Local function for setting a value of a cookie
    var exdate = new Date();
    exdate.setDate(exdate.getDate()+expiredays);
    document.cookie = c_name + "=" + escape(value) + ((expiredays==null) ? "" : ";expires=" + exdate.toGMTString()) + ";path=/";
}
function getHostUri() {
    var loc = document.location;
    return loc.toString();
}
setCookie('××××××××××', '×××.×××.×××.×××', ××);
try {  
    location.reload(true);  
} catch (err1) {  
    try {  
        location.reload();  
    } catch (err2) {  
    	location.href = getHostUri();  
    }  
}
This site requires JavaScript and Cookies to be enabled. Please change your browser settings or upgrade your browser."
  }

Answer 1

ありそうなのは仮想環境のhostsにuser.com 127.0.0.1が設定されてないのかなーと思いますが、情報が少ないのでひとまず

$cli->getInternalResponse()->getStatus();

で返ってくるHTTPステータスコードを確認してみはどうでしょうか。

Comments

[Pccla]

回答ありがとうございます。
HTTPアクセスコードを確認したところ「int(200)」が帰ってきました。
が、そこからどうしたらいいのかわからずまた悩んでおります、、

> 仮想環境のhostsにuser.com 127.0.0.1が設定されてない

こちらは /etc/httpd/conf/httpd.conf に書き込む情報か何かでしょうか？？
初歩的なところで詰まってしまい申し訳ないのですがご教示いただけますと幸いです！

[Pccla]

おっしゃった通り、hostの設定がされていなかったことが原因で
仮想環境に設置したhtmlファイルを読み込めていませんでした。
ありがとうございました！！

Answer 2

hide2e3rさんのおっしゃった通り、hostsに user.com 127.0.0.1 と設定したら解決しました。
（192.168.××~としても問題なく表示されるんですね〜、、ここらへんはまだまだ勉強が必要なようです。）

仮想環境のhostsにuser.com 127.0.0.1が設定されてない

お手数をおかけいたしました。お二人とも貴重なお時間ありがとうござました！

Answer 3

URLしか違いがなく、情報が取れないのなら、URLが間違っているのだと思います。
cURL等でちゃんと情報が入手できるか確認されては？

ファイルのパスって書き方が、そのままの意味なのであれば、それが間違いです。

Comments

[Pccla]

回答ありがとうございます。また、書き方が悪く申し訳ありません。
ファイルパスそのままを記述しているわけではなく、
開発環境でアクセスできるURLを記述しております。

HTTPステータスコードを確認したところ「int(200)」が帰ってきてまして、そこからまた悩んでおります。