phpを使用してサイトをクロールしたいが意味不明です。

Question

phpを使用してサイトをクロールしたいのですが、様々な記事を読んでもcomposerを使うとか、require_once dirname(FILE) ........などが書いてあるのですが、いまいちクロールするということと、サンプルコードがピンときません。

申し訳ありませんが、クロールとはなにか、サンプルコードの使い方を教えて頂きたいです。

Comments

[izkn]

こちらの質問が他のユーザから「質問の範囲が広すぎる」という評価を受けています
わからない点を明確にし、調査したこと・試したことと共に記入していただくと、回答が得られやすくなります。

[退会済みユーザー]

漠然としすぎていて回答に困ります。参考にしたサイトやページが有るならそれを示して欲しいし、実際にやってみたことも説明して欲しいし、やってみてどういう問題が起きたのかを示してくれないと適切に回答できないと思われます。

[tanat]

こちらの質問が他のユーザから「質問の範囲が広すぎる」という評価を受けています
わからない点を明確にし、調査したこと・試したことと共に記入していただくと、回答が得られやすくなります。

[退会済みユーザー]

こちらの質問が他のユーザから「問題・課題が含まれていない質問」という評価を受けています
teratailでは、漠然とした興味から票を募るような質問や、意見の主張をすることを目的とした投稿は推奨していません。
質問の意図や解決したい課題を明確に記述していただくと、回答が得られやすくなります。

[退会済みユーザー]

クロールが何かわからないのに、「クロールしたい」って、質問の方が意味不明です。

Answer 1

phpを使用してサイトをクロールしたい
申し訳ありませんが、クロールとはなにか

この時点で大いなる矛盾が発生しています。

クロールとは「他のWebサイトからHTMLファイルなどをDLして分析や解析」することです。
人間様がそんなことしたくないから、必要そうな情報だけをスクリプトやプログラムを組んで効率よく抜き出すのです。

そのためには「まず抜き出したい情報という目的が必要」ですし、
その目的を叶える為には高度なプログラミング知識を必要とします。

クロールしてみたいから目的を教えろだなんて質問は成立しません。

phpを使用してサイトをクロールしたい

そもそも何故PHPでクロールする必要があるのでしょう？
基本的にPHPとはHTMLファイルを生成することに特化した言語なので、
クロールに関してはむしろ不得意分野です。

まぁ、PHPでも挙動は素直だし関数名が糞なくらいで別段やってやれない事はなく、
PHPで頑張る後輩の為に偉大なる先人たちが軌跡としてライブラリを作ってくれています。
このライブラリを扱う為のお作法がcomposerを使うとか、require_once dirname(FILE)という訳です。

ピンと来ないからこそのPHPだと思うのですが…
そこが理解出来るまでクロールは厳しいと思います。
何でもいいから何か作って公開のプロセスを繰り返してみてください。

Comments

[退会済みユーザー]

ありがとうございました。
質問内容も含め、もう少し目的や状況を把握してから質問したいと思います。