cakephpでPHP Simple HTML DOMを使って結果をDBに保存したい

Question

お世話になります

cakePHP Ver2.7を勉強中でスクレイピングの勉強をしています。
スクレイピングまでは出来るようになったのですがそれをDBに保存する方法でつまずいています。

DBにはtaskと言うテーブルを作成して
id
title
url
category
price
を作成しています。

TestController.phpに下記の内容で記述しています。

<?php
App::import('Vendor', 'simple_html_dom');
App::import('Vendor', 'pathreplace_class');
class ShdController extends AppController {
	public $helpers = array('Html', 'Form');
	public function index() {
		$site_url='http://www.lancers.jp';
		$html = file_get_html( 'http://www.lancers.jp/work/search/all?new=1&completed=0&sort=Work.started&direction=desc#' );

		foreach($html->find('table.prof') as $entry){
		$title = $entry->find('p.work_title a',0);
		$user_url = $entry->find('p.work_title a',0)->href;
		$price = $entry->find('p.red',0);
		$category=$entry->find('p.category a',0);
		$this->Post->id = false;
		$this->Post->save($title);
			//$html = "<p>" .  $title->innertext. "</p>" ;
			//echo $site_url.$user_url. "<br>";
			//echo $price ->innertext."<br>";
			//echo $category->innertext."<br>";
			//echo $user_url."<br>";
			//echo $id=str_replace("/work/detail/","",$user_url)."<br>";

		}

	}
}

現状はエラーが出るところで悩み中です。

Viewはindex.ctpを空ファイルで作成しています。
Modelは作成していません。

可能であれば重複チェック機能も入れたいのですが
参考サイトかアドバイスを頂ければ幸いです。

Answer 1

スクレイピング楽しいですよね。

以下に気になることを列挙していきます。
それと、先に公式サイトのブログチュートリアルに1度しっかりと取り組んでみた方が、いきなり今やりたいことに取り組むよりも、効率よく作りたいものを作れると思います。

1. CakePHPに慣れないうちは規約通りに設定すべきだと思います。

テーブル名はtaskではなく複数形のtasksにするべきですし、ShdControllerではなく複数形のShdsControllerとするべきです。

1. Shdモデルを用意しましょう。モデルがありませんとのエラーが出るのではないかと思います。

追記：今は出ないかもしれません。

1. ShdsControllerでShdモデルを使う場合には、いきなり$this->Shd->…とできるのですが、Postモデルを使いたい場合は、先に$this->loadModel('Post');等でロードする必要があります。

2. save()の前に、$this->Shd->create();で初期化しましょう。

3. save()で渡すデータは下記のような配列です。

Array (
    'Post' => Array (
        'title' => 'タイトル',
        'user_url' => 'URL'
        …
    )
)

6.. 重複チェックには、バリデーションのルールでisUnique()というものがあります。
データバリデーション - CakePHP Cookbook 2.x ドキュメント

Comments

[AMK]

勉強になりました！
ありがとうございます！