質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.51%

  • PHP

    24054questions

    PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

  • CakePHP

    2521questions

    CakePHPは、PHPで書かれたWebアプリケーション開発用のフレームワークです。 Ruby on Railsの考え方を多く取り入れており、Railsの高速性とPHPの機動性を兼ね備えています。 MVCやORMなどを「規約優先の考え方」で利用するため、コードを書く手間を省くことができます。 外部のライブラリに依存しないので、単体での利用が可能です。

cakephpでPHP Simple HTML DOMを使って結果をDBに保存したい

解決済

回答 1

投稿 編集

  • 評価
  • クリップ 0
  • VIEW 941

AMK

score 130

お世話になります

cakePHP Ver2.7を勉強中でスクレイピングの勉強をしています。
スクレイピングまでは出来るようになったのですがそれをDBに保存する方法でつまずいています。

DBにはtaskと言うテーブルを作成して
id
title
url
category
price
を作成しています。

TestController.phpに下記の内容で記述しています。

<?php
App::import('Vendor', 'simple_html_dom');
App::import('Vendor', 'pathreplace_class');
class ShdController extends AppController {
    public $helpers = array('Html', 'Form');
    public function index() {
        $site_url='http://www.lancers.jp';
        $html = file_get_html( 'http://www.lancers.jp/work/search/all?new=1&completed=0&sort=Work.started&direction=desc#' );

        foreach($html->find('table.prof') as $entry){
        $title = $entry->find('p.work_title a',0);
        $user_url = $entry->find('p.work_title a',0)->href;
        $price = $entry->find('p.red',0);
        $category=$entry->find('p.category a',0);
        $this->Post->id = false;
        $this->Post->save($title);
            //$html = "<p>" .  $title->innertext. "</p>" ;
            //echo $site_url.$user_url. "<br>";
            //echo $price ->innertext."<br>";
            //echo $category->innertext."<br>";
            //echo $user_url."<br>";
            //echo $id=str_replace("/work/detail/","",$user_url)."<br>";

        }

    }
}


現状はエラーが出るところで悩み中です。

Viewはindex.ctpを空ファイルで作成しています。
Modelは作成していません。

可能であれば重複チェック機能も入れたいのですが
参考サイトかアドバイスを頂ければ幸いです。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

checkベストアンサー

0

スクレイピング楽しいですよね。

以下に気になることを列挙していきます。
それと、先に公式サイトのブログチュートリアルに1度しっかりと取り組んでみた方が、いきなり今やりたいことに取り組むよりも、効率よく作りたいものを作れると思います。

  1. CakePHPに慣れないうちは規約通りに設定すべきだと思います。
    テーブル名はtaskではなく複数形のtasksにするべきですし、ShdControllerではなく複数形のShdsControllerとするべきです。

  2. Shdモデルを用意しましょう。モデルがありませんとのエラーが出るのではないかと思います。
    追記:今は出ないかもしれません。

  3. ShdsControllerでShdモデルを使う場合には、いきなり$this->Shd->…とできるのですが、Postモデルを使いたい場合は、先に$this->loadModel('Post');等でロードする必要があります。

  4. save()の前に、$this->Shd->create();で初期化しましょう。

  5. save()で渡すデータは下記のような配列です。

Array (
    'Post' => Array (
        'title' => 'タイトル',
        'user_url' => 'URL'
        …
    )
)


6.. 重複チェックには、バリデーションのルールでisUnique()というものがあります。
データバリデーション - CakePHP Cookbook 2.x ドキュメント

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/01/25 11:29

    勉強になりました!
    ありがとうございます!

    キャンセル

同じタグがついた質問を見る

  • PHP

    24054questions

    PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

  • CakePHP

    2521questions

    CakePHPは、PHPで書かれたWebアプリケーション開発用のフレームワークです。 Ruby on Railsの考え方を多く取り入れており、Railsの高速性とPHPの機動性を兼ね備えています。 MVCやORMなどを「規約優先の考え方」で利用するため、コードを書く手間を省くことができます。 外部のライブラリに依存しないので、単体での利用が可能です。