質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

87.90%

APIの存在しないWebサービス(Pixiv)の解析方法

解決済

回答 3

投稿

  • 評価
  • クリップ 3
  • VIEW 4,611

score 53

Pixivの専用ブラウザを開発しようと考えていますが、公式にAPIを公開していないようで困っております。
検索すると、詳しい方が解析していますが、情報が古いのと、今後変更があった時のことを考えて自分で解析できるようになろうと思います。

さて、その解析はどのように行うべきなのでしょうか?
どこから手をつけていいのかがよくわからない状態です。

Pixivだけではなく、Webサービス全般において、解析に用いるツールや考え方、参考になる書籍などがありましたら情報をいただければと思います。

以下に開発予定の環境を示しますが、環境が違っても、参考になる情報でしたらご教示いただければと思います。
開発言語:VisualC#、WPF
開発OS:Windows 7

よろしくお願いします。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 過去に投稿した質問と同じ内容の質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 3

checkベストアンサー

+2

公式に提供されていない方法で何かを行おうとした場合、手軽な方法というのはあんまりなく、
正攻法で地道に臨むしかないかと思います。

専用ブラウザ(定義としては、そのwebサービスのページ構成等に捉われず、独自機能や画面遷移が用意されたブラウザ)開発にあたってwebサービスを解析するのに必要なのは以下の様な感じでしょうか。

前提

  • webアプリケーションの一般的な作り方を理解していること
  • HTML(及びそれに影響を与えるJavascript)について理解していること

ツール

  • Chromeの開発ツールやFirefoxのfirebug(個人的にはこちらがおすすめ)といったHTTP通信及びHTML、DOMを確認できるツール

方法

  • 1ページずつ実際にアクセスして、その時のリクエストとレスポンスを地道に解析する

必要な心構えと体制

  • 運用から見た場合、クラッキングと区別できないアクセスをしていると判断されても仕方の無い行為であることを自覚すること(APIが存在しないということは公式的にはブラウザでアクセスしろという事です)。
    *専用ブラウザの開発及び使用によってアクセス制限や法的な措置を取られる可能性があります。
  • 仕様変更があった場合に対応できる体制

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/07/03 14:03

    ご返信有り難うございます。
    心構えは承知しました。

    ツールですが、「TCPDUMP」というものを使って調べている方もいるそうです。
    この場合TCPの知識も必要になるということでしょうか…
    かなり地道な作業のようですね。

    キャンセル

  • 2016/07/03 14:17

    かなり地味な作業というのは間違いないです。

    うーん、今回の場合、webアプリケーションの解析でtcpdumpまで使って解析が必要なケースってあんまりないと思います。

    DOMに影響を与えない、もしくは開発者ツールで補足できない(していない)ような通信、
    例えばjavascriptやFLASHで何かサーバと通信しているのをリアルタイムで解析したい
    というようなケースかと思います。
    ブラウザゲームの通信解析とか。
    その辺になってくると、TCP/IP(場合によってはUDPも)の基本的な知識があるのは前提で、かつ通信している内容についての知識も必要になってきますね。

    キャンセル

  • 2016/07/03 14:55

    ご返信有り難うございます。
    なるほどこのケースではそこまでしなくて大丈夫なんですね。

    キャンセル

+2

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/07/03 14:54

    ご返信有り難うございます。ガイドラインの以下に該当するということでしょうか?
    >クローラーなどのプログラムを使って作品を収集する行為
    クローラーではないんですが…

    キャンセル

  • 2016/07/03 15:35

    横からすみません。
    私の解釈だと、利用規約中の

    通常の範囲を超えて本サービスのサーバーに負担をかける行為、もしくは、本サービスの運営やネットワーク・システムに支障を与える行為、又はこれらの恐れのある行為。

    でしょうか。

    また、通常の利用ではない以上、

    法令、公序良俗又は本規約もしくはその他の利用条件等に違反し、又は他者の権利を侵害すると当社が判断する行為。

    その他、当社が不適切と判断する行為。

    に抵触すると判断される可能性は十分にありますね。

    解釈については直接問い合わせない限りは明確な答えは出ないかと思いますよ。
    サービス運用者からすればイレギュラーな使い方なのは間違いなく、例えば公式に専用ブラウザを提供するような予定がある場合、完全にビジネス上の障害になる行為ですから。

    キャンセル

  • 2016/07/03 15:39

    作品の収集はしないんですね。失礼しました。

    http://www.pixiv.net/terms/?page=term
    > その他、当社が不適切と判断する行為。

    そのアプリケーションで広告のクリック率が下がるとか、不利益が出ないようであれば問題ないと思いますが、問い合わせされることをおすすめします。

    キャンセル

  • 2016/07/03 16:56

    ご返信有り難うございます。
    承知しました。問い合わせてみます。

    キャンセル

+1

この回答は操作ミスでコメントとして入力するべきものを誤って回答としたものです。削除依頼を出します。

横からすみません。
私の解釈だと、利用規約中の

通常の範囲を超えて本サービスのサーバーに負担をかける行為、もしくは、本サービスの運営やネットワーク・システムに支障を与える行為、又はこれらの恐れのある行為。

でしょうか。

また、通常の利用ではない以上、

法令、公序良俗又は本規約もしくはその他の利用条件等に違反し、又は他者の権利を侵害すると当社が判断する行為。

その他、当社が不適切と判断する行為。

に抵触すると判断される可能性は十分にありますね。

解釈については直接問い合わせない限りは明確な答えは出ないかと思います。

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/07/03 16:57

    ご返信有り難うございます。
    承知しました。
    専用ブラウザを作っている方は何人かいらっしゃるので、大丈夫だとは思いますが、念のため問い合わせてみます。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 87.90%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

同じタグがついた質問を見る