質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.47%

  • .NET Framework

    480questions

    .NET Framework は、Microsoft Windowsのオペレーティングシステムのために開発されたソフトウェア開発環境/実行環境です。多くのプログラミング言語をサポートしています。

高度なjavascriptで構成されたサイトのスクレイピング

解決済

回答 3

投稿

  • 評価
  • クリップ 1
  • VIEW 1,923

araposama

score 4

 質問

このような画面から、刻々と変わるFXの価格をプログラムで取得したいのですが、どのような方法があるでしょう。.NETから使用できる方法が希望です。

https://fx.click-sec.com/neo/web/trade

 前提知識

.NETのWebBrowserクラスの使用経験はあります。WebBrowserだけでは、このような高度なサイトの分析は難しいのではと考えています。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 3

checkベストアンサー

+3

おそらくWeb開発をほとんどしたことがない方なのですよね。なのでスクレイピング以前に、単なるブラウザの使い方が中心になるのですが。

まずこのトップ画面のレートがパカパカしていることろの情報が取れればいいのではないでしょうか?

GMOクリック証券 - FXなど投資を身近にもっと便利にするネット証券会社
https://www.click-sec.com/

だとするならば、まずはどうやって情報を取得しているのかを調べます。ChromeでもFireFoxでもIEでもEdgeでもほぼ同じですが一応Chromeで説明します。まずF12を押し開発者ツールを開きNetworkを開きます。

そしてレートが変化したときに発生したリクエストを見ると、以下のURLで、
https://www.click-sec.com/data/fxneo/rate/rate.csv?_=1460479578816

中身がこんな感じのCSVであることが分かります。

USD/JPY,108.757,108.760,822,108.766,107.869,-26,24,1,2016/04/13 01:53:27
EUR/JPY,123.752,123.758,678,123.998,123.066,5,-8,1,2016/04/13 01:53:27
GBP/JPY,155.000,155.011,1378,155.514,153.497,-31,28,1,2016/04/13 01:53:27
AUD/JPY,83.345,83.352,1385,83.349,81.863,-54,51,1,2016/04/13 01:53:26
NZD/JPY,75.079,75.093,1083,75.082,73.914,-54,50,1,2016/04/13 01:53:27
CAD/JPY,84.998,85.015,1325,84.999,83.544,-21,18,1,2016/04/13 01:53:27


なので、スクレイピングではなく、単にリクエストを投げ、CSVで値を受け取れることがすぐにわかります。

後ろについている「1460479578816」はおそらくキャッシュ対策なのでしょう。きちんと見てませんが、おそらく「(new Date()).getTime()」そして得られた値を付けるだけで問題ないと思います。

という感じなのですが。伝わりますか?

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/04/13 02:41

    お、これ面白いですね。

    キャンセル

  • 2016/04/14 21:11

    これはすごい。発生したリクエストを解析するという発想がありませんでした。Web開発の経験がある人なら普通のことなのでしょうが、大変助かりました。他の方と違い適切なご回答です。ありがとうございます!

    キャンセル

+2

スクレイピングせずともAPIで公開されているものもあるようです。
「FX API」で検索されれば、望まれるものに近いものがあるかもしれません。

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/04/14 20:46

    質問内容への回答になっていませんね。

    キャンセル

0

直接的な回答ではありません。

古くは、半二重のアナログモデムの時代より、
株価などは、専用サービスが有りました。
一般経営者に、コンピュータの力を知らしめたのは
日経WHO'S WHO とほぼ同時に始まった、ネットワークサービスでした。
それには、Ticker サービスも含まれ、株価提供の機能も含まれていました。
時は移り、
高速売買でサヤを稼ぐ方々は、世界中のシステムの応答速度の違いを利用して、
サヤトリを行う事が可能な処まで来ています。
専用の高速回線と、データサービス、高速な環境を使って、限りなく市場の速度に近く。


外貨市場は、世界中の何処かで市場が開いています。
手数料と、情報提供料が十分ペイするレベルにある単位で売り買いをする前程で、
他の市場の売り買いの結果と、異なる価格が付いている市場で、売買することにより、
サヤトリが可能です。

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/04/14 20:47

    何ですかこれは。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.47%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

同じタグがついた質問を見る

  • .NET Framework

    480questions

    .NET Framework は、Microsoft Windowsのオペレーティングシステムのために開発されたソフトウェア開発環境/実行環境です。多くのプログラミング言語をサポートしています。