Typhoseのエラー　 765: unexpected token at '<!DOCTYPE html> (JSON::ParserError)

rubyのAPIコールとしてTyphoseを使用しています。

不定期に次のようなエラーが出てしまい原因がなんだかわかりません。
毎回このエラーが出ればまだ良いんですが、エラーが出る時と出ない時があり困っています。
エラーがでるタイミングは不定期で、10回中8回は上手くいくようなレベルです。問題ないときは数時間エラーがでないこともあります。
OSをUbuntsu->CentOSに変えたり、Curlを7.6.1にアップデートしたりなど試行錯誤してみましたが同じ事象が発生しています。

何が原因なのか、またそれを突き止める方法をご教授頂ければと思います。

宜しくお願いします。

ruby
1
2
3def typ
4
5body = '{
6    "code": "JSDK-15",
7    "type": "aaa",
8}'
9
10  timestamp = Time.now.strftime('%s%6N').to_i.to_s
11  method = "POST"
12  text = timestamp + method + body
13  sign = OpenSSL::HMAC.hexdigest(OpenSSL::Digest.new("sha256"), secret, text)
14  header = {
15      "ACCESS-TIMESTAMP": timestamp,
16      "ACCESS-SIGN": sign,
17      "Content-Type": "application/json"
18  }
19
20  request = Typhoeus.post("hogehoge/test/", headers: header, body: body, followlocation: true)
21　return JSON.parse(request.body)
22
23end
24
25
26loop{
27
28puts typ
29sleep(30)
30
31}
32
33##############################
34#エラーコード
35
36
37Traceback (most recent call last):
38        9: from test4.rb:420:in `<main>'
39        8: from test4.rb:420:in `loop'
40        7: from test4.rb:422:in `block in <main>'
41        6: from /home/.rbenv/versions/2.5.1/lib/ruby/2.5.0/csv.rb:1289:in `open'
42        5: from test4.rb:663:in `block (2 levels) in <main>'
43        4: from test4.rb:663:in `loop'
44        3: from test4.rb:707:in `block (3 levels) in <main>'
45        2: from /home/tools:454:in `typ'
46        1: from /home/.rbenv/versions/2.5.1/lib/ruby/2.5.0/json/common.rb:156:in `parse'
47/home/.rbenv/versions/2.5.1/lib/ruby/2.5.0/json/common.rb:156:in `parse': 765: unexpected token at '<!DOCTYPE html> (JSON::ParserError)
48<html lang="ja">
49<head>
50
51<!-- Google Tag Manager -->
52<script>
53(function (w, d, s, l, i) {
54                    w[l] = w[l] || []; w[l].push({
55                        'gtm.start':
56new Date().getTime(), event: 'gtm.js'
57}); var f = d.getElementsByTagName(s)[0],
58j = d.createElement(s), dl = l != 'dataLayer' ? '&l=' + l : ''; j.async = true; j.src =
59'https://www.googletagmanager.com/gtm.js?id=' + i + dl; f.parentNode.insertBefore(j, f);
60})(window, document, 'script', 'dataLayer', 'GTM-TWV92L');</script>
61<!-- End Google Tag Manager -->
62
63    <link rel="apple-touch-icon" sizes="57x57" href="/Content/apple-icon-57x57.png">
64(以下略)
65
66##############################
67

補足追加説明です。
OSをWindowsで試してみたところエラーが出なくなりましたので、APIサーバ側ではなくクライアント側の問題だと理解しております。

また、エラーが出て終了してしまうのはすぐではなく、930秒程一時停止されその後にエラーが吐き出されるという状況です。（サーバー側の問題であれば、すぐにエラーレスポンスが返ってくると思います）
ログをとってみたところ下のコード前後で930秒程、一時的に停止されているようでした。

ruby
1request = Typhoeus.post("hogehoge/test/", headers: header, body: body, followlocation: true)

行動規範の内容に同意します

回答1件

API側がたまにJSONではなくHTMLを返してしまっているということですよね。API側の不具合修正と、クライアント側の例外処理を検討するのがよいと思います。

投稿2019/04/20 05:34

iwamot

総合スコア1154

kzd847686

2019/04/20 05:45

補足説明を追加させていただきました。Windowsで全く同じコードを稼働させると全くエラーは出ませんのでクライアント側の問題だと理解しています。

iwamot

2019/04/20 05:55

APIは自分で管理しているものですか？　そうでないとしたら、一定期間内のコール回数上限などの制約があるのかもしれません。特に並列実行の必要がないのであれば、他のライブラリを使ってテストしてみてもよいと思います。

kzd847686

2019/04/20 06:10

ご回答ありがとうございます。仰る通り１分間のAPIコールの回数制限がありますがそれ以内に抑えています。並列の必要性はないのですが、Typhoseを使うと高速に接続ができるのでこれを利用したいと思っています。（em-httpを試したのですが、こちらだとエラーは出ませんでしたが処理スピードが遅く使えそうにありませんでした・・）

iwamot

2019/04/20 06:20

GTMのIDからすると、BitflyerのサーバからHTMLが返ってきているように見えます。もしBitflyer APIの利用でお困りなら、先方のサポートに問い合わせてみてはいかがですか。

kzd847686

2019/04/20 06:25

なるほど・・アドバイスありがとうございます。

行動規範の内容に同意します