質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
Kibana

Kibanaとは、ElasticSearchをバックエンドとする、データを可視化するGUIツールです。

Elasticsearch

Elasticsearchは、クラウド向けに構築された、RESTful な API を提供する分散型のサーチエンジンアプリケーションです。

MySQL

MySQL(マイエスキューエル)は、TCX DataKonsultAB社などが開発するRDBMS(リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

Q&A

0回答

2413閲覧

mysql,logstash,elasticsearch,kibanaを用いたセンサーデータのリアルタイム可視化

K-Tomoya

総合スコア11

Kibana

Kibanaとは、ElasticSearchをバックエンドとする、データを可視化するGUIツールです。

Elasticsearch

Elasticsearchは、クラウド向けに構築された、RESTful な API を提供する分散型のサーチエンジンアプリケーションです。

MySQL

MySQL(マイエスキューエル)は、TCX DataKonsultAB社などが開発するRDBMS(リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

0グッド

0クリップ

投稿2017/08/04 05:43

編集2017/08/04 05:49

###前提・実現したいこと
logstash,elasticsearch,kibanaでAndroidから取ったセンサーデータをリアルタイムに可視化しようとしています。
logstashでmysqlからelasticsearchにデータを移すときに、実行すると、mysqlのsql文を実行した後にstopping pipelineと警告が印字されて、実行が終わってしまいます。
また、エラーログの出力先がないというエラーも出ますが、解決策がわかりません。

その状態でkibanaをブラウザで見ると、refreshIntervalDefaultsで5秒に一回の更新にしてるのですが、20秒に一回ぐらいの不定期更新になってしまいます。
mysqlとlogstashの接続が毎回切断されることが原因だと思っているのですが、それ以外の問題点があるかもしれません。それも含めて、解決策を提案していただけると幸いです。

目指している完成状態は、5秒に一回、もしくはそれより短い間隔で、kibanaが更新されることです。

###発生している問題・エラーメッセージ
logstashを実行すると、エラーメッセージの出力先がないというエラーと、stopping pipelineという警告が出る。
イメージ説明

###該当のソースコード

logstash.conf↓以下ソースコード jdbc { jdbc_driver_library => "mysql-connector-java-5.1.39/mysql-connector-java-5.1.39-bin.jar" jdbc_driver_class => "com.mysql.jdbc.Driver" jdbc_connection_string => "jdbc:mysql://localhost:3306/serversensordb" jdbc_user => "tomoya" jdbc_password => "basuapuri" statement => "select * from sensornode where time > :sql_last_value" type => "sensor" tracking_column => time jdbc_default_timezone => Japan } } output { elasticsearch { hosts => ["localhost"] index => "%{type}" document_id => "%{time}" } }

###補足情報(言語/FW/ツール等のバージョンなど)
logstash-5.5.0
elasticsearch-5.4.1
kibana-5.4.1-darwin-x86_64
mysql-5.7.16

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

まだ回答がついていません

会員登録して回答してみよう

アカウントをお持ちの方は

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問