質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
Elasticsearch

Elasticsearchは、クラウド向けに構築された、RESTful な API を提供する分散型のサーチエンジンアプリケーションです。

import

自身のプラットフォーム・プログラム・データセットに対して、外部ソースを取り込むプロセスをimportと呼びます。

MySQL

MySQL(マイエスキューエル)は、TCX DataKonsultAB社などが開発するRDBMS(リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

Q&A

解決済

1回答

914閲覧

LogStashでMySQLのデータからElasticSearchへのインポート実行にハマった

taikishiino

総合スコア13

Elasticsearch

Elasticsearchは、クラウド向けに構築された、RESTful な API を提供する分散型のサーチエンジンアプリケーションです。

import

自身のプラットフォーム・プログラム・データセットに対して、外部ソースを取り込むプロセスをimportと呼びます。

MySQL

MySQL(マイエスキューエル)は、TCX DataKonsultAB社などが開発するRDBMS(リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

0グッド

0クリップ

投稿2018/11/06 08:19

編集2018/11/06 09:00

ディレクトリ構成
elastic

    • elasticsearch-6.4.2
    • logstash-6.4.2
    • mysql-connector-java-8.0.13
    • logstash.conf

logstash.conf

1input { 2 jdbc { 3 jdbc_driver_library => "/elastic/mysql-connector-java-8.0.11/mysql-connector-java-8.0.11.jar" 4 jdbc_driver_class => "com.mysql.jdbc.Driver" 5 jdbc_connection_string => "jdbc:mysql://localhost:3306/[db名]" 6 jdbc_user => "root" 7 jdbc_password => 8 statement => "SELECT * FROM [table名]" 9 type => "jdbc-mysql-processlist" 10 } 11} 12output { 13 if [type] == "[table名]" { 14 elasticsearch { 15 manage_template => false 16 hosts => ["localhost:9200"] 17 index => "[table名]" 18 document_type => "%{type}" 19 document_id => "%{id}" 20 } 21 stdout {codec => rubydebug {metadata => true }} 22 } 23}

以下のようなコマンドで、上記のlogstash.confをlogstashで実行できる(らしい)
~$ bin/logstash -f elastic/logstash.conf

しかし、/bin内にlogstashが存在しなくて実行できません。
さらに、実行できたとしてこのディレクトリ構成で可能なのかがわかりません。

そもそもの理解が不足しているため、漠然とした質問となってしまいましたmm
LogStashでMySQLのデータからElasticSearchへのインポートの手順がわかる方いらっしゃいましたら、教えていただけると幸いでございます。よろしくお願い致します。

【参考にした記事】
https://medium.com/veltra-engineering/logstash-mysql-elasticsearch-f2c1165801d

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

sazi

2018/11/06 08:30

[インストール先のパス]/logstash で実行できないのでしょうか?
yoorwm

2018/11/06 08:35

これ、上のディレクトリ構成とか書いてあるところからすると、ひょっとしてダウンロードして配置しただけですか?
taikishiino

2018/11/06 08:49

@yoorwmダウンロードしてtarコマンドで解凍しただけです。
sazi

2018/11/06 08:54

じゃあ、インストールしないとダメですね。参考にしたサイトなどのURLを追記すると、具体的な回答が得られると思います。
taikishiino

2018/11/06 09:03

さらにインストールするための作業が必要なのですね。調べてやってみたいと思います。またつまりましたら、記事編集してまたお聞きするかもしれないですが、よろしくお願い致します。
guest

回答1

0

ベストアンサー

リンク先を辿ると、こちらがLogStashのインストール手順のようですね。

投稿2018/11/06 09:09

編集2018/11/06 09:10
sazi

総合スコア25188

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問