質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

89.21%

MariaDBが起動しなくなった

解決済

回答 1

投稿 編集

  • 評価
  • クリップ 0
  • VIEW 2,913

tanak

score 7

 前提・実現したいこと

最低でもMariaDBをSELECT出来る状態に戻したい。
(SELECTが出来れば最低限のバックアップが取れるので。)

 背景

2018/02/05 23:00頃までは問題なく動作していました。
2018/02/06 17:00頃DBに接続しようとした所、接続できなかった為DBサーバが停止していた事に気づきました。

 発生している問題・エラーメッセージ

  • systemctl status mariadb.service
 mariadb.service - MariaDB database server
   Loaded: loaded (/usr/lib/systemd/system/mariadb.service; disabled; vendor preset: disabled)
  Drop-In: /etc/systemd/system/mariadb.service.d
           └─migrated-from-my.cnf-settings.conf
   Active: activating (start) since Tue 2018-02-06 22:10:12 JST; 4s ago
  Process: 26633 ExecStartPre=/bin/sh -c [ ! -e /usr/bin/galera_recovery ] && VAR= ||   VAR=`/usr/bin/galera_recovery`; [ $? -eq 0 ]   && systemctl set-environment _WSREP_START_POSITION=$VAR || exit 1 (code=exited, status=0/SUCCESS)
  Process: 26631 ExecStartPre=/bin/sh -c systemctl unset-environment _WSREP_START_POSITION (code=exited, status=0/SUCCESS)
 Main PID: 26675 (mysqld)
   CGroup: /system.slice/mariadb.service
           ├─26675 /usr/sbin/mysqld
           └─26693 addr2line -C -f -e /usr/sbin/mysqld

Feb 06 22:10:13 150-95-x-x mysqld[26675]: /usr/sbin/mysqld(+0x840b11)[0x7f31ce0a2b11]
Feb 06 22:10:13 150-95-x-x mysqld[26675]: handler/ha_innodb.cc:4432(innobase_init(void*))[0x7f31cdec7254]
Feb 06 22:10:13 150-95-x-x mysqld[26675]: sql/handler.cc:512(ha_initialize_handlerton(st_plugin_int*))[0x7f31cdd4b6f0]
Feb 06 22:10:13 150-95-x-x mysqld[26675]: sql/sql_plugin.cc:1694(plugin_init(int*, char**, int))[0x7f31cdd4cf22]
Feb 06 22:10:13 150-95-x-x mysqld[26675]: sql/mysqld.cc:5253(init_server_components())[0x7f31cdca8ef8]
Feb 06 22:10:13 150-95-x-x mysqld[26675]: sql/mysqld.cc:5845(mysqld_main(int, char**))[0x7f31cdcad1f9]
Feb 06 22:10:13 150-95-x-x mysqld[26675]: /lib64/libc.so.6(__libc_start_main+0xf5)[0x7f31cb9a8b35]
Feb 06 22:10:13 150-95-x-x mysqld[26675]: /usr/sbin/mysqld(+0x43fb9d)[0x7f31cdca1b9d]
Feb 06 22:10:13 150-95-x-x mysqld[26675]: The manual page at http://dev.mysql.com/doc/mysql/en/crashing.html contains
Feb 06 22:10:13 150-95-x-x mysqld[26675]: information that should help you find out what is causing the crash.

 試したこと

  • service mysql startで起動を試みる
    →ダメだった
  • service mysql restartで起動を試みる
    →ダメだった
  • /var/log/mysql/var/log/mariadbの確認
    →ログは保存されていなかった(ファイル自体が存在していなかった)
  • 新規VPSサーバをレンタルし新規MariaDBをインストールし、そこに/data/mysqlの全てのコピーし、chownでmysqlに設定した
    →同様のエラーが発生
  • innodb_force_recoveryの値を変えて起動テスト
    vim /etc/my.conf.d/server.cnf
[mysqld]
 innodb_force_recovery = 1    #16まで、起動するまで一つずつ上げていく


5で起動できたが、以下の通り非常に不安定な状態。
ローカルマシンからは以下のエラーの通り絶対に接続できない。

[root mysql]# mysql -u root -p
Enter password: 
ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/data/mysql/mysql.sock' (111)

外部マシンからIPアドレスを指定して接続した場合はエラーになったり正常に接続できたりする。

[root mysql]# mysql -h 150.95.x.x -u root -p
Enter password: 
ERROR 2013 (HY000): Lost connection to MySQL server at 'handshake: reading inital communication packet', system error: 104


 補足情報(FW/ツールのバージョンなど)

  • CentOS Linux release 7.3.1611 (Core) 
  • MariaDB-server-10.2.7-1.el7.centos.x86_64
  • /etc/my.cnf.d/server.cnf
[mysqld]
innodb_buffer_pool_size=6GB
max_allowed_packet=256MB
character-set-server = utf8
wait_timeout = 30
event_scheduler=ON
datadir=/data/mysql
socket=/data/mysql/mysql.sock
  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 過去に投稿した質問と同じ内容の質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

check解決した方法

0

innodb_force_recoveryを6にした所SELECTに成功しました。
この後mysqldumpしました。

 原因について

df -h した時にMariaDBで使用していたディスクの使用率が100%になっていました。
それが原因かと思いました。
(ログがない為予測でしか無いのですが)

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 89.21%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

同じタグがついた質問を見る