質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

Q&A

解決済

2回答

1218閲覧

タイムスタンプがUTCのログファイルから指定期間のログを取得する方法について

teketeke

総合スコア46

Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

0グッド

0クリップ

投稿2017/12/06 11:32

編集2017/12/07 04:28

###前提・実現したいこと
AWS上にAmazonLinuxで作成したサーバがあります。
このサーバのmaillogから指定期間(たとえば24時間分)のログを取得しようとしています。

以下の問題が出ておりますが、スクリプトでログの取得ができないでしょうか。

###発生している問題・エラーメッセージ
■問題
1.ログの時刻はJSTではない
確認したところログの時刻がUTCになっているようで、9時間時刻がずれていました。
その為、「grep Dec 6」としても、欲しい期間のログが取れていませんでした。
※dateコマンドでは日本の時刻になっておりました。
なお、時刻修正の為のサーバ再起動はできない縛りがあります。

2.ログファイルがローテーションされる
1週間毎にローテーションされるので、取得したい期間によっては2ファイルとかにわかれてしまう。

###該当のソースコード

bash

1grep "Dec 5" /var/log/maillog > /tmp/maillog1 2grep "Dec 6" /var/log/maillog > /tmp/maillog2

■追記1、頂いた回答などを参考に自分なりにスクリプトを作ってみました。

bash

1#!/bin/bash 2 3file_path="/tmp/test-maillog1.txt" 4 5#ファイルがあれば削除 6if [ -e ${file_path} ]; then 7 rm -f ${file_path} 8fi 9 10#引数なければエラー 11if [ "$1" = "" ] 12then 13 echo "no argument" 14 exit 1 15fi 16 17 start=${1} 18 end=0 19 while [[ $start -ge $end ]]; do 20 21 if [ $start -eq 0 ]; then 22 grep "`LANG=C date -u +"%c" | sed -e 's/^....//g' | sed -e 's/[0-9][0-9][0-9][0-9]//g' | sed -e 's/:[0-9][0-9]:[0-9][0-9] //g'`" /var/log/maillog* >> ${file_path} 23 break 24 else 25 dateform=`LANG=C date -u -d "${start} hours ago" +"%c"` 26 grep "`LANG=C date -u -d "${start} hours ago" +"%c" | sed -e 's/^....//g' | sed -e 's/[0-9][0-9][0-9][0-9]//g' | sed -e 's/:[0-9][0-9]:[0-9][0-9] //g'`" /var/log/maillog* >> ${file_path} 27 fi 28 start=$(($start-1)) 29 done

###試したこと
今のところは「grep Dec 5」「grep Dec 6」の結果のmaillogをローカルに持ってきて、取得期間から開始と終了の時間のログまでを手動で切りとっています。

■追記1
スクリプトを作成してみましたが、これだとファイルにまたがっていてもログが取れるのですが、先頭に「/var/log/maillog:」が付きます。

/var/log/maillog:Dec 7 03:54:13 ip-xx-xx-xx-xx postfix/qmgr[12345]: xxxxxxxxx: removed

ログファイル名は「maillog」「maillog-20171203」のようになっているのですが、削除しようとしてsedの正規表現で引っかけて削除しようとしましたが、削除できませんでした。

bash

1cat /tmp/test-maillog1.txt | sed -e 's//var/log/maillog(-[0-9]{8})://' 2cat /tmp/test-maillog1.txt | sed -e 's//var/log/maillog(-[0-9]{8})://' 3cat /tmp/test-maillog1.txt | sed -e 's//var/log/maillog(-[0-9]\{8\})://'

どのようにすれば先頭の「/var/log/maillog:」、「/var/log/maillog-yyyymmdd:」の文字列を削除できるでしょうか。

■追記2
grep の部分で-hを付けることで先頭の「/var/log/maillog:」、「/var/log/maillog-yyyymmdd:」の文字列が出力されなくなりました。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

CHERRY

2017/12/06 12:09 編集

この質問の内容だと丸投げと言われますから、手動で処理している内容を自分でスクリプトに書いてみて、「ここまで書いたけど ここの部分がわからない」という感じで投稿する方が回答がつきやすいと思います。
guest

回答2

0

ベストアンサー

ぱっと思いつくところで、こんな感じでどうでしょうか? 動作確認とかしていませんが。

bash:

1$ egrep "^Dec 5 (1[5-9]|2[0-3)" /var/log/maillog.1 /var/log/maillog > tmp/maillog 2$ egrep "^Dec 6 (0?|1[0-4])" /var/log/maillog.1 /var/log/maillog >> tmp/maillog

dateコマンドが日本語とかJSTなのは、こんな感じで回避できるのでは:

$ LANG=C date -u

投稿2017/12/06 13:10

matobaa

総合スコア2493

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

teketeke

2017/12/07 04:21

回答頂きありがとうございます。 頂いた内容を参考に指定期間のログが出せるようになりました。 自分の方で複数ファイルにまたがった場合を考えてスクリプトを作成してみたのですが、ログの先頭に「/var/log/maillog:」などが付いてしまいます。 もしよろしければこちらについても何か分かりましたらご回答いただけると助かります。
teketeke

2017/12/07 04:27

上記の件、grep -h としたところ「/var/log/maillog:」が付かなくなりました。失礼いたしました。
guest

0

スクリプトを組んでもよいですが、楽をされるのであれば Fluentd などを使用されることも検討できるかと思います。

Fluentd | Open Source Data Collector | Unified Logging Layer
https://www.fluentd.org

投稿2017/12/06 13:04

退会済みユーザー

退会済みユーザー

総合スコア0

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

teketeke

2017/12/07 10:40

ご回答いただきありがとうございます。 Fluentd についてはあまり詳しくない為、今回は一旦スクリプトで対応致します。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問