一つのログファイルに複数のユーザーが書き込み際に問題が。

Question

###前提・実現したいこと
タイトル通りなのですが、一つのログファイルに対して複数のプロセスで書き込む運用を行っております。log4netを使用し、ロックすることなく書き込めるのですが下記の問題がございます。

###発生している問題・エラーメッセージ
〇ファイルが複数出力される。(ロックしそうな際に別ファイルに出力される？。)
〇ログが順序よく出力されない。プロセス単位で出力されない。他のプロセスが処理途中に書き込んでしまい、
ログが見難くなる。(時系列通りには出力される。)

###該当のソースコード
下記の設定でマルチプロセス書き込みはできるのですが。

<lockingModel type="log4net.Appender.FileAppender+MinimalLock" />

###補足情報(言語/FW/ツール等のバージョンなど)
log4netで上記の問題を解決する方法がございますでしょうか。
また、その他ライブラリで解決できるのであれば挙げていただけると嬉しいです。

Comments

[KoichiSugiyama]

「ログが順序よく出力されない。プロセスごとのまとまりで出力されずにバラバラに出力されてしまう。」というのは、「順序良く」の意味を時系列でなく一つのプロセスが終了するまでを一つの書き込み単位としたい、ということでしょうか？

[yuki00079]

返信ありがとうございます。説明下手で申し訳ございません。「順序良く」は時系列ではなくプロセス単位を意味しております。

Answer 1

log4netのコンフィグについては、ここで同様の問題の解決策が乗っていたので共有します。

個人的な意見としては、マルチプロセス等を抱える複雑な要件ではlog出力クラスをある程度自前で作成しておくべきだと思います。

〇ログが順序よく出力されない。プロセスごとのまとまりで出力されずにバラバラに出力されてしまう。

各ログを一つのファイルにそれぞれ順次追記していけばまずプロセスごとの纏まりで出力することはできません。
正確な希望がわかりませんが、マルチプロセスのログを適切に管理したい場合、ログ出力用の受け皿となるクラスを自前で作成する必要があると思います。
先ほど紹介したページでは、log4netのバッファリングに任せてグループ化する方法をとっていましたが、それをプログラマーが制御できない状態というのは良い状態とは言えません。（先ほどのページのように要件を満たしてる場合は当然良いのですが。）

Queueを使って書き込む内容を自前で整列させたり、ログの書き込み処理を別のスレッドに逃がしたり、はたまた構造化したりということをいつでも改善できるように、また特定のログ出力技術にロックインされないように、log4netを使うならこれを別のクラスを一旦ラップしておくのを推奨します。ログ出力クラスはいくらでも再利用しますしね。

Comments

[yuki00079]

返信ありがとうございます。
>ログ出力用の受け皿となるクラスを自前で作成する必要があると思います。
ライブラリのみでの実装では困難のようですね。当方の要件を満たすにはログクラスの新規作成かラッパークラスですか。ログ出力自体はどのプロジェクトでも応用できるので解決案とさせていただきます。

[haru666]

他に回答つかなかったのが残念ですが…　一応、自分はパフォーマンス重視の案件ではSLAB（Semmantic Logging Application Block）というのも使っていたことがあります。

ただ、各クラスと１：１になるようなログを吐くためのクラスをコーディングしておくような作りでテンプレート無しに実装するのが困難だったのと、Windows専用だったことがあって、結局自分もlog4netラップしてます。物凄いパフォーマンスが必要な要件に出会わない限りいいかなと…。

SLABを正しく使い、そのログをデータベースに保存しておけば、クエリ検索でグループ化はどうとでもなります。興味があれば検索してみてください。