ログ解析結果グラフを非ソフトエンジニアに手軽に見てもらう方法

とある組み込み製品について、市場稼働時のログを解析し、
障害率等をまとめたグラフを作る仕事をここ最近毎日行っています。
今はエクセルで行っています。

これは最終的にグラフで可視化し、事業判断に用いるためのものなので、
ソフトに詳しくない人（技術部長や事業部長が）が
「手軽に」「いつでも」「最新のグラフを」見れることが重要です。

しかしエクセルでデータを集計しグラフ化するのは時間がかかるので、
完全自動化を検討しています。
イメージは以下です。

（１）以下の動きをするPythonプログラムを組む。
あるフォルダ以下にあるログファイルを全て解析し、
解析結果（日毎のエラー数、取引数等）を
ファイルベースのデータベース(SQLite)に登録する。
Pythonを使うのは、単に私が使い慣れているからです。
この部分はソフトメンバーのみが行うため、
環境構築は自由が利く。つまりライブラリなどは好き勝手に使える。

（２）ファイルベースのデータベースは、社内ファイル共有サーバーの
決めた場所に入れておく。
なお、ファイルベースなのは、単にデータベースサーバーを立ち上げるのが
社内的に色々と面倒だから。

（３）↑のデータベースを自動で読み込んで、見たいデータのグラフを
だれでも手軽に見れるようにしたい。

（１）（２）は実現方法がハッキリしているのですが、
（３）をどんなツールを使えばいいか、悩んでいます。
部内では共有ファイルサーバーは存在します。
ただしファイルを共有できるだけで、Apacheなどを立ち上げたりすることができません。

（３）の選択肢は安直には以下が思いつきます。

(A)Pythonでデーターベースにアクセスしてグラフを書くデスクトップアプリを作る。
→Pythonスクリプトをexe化して配布することになる。
exe化できるライブラリがかなり制限されるはずである。
バージョンアップの際にいちいち配布しなおすことになるが、
あちこちで新旧バージョンが混在しかねない。

(B)データーベースにアクセスしてグラフを書くWEBサイトを作る。
→本当ならこれが理想的。ただし社内でWEBサーバーを立ち上げる手順が面倒というか前例なく機材もない。

(C)ファイルサーバーにExcelフィルを置いておいて、
そのExcelの中でデーターベースにアクセスし、グラフを掻く。
→いちばん現実的かも。やったことないのでできるのか不明であるが。

そこそこの規模の会社におり、社内ネットワークが色々とややこしくWEBサーバーを勝手に立ち上げたりすることができません。

何か、もっと簡易で、社内の誰でも使える方法があればご教示をいただきたく。
よろしくお願い申し上げます。

以上

行動規範の内容に同意します

回答5件

次のようにしては如何でしょう？

ファイルサーバーに html, javascrip ファイル、csv データファイルを置く。
グラフを見たい人は、 html ファイルを web ブラウザで開く。
csv データは、別ツールの集積結果であり、適宜更新をする。

d3.js を利用すると、csv ファイルなどからグラフをつくることが可能です。
csvファイルを heml のテーブル表示にして、ソート可能にすることができる javascript のライブラリーもたくさん存在しています。
例： http://jsgt.org/lib/jquery/plugin/csv2table/v002/test.htm

投稿2016/05/07 08:52

katoy

総合スコア22324

sin_250

2016/05/08 03:08

回答ありがとうございます。d3.jsを調べてみましたが、かなり高機能ですね。 javascriptも本格的にはやったことがないのですが、WEB全盛かつこれでデスクトップアプリも作れてしまうのだから、覚えておいたほうがいいと思うようになりました。ありがとうございました。

行動規範の内容に同意します

katoyさんと同じやり方になりますが、次のような方法はどうでしょうか？

ファイルサーバーに html, javascriptファイル、JSONデータファイルを置く。
グラフを見たい人は、 html ファイルを web ブラウザで開く。
ソフトメンバーの人は、適宜pythonスクリプトでJSONデータを作りなおす

グラフの作成はamchartsで行います。
デモのどのグラフでもいいので、editしてもらうと分かるのですが、最近のamchartsは、JSONデータだけあれば、グラフを描くことができます。作りなおすファイルが一つで済むので、今回のような案件には適しているのではないでしょうか。
https://www.amcharts.com/demos/

もう一つのは案は、ソフトメンバーがPDFのレポートを作るスクリプトを書くことです。インタラクティブなグラフではありませんが、PDFなのでメールで送ることもでき、利用者側からすると便利だと思います。ソフトメンバーの方も、毎朝一回スクリプトを動かすだけです。
スクリプトは次のような手順を取ります。

matplotlibを使ってグラフの画像をファイルにする
reStructuredTextフォーマットの文書を作り、グラフも読み込んでおく。
rst2pdfを使ってreStrucuredTextをPDF化する

http://sakito.jp/python/rst2pdf.html

投稿2016/05/07 12:19

lightson

総合スコア553

sin_250

2016/05/08 03:49

ご回答ありがとうございました。まずはjavascriptでグラフを書いてみるところからトライしてみます。これである程度の方向性を見出すことができました。ありがとうございました。なお、ベストアンサーを選ぶのが難しいのですが（本当はみなさんにあげたいのですが）具体的なイメージがわくElectronを紹介いただいたracccy様にさせて頂くこと、なにとぞご了承ください。今後とも、よろしくお願いいたします。

行動規範の内容に同意します

ベストアンサー

前時代的ですけど、Accessで作るとかですかね。全くお勧めはできませんが。

もし、(B)でのやり方が確立できそうであれば、Electronで作るという手もあります。Webの技術そのままでデスクトップアプリにすることができますので、そのままファイルサーバーに置くだけで使うこともできると思います。ただ、アプリのサイズが結構でかい事だけが難点です。

あと、分析対象のグラフで幅が固定で、検索や任意指定が不要なら、データ収集後にExcelファイルも作ってしまうと言うのもあるかと思います。月ごとにフォルダを分けて日ごとにファイルを分ければ良い感じになるかと。PythonからExcelファイルを作るライブラリもありますのでPythonでそのまま作成というのもありだと思います。この場合、Excelファイルに限定する物ではありませんので、PDFにして、そのまま印刷もできますという選択もできます。

他には、LibreOfficeのODSファイルにしてPythonでマクロを書くという技もあるのですが、PythonマクロをODSファイルに組み込むのが結構めんどうらしいのであまりお勧めはできません。

投稿2016/05/07 09:52