アクセス解析を自前で作りたい

Question

自分のサイト用にアクセス解析を自前で作りたいと思っています。
javascriptで解析してAjaxで送信し、サーバー側のphpで受け取ってMySQLに溜め込むことを想定しています。

ですがアクセス解析用のデータベースの設計がわかりません。
MySQL自体は使えますが、テーブルや正規化などの設計について知りたいのです。

ネットで検索してみていますがなかなか良い情報がなく、お勧めの書籍やサイトがあればお教え頂きたいと思います。

どうぞよろしくお願い致します。

Answer 1

MySQLの事例ですと、MyISAMを使用して集計単位（日毎や月毎）でパーティーショニングして設計／運用しています。
パーティションの追加や削除については、比較的アクセスが少ない時間帯（国内のサービスであれば深夜など）にcronで1ヵ月分や1年分を纏めて作成／削除しています。

テーブル設計については、基本的にkodaiさんの仰るようなアクセス解析用のテーブルのみで賄っていますが、あまりにもレコード数が多い場合には別途集計用のテーブルを作成して、これもcronで集計しています。

Comments

[退会済みユーザー]

ありがとうございます。
とても参考になります。
そうですね、cronを使って集計はやろうと思っています。

Answer 2

最初はkodaiさんの提示されたテーブル1個でも十分じゃないかと思います。
運用しているうち追加の情報が欲しくなってくると思うので都度カラムを追加してゆくと。

PVやUUや滞在時間の計算が重くなってきたら集計用のテーブルを追加してバッチ処理をする必要が出てくるかも知れませんね。

Comments

[退会済みユーザー]

ありがとうございます。

確かにアクセスの度にINSERTするのは得策ではないようなので、1日分用のテーブル、もしくはファイルに追記して、データを溜め込むのはMyISAMで作ろうかと思っています。

なるべく事例を見ながら設計したいと思っています。
もしそのようなサイトや書籍をご存知であればお教えいただければと思います。

Answer 3

アクセス毎のデータを記録すれば、週次、月次、年次など自由に集計できるので
とりあえずこのテーブルから初めて、自分が欲しい情報を追加していけばいいのではないでしょうか。

create table access_logs (
  id bigint auto_increment primary key,
  date datetime not null,
  path text not null, -- Request path
  ua text, -- User-Agent
  ipaddr text -- Remote IP address
);
create index access_logs_date on access_logs (date);

Comments

[退会済みユーザー]

回答していただいてありがたいのですが、「初めてのデータベース」を質問しているのではなくアクセス解析なりのデータベース設計というのがあるのかと思って質問しています。