常連

## テーマ、知りたいこと

PHP, MysqlでWebシステムを作成しています。
データベース設計時にカラムIDを「c + テーブル番号 + 連番」と定義しています。
例えばテーブルID「t0001」に対して「c0001001, c0001002...」としています。
この設計は避けるべきでしょうか？

## 背景、状況

ExcelでカラムIDの対応表を別途用意しており、これを見ながら作業をしています。
おそらく「避けるべき」とする回答が多いと思いますので、私の考えるメリットを挙げます。

・テーブルの結合時にカラムIDが競合しない
・カラムID単体でテーブルIDが割り出せる
・テキスト検索で利用箇所の特定が容易
・固定長なのでコードが整理しやすい（何となくですが...）

皆さんの意見をお聞きしたいです。
よろしくお願い致します。

## 追記
逆に「id, name...」のような構成にあまりメリットを感じていません。
一番は可読性ですが、対応表で十分に感じています。
もし連番ではない命名方法にすべき理由があれば教えていただきたいです！
よろしくお願いします。

## 追記_2
想像以上に厳しい意見が多く、勉強不足を痛感しております。
複数人開発の経験がなく、オレオレなフレームワークで独自路線を貫いてきましたが、しっかり勉強して出直してきます。
回答いただいた皆様ありがとうございました。

カラム名を連番で命名することについて

### 概要
非常に件数の多いデータをデータベースにINSERTする必要がありまして、
処理に膨大な時間がかかりそうなので、途中失敗を避けるためありえそうなリスクをあらかじめ知っておきたいと考えています。
もし何か知見をお持ちの方がいらっしゃいましたら、アドバイスいただけると助かります。

### 要件
使用するハードとソフトの要件は以下の通りです。
PC：amazon RDSのdb.m7g.large（AWS Graviton3 プロセッサ、メモリ8GB、ストレージ1TB）
OS：Amazon Linux2
データベース：MariaDB10.6

登録するデータ：１レコード当たり1kB程度のデータを約5億(500M)件分
付与するインデックス：auto incrementするIDと、別に登録するIDの　計２つ

### 具体的に質問したいこと
- そもそもPCのスペックは足りそうでしょうか？
まず、データの合計サイズは1kB x 500M件 なので、少なくとも500GBのストレージは必要になるはずです（インデックスも含めるともっとかも）。
一方、メモリの方は実際どの程度必要かよくわかりません。（処理の途中でメモリ上限を超えたりすると困ります。）
他にスペックで問題のありそうなところがあれば教えてほしいです。

　
　
- ありがちな設定ミスがあれば教えてください。
例えば、データベースの隠れた上限閾値があるとか、何か特別な設定が必要とか、
ビッグデータをデータベースに登録するにあたり、何か気を付ける点があれば教えてほしいです。


【MariaDB】約5億レコードを登録できるのでしょうか？

データベースに１次元配列を保存したいのですが、うまくいきません。
動かないのですが、イメージとしてソースをアップ致しました。
初心者で申し訳ありませんが、よろしくお願い致します。
___
**備考**
・MariaDBを使用しています。
・配列をセットするときに適切なデータベースの「データ型」が分かりません(例えば、VARCHAR(30)のようなもの)
・PHPの変数「tdata」に１次元配列のデータが格納されています。
___

```PHP
try {
            $this->pdo->beginTransaction();
            
            
            //データベースのtestテーブルにtdata（１次元配列）を格納する
            $sql = "INSERT  INTO test (tdata)
            VALUES ( :tdata)";

            $stmh = $this->pdo->prepare($sql);
            $stmh->bindValue(':tdata',    tdata,    PDO::PARAM_STR ); //ここもPDO::PARAM_STRで大丈夫でしょうか・・
            $stmh->execute();
            $this->pdo->commit();
        } catch (PDOException $Exception) {
            $this->pdo->rollBack();
            print "エラー：" . $Exception->getMessage();
        }
```

データベースに配列を格納したいのですがうまくいきません。

### 前提・実現したいこと
MySQLに管理者権限でログインして、ユーザーを一件作りたい。

### 発生している問題・エラーメッセージ
MySQLにrootでログインできない。

### 該当のソースコード
```ここに言語名を入力
/usr/bin/mysqld_safe --skip-grant-tables
/etc/init.d/mysql stop

```
いずれも「指定されたパスが見つかりません」と出るため、パスワードなしでのログインができない。

### 試したこと

どこまで情報が必要か分からないので、不要な情報が混ざっている可能性もありますが、分かる限り書きます。

VisualStudioCodeでPHPを組んでいました。
XAMPPでMariaDBを起動、root権限でデータベースtennisを作成。
tennisだけが使えるユーザーuserを作成→エラー。
SELECT user FROM user; 
でユーザー一覧が見られるとの事で実行。
userがあるのにログインできない、rootが三行ある。
user削除→作り直し→エラー
rootが三行あるなら消しても大丈夫なのでは？と思ったためrootを指定して一回削除。
ログアウト。
ログインのためにXAMPPを起動すると、Apache、MySQLともにエラー。
再インストールしても直らなかったため、管理ツール－サービスを自動から停止させると、Apache、MySQLとも起動。
https://hit.hateblo.jp/entry/2016/05/23/183341
該当のコードはこちらを参考にしました。

勝手ですみませんが、職場からの投稿なので火曜日までは試せません……。

### 補足情報（FW/ツールのバージョンなど）
XAMPP（v3.2.4）
XAMPPはC直下にインストールしています。
c:\xampp\mysql
OS：Windows 10 Home 64ビット版

MySQLに管理者権限でログインできない

いつも本当に助かっています。
テーブルの設計についてご意見をお聞かせください。

仕事でデータロガーのシステムというものを実装しました。
そのシステムは外部の機械から何らかのデータを受けとり、保存していくだけの単純なものですが、受け取るデータ構造を可変としています。

---

例：
- 機械Ａは 気温、湿度、気圧
- 機械Ｂは 電圧、電流
- これらのデータが各機械から１０秒毎に（23℃, 30%, 1000hPa というように）送信されるので受信し保存する。


条件：
- 機械毎のデータ定義を画面から設定する。
(何カラムあり、どのカラムが何のデータで、型は何で、有効桁数が何桁で、単位は何か、等）
- 各カラムのデータ型は真偽値、整数値、小数値、文字列がある。
- 機械Ａも機械Ｂも数千台程度接続されている。今後機械Ｃも追加される
- データを元に各機械毎のグラフを描画したり全体で集計したりする。閾値判定も行う。
- データ蓄積後、定義の変更はある程度許容する。（列の追加や単位の変更など）

---

これらを実現するためのテーブル構造の案として、下段に記載した幾つかの案などがあるかと思います。
実はもうこのシステムは「案１」で開発が終了し、問題なく稼働しています。
上記は例ですが、実際に数億レコードのデータが蓄積されています。
ただ、設計実装が私一人で周りに頼れる人もなく、設計に不安があるため、皆様のご意見をお聞かせください。

**質問１．情報が少なくて恐縮ですが、「案１」を採用したのは正解だと思いますか？
質問２．現実的な案として下段以外のものはありますか？
質問３．下段の案の中で、上記条件に対して「ありえない」と考えるものはありますか？
質問４．一般的にこういったもののデザインパターンはありますか？
質問５．他、経験談や参考情報などありましたらご教示ください。**


実際に問題なく稼働しているのだからいいじゃん、という部分もあるかと思いますが、後学のためよろしくお願いいたします。
※できるだけ広くご意見を頂きたいので少し長めに質問をオープンしておくかもしれません。

CentOS7.2, MariaDB10.0, Java8

---

### 案

**１．ID, 機械ID, キー(VARCHAR), 値(VARCHAR), 日時 のカラムを持つテーブルを用意する。**
  ※一旦値をVARCHARで保存し(小数値1.23ならそのままテキストで)、読み出し時に各定義の型に合わせて解釈します。
  ※１カラム（例えば気温）だけで１レコード消費します。
  ※閾値判定時、VARCHARカラムに対して平気で 「値 > 1.23」 のようなことをやります。
  ※１回の送信データを示す集計基準は機械IDと日時です。
  ※この案を採用しました。


**２．「定義ごとに柔軟にテーブルを作る」システムを作る。**
  ※プログラムが CREATE TABLE 文を発行します。
  ※なんだか気持ち悪いという理由と、システムが複雑化しそうという理由で却下しました。
  ※データ量は最も少なくなり運用も楽そうなため、今はこちらの方がよかったかも、と思っています。


**３．ID, 機械ID, c1, c2, c3, c4..., 日時 のようにカラムを予めたくさん用意し、カラムとデータの対応テーブルを別途用意する。**
  ※ダサく感じたので却下しました。なしではなかったなと思っています。


**４．ID, 機械ID, データ(VARCHAR), 日時のカラムを用意し、データにXML, JSON, ハッシュオブジェクトシリアライズなどで保存する。**
  ※集計と運用が厳しくなるかと思い却下しました。


**５．RDBを用いない。**
  ※RDB以外を知らないことと、集計が厳しくなると思い、却下しました。

可変データ構造をRDBに保存する方法について

## テーマ、知りたいこと

MariaDBの肥大化対策について

## 背景、状況

フリー(オープン)のDBを比較検討しています。

MariaDBの「肥大化対策」を調べていて…
　・データベースをエクスポート（ダンプ）します
　・MySQLを停止
　・設定ファイを変更してテーブル単位で管理
　・MySQLを起動
　・データベースをインポート
の様な対策は、ネットにあるのですが、
(週１/月1の)日常的に使える「バキューム」とか「コンパクト化」の様なコマンドはあるのでしょうか？
初心者の疑問で申し訳ありません。


MariaDBの肥大化対策

いつもお世話になっております。

現在MySQLの勉強をしており、個人で使う簡単な在庫管理システムを作っております。
※今回はラズベリーパイに入っていたものをそのまま使っているので、
MariaDBを使用しております。

テーブル構成は以下のようなもので、100件ほどのレコードがある想定です。
購入日が昇順で入っています。

**商品テーブル**
|JANコード|購入日|値段|
|:--:|:--:|:--:|
|49000000000|2018/2/1|1500|
|49000000001|2018/2/4|2000|
|49000000002|2018/3/5|4000|
|49000000003|2018/4/13|2000|
|49000000004|2018/4/18|1000|
|49000000005|2018/4/22|8000|
|49000000001|2018/5/1|1000|

このテーブルから、購入日の最新50件を抽出し、それを昇順で並べ替えたもの、
つまり、最新50件の中から日付が古い順になったものを取得したいです。

```MySQL
select * from 商品 order by 購入日 desc limit 50;
```
上記のようにやってみましたところ
これだと、購入日の最新50件は取得できましたが
降順になってしまいます。

```MySQL
select * from 商品 order by 購入日 limit 50;
```

逆にこちらにすると、今度は最新50件ではなく、テーブル全体で
昇順になったものから50件となってしまいます。

つたない文章で分かりにくい点あるかと思いますが、
どうか解決策のご教示宜しくお願いいたします。

【MySQL】最新50件を昇順で取得したい

### 実現したいこと
SQLのLOOP処理をしているが、テーブルの容量が大きくなっても途中で止まらないようにしたい。
多分、mariaDB の設定を変更すれば動きそうな気がします。
ちなみに、XAMMP(SQLite+php)　で動いていた　PHPプログラムを　MariaDB用に書き換えています。
途中までLOOPしているので、書き換えた部分は問題無い物と思っています。



### 発生している問題・分からないこと
このテーブルにデーターが入らないようにプログラムを変更すると、最後までLOOP処理される。
途中まではテーブルにデーター蓄積されているので、プログラムやデーターには原因はなさそう。
下記、エラーメッセージに　XAMMP　コントロールパネルで開いた　MySQL loggs を記載します。

### エラーメッセージ
```error
以下、XAMMP　コントロールパネルで開いた　MySQL loggs 内容です。

2025-02-18 13:04:05 0 [Note] Starting MariaDB 10.4.32-MariaDB source revision c4143f909528e3fab0677a28631d10389354c491 as process 24408
2025-02-18 13:04:05 0 [Note] InnoDB: Mutexes and rw_locks use Windows interlocked functions
2025-02-18 13:04:05 0 [Note] InnoDB: Uses event mutexes
2025-02-18 13:04:05 0 [Note] InnoDB: Compressed tables use zlib 1.3
2025-02-18 13:04:05 0 [Note] InnoDB: Number of pools: 1
2025-02-18 13:04:05 0 [Note] InnoDB: Using SSE2 crc32 instructions
2025-02-18 13:04:05 0 [Note] InnoDB: Initializing buffer pool, total size = 10G, instances = 8, chunk size = 128M
2025-02-18 13:04:05 0 [Note] InnoDB: Completed initialization of buffer pool
2025-02-18 13:04:06 0 [Note] InnoDB: 128 out of 128 rollback segments are active.
2025-02-18 13:04:06 0 [Note] InnoDB: Creating shared tablespace for temporary tables
2025-02-18 13:04:06 0 [Note] InnoDB: Setting file 'C:\xampp\mysql\data\ibtmp1' size to 12 MB. Physically writing the file full; Please wait ...
2025-02-18 13:04:06 0 [Note] InnoDB: File 'C:\xampp\mysql\data\ibtmp1' size is now 12 MB.
2025-02-18 13:04:06 0 [Note] InnoDB: Waiting for purge to start
2025-02-18 13:04:06 0 [Note] InnoDB: 10.4.32 started; log sequence number 16746547497; transaction id 4480427
2025-02-18 13:04:06 0 [Note] InnoDB: Loading buffer pool(s) from C:\xampp\mysql\data\ib_buffer_pool
2025-02-18 13:04:06 0 [Note] Plugin 'FEEDBACK' is disabled.
2025-02-18 13:04:06 0 [Note] Server socket created on IP: '::'.
2025-02-18 13:04:06 0 [Note] Reading of all Master_info entries succeeded
2025-02-18 13:04:06 0 [Note] Added new Master_info '' to hash table
2025-02-18 13:04:06 0 [Note] C:\xampp\mysql\bin\mysqld.exe: ready for connections.
Version: '10.4.32-MariaDB'  socket: ''  port: 3306  mariadb.org binary distribution
2025-02-18 13:04:06 0 [Note] InnoDB: Buffer pool(s) load completed at 250218 13:04:06
```

### 該当のソースコード

```my.ini
# Example MySQL config file for small systems.
#
# This is for a system with little memory (<= 64M) where MySQL is only used
# from time to time and it's important that the mysqld daemon
# doesn't use much resources.
#
# You can copy this file to
# C:/xampp/mysql/bin/my.cnf to set global options,
# mysql-data-dir/my.cnf to set server-specific options (in this
# installation this directory is C:/xampp/mysql/data) or
# ~/.my.cnf to set user-specific options.
#
# In this file, you can use all long options that a program supports.
# If you want to know which options a program supports, run the program
# with the "--help" option.

# The following options will be passed to all MySQL clients
[client]
character-set-server=utf8
# password       = your_password 
port=3306
socket="C:/xampp/mysql/mysql.sock"


# Here follows entries for some specific programs 

# The MySQL server
default-character-set=utf8mb4
[mysqld]
character-set-server=utf8
skip-character-set-client-handshake
port=3306
socket="C:/xampp/mysql/mysql.sock"
basedir="C:/xampp/mysql"
tmpdir="C:/xampp/tmp"
datadir="C:/xampp/mysql/data"
pid_file="mysql.pid"
# enable-named-pipe
key_buffer=16M

#2025.02.18
#max_allowed_packet=1M
#max_allowed_packet=4M

# 2025.02.14 https://runebook.dev/ja/articles/mariadb/mariadb-memory-allocation/index
# 2025.02.18 512k -> 40M -> 512M
sort_buffer_size=512M

net_buffer_length=8K
read_buffer_size=256K
read_rnd_buffer_size=512K
myisam_sort_buffer_size=8M
log_error="mysql_error.log"

# Change here for bind listening
# bind-address="127.0.0.1" 
# bind-address = ::1          # for ipv6

# Where do all the plugins live
plugin_dir="C:/xampp/mysql/lib/plugin/"

# Don't listen on a TCP/IP port at all. This can be a security enhancement,
# if all processes that need to connect to mysqld run on the same host.
# All interaction with mysqld must be made via Unix sockets or named pipes.
# Note that using this option without enabling named pipes on Windows
# (via the "enable-named-pipe" option) will render mysqld useless!
# 
# commented in by lampp security
#skip-networking
#skip-federated

# Replication Master Server (default)
# binary logging is required for replication
# log-bin deactivated by default since XAMPP 1.4.11
#log-bin=mysql-bin

# required unique id between 1 and 2^32 - 1
# defaults to 1 if master-host is not set
# but will not function as a master if omitted
server-id	=1

# Replication Slave (comment out master section to use this)
#
# To configure this host as a replication slave, you can choose between
# two methods :
#
# 1) Use the CHANGE MASTER TO command (fully described in our manual) -
#    the syntax is:
#
#    CHANGE MASTER TO MASTER_HOST=<host>, MASTER_PORT=<port>,
#    MASTER_USER=<user>, MASTER_PASSWORD=<password> ;
#
#    where you replace <host>, <user>, <password> by quoted strings and
#    <port> by the master's port number (3306 by default).
#
#    Example:
#
#    CHANGE MASTER TO MASTER_HOST='125.564.12.1', MASTER_PORT=3306,
#    MASTER_USER='joe', MASTER_PASSWORD='secret';
#
# OR
#
# 2) Set the variables below. However, in case you choose this method, then
#    start replication for the first time (even unsuccessfully, for example
#    if you mistyped the password in master-password and the slave fails to
#    connect), the slave will create a master.info file, and any later
#    change in this file to the variables' values below will be ignored and
#    overridden by the content of the master.info file, unless you shutdown
#    the slave server, delete master.info and restart the slaver server.
#    For that reason, you may want to leave the lines below untouched
#    (commented) and instead use CHANGE MASTER TO (see above)
#
# required unique id between 2 and 2^32 - 1
# (and different from the master)
# defaults to 2 if master-host is set
# but will not function as a slave if omitted
#server-id       = 2
#
# The replication master for this slave - required
#master-host     =   <hostname>
#
# The username the slave will use for authentication when connecting
# to the master - required
#master-user     =   <username>
#
# The password the slave will authenticate with when connecting to
# the master - required
#master-password =   <password>
#
# The port the master is listening on.
# optional - defaults to 3306
#master-port     =  <port>
#
# binary logging - not required for slaves, but recommended
#log-bin=mysql-bin


# Point the following paths to different dedicated disks
#tmpdir = "C:/xampp/tmp"
#log-update = /path-to-dedicated-directory/hostname

# Uncomment the following if you are using BDB tables
#bdb_cache_size = 4M
#bdb_max_lock = 10000

# Comment the following if you are using InnoDB tables
#skip-innodb
innodb_data_home_dir="C:/xampp/mysql/data"
innodb_data_file_path=ibdata1:10M:autoextend
innodb_log_group_home_dir="C:/xampp/mysql/data"
#innodb_log_arch_dir = "C:/xampp/mysql/data"
## You can set .._buffer_pool_size up to 50 - 80 %
## of RAM but beware of setting memory usage too high

## 2025.02.18 chaange
##innodb_buffer_pool_size=16M
innodb_buffer_pool_size=10G

## Set .._log_file_size to 25 % of buffer pool size
## 2025.02.18 chaange
##innodb_log_file_size=5M
##innodb_log_buffer_size=8M
innodb_log_file_size=1G
innodb_log_buffer_size=512M

innodb_flush_log_at_trx_commit=1
innodb_lock_wait_timeout=50

## UTF 8 Settings
#init-connect=\'SET NAMES utf8\'
#collation_server=utf8_unicode_ci
#character_set_server=utf8
#skip-character-set-client-handshake
#character_sets-dir="C:/xampp/mysql/share/charsets"
sql_mode=NO_ZERO_IN_DATE,NO_ZERO_DATE,NO_ENGINE_SUBSTITUTION
log_bin_trust_function_creators=1

character-set-server=utf8mb4
collation-server=utf8mb4_general_ci
[mysqldump]
max_allowed_packet=200M

[mysql]
# Remove the next comment character if you are not familiar with SQL
#safe-updates

[isamchk]
key_buffer=20M
sort_buffer_size=20M
read_buffer=20M
write_buffer=20M

[myisamchk]
key_buffer=20M
sort_buffer_size=20M
read_buffer=20M
write_buffer=20M

[mysqlhotcopy]

```

### 試したこと・調べたこと
- [x] teratailやGoogle等で検索した
- [ ] ソースコードを自分なりに変更した
- [ ] 知人に聞いた
- [ ] その他

##### 上記の詳細・結果
ネット情報を見て　my.ini を色々と変更しましたが上手く行きませんでした。
現状設定状況は上記を参照して下さい。
また、PCのタスクマネージャー状況を添付します。
PHP動作中もメモリー容量は殆ど変化しませんでした。![イメージ説明](https://ddjkaamml8q8x.cloudfront.net/questions/2025-02-18/0a767eb5-3985-469b-9478-a65f6e41c0b1.jpeg)

### 補足
データーを少なくしてLOOPを抜けた状態のデバッグ画面
![イメージ説明](https://ddjkaamml8q8x.cloudfront.net/questions/2025-02-18/6f351d38-6950-4dc1-9f8c-767700fcfaa8.jpeg)

LOOPから抜けない状態のデバッグ画面
![イメージ説明](https://ddjkaamml8q8x.cloudfront.net/questions/2025-02-18/24c01b2e-ffa8-4dc5-ba17-81d7bdf93f10.jpeg)