XAMMP(mariadb+php) にてSQLが途中で止まる

Question

実現したいこと

SQLのLOOP処理をしているが、テーブルの容量が大きくなっても途中で止まらないようにしたい。
多分、mariaDB の設定を変更すれば動きそうな気がします。
ちなみに、XAMMP(SQLite+php)　で動いていた　PHPプログラムを　MariaDB用に書き換えています。
途中までLOOPしているので、書き換えた部分は問題無い物と思っています。

発生している問題・分からないこと

このテーブルにデーターが入らないようにプログラムを変更すると、最後までLOOP処理される。
途中まではテーブルにデーター蓄積されているので、プログラムやデーターには原因はなさそう。
下記、エラーメッセージに　XAMMP　コントロールパネルで開いた　MySQL loggs を記載します。

エラーメッセージ

以下、XAMMP　コントロールパネルで開いた　MySQL loggs 内容です。

2025-02-18 13:04:05 0 [Note] Starting MariaDB 10.4.32-MariaDB source revision c4143f909528e3fab0677a28631d10389354c491 as process 24408
2025-02-18 13:04:05 0 [Note] InnoDB: Mutexes and rw_locks use Windows interlocked functions
2025-02-18 13:04:05 0 [Note] InnoDB: Uses event mutexes
2025-02-18 13:04:05 0 [Note] InnoDB: Compressed tables use zlib 1.3
2025-02-18 13:04:05 0 [Note] InnoDB: Number of pools: 1
2025-02-18 13:04:05 0 [Note] InnoDB: Using SSE2 crc32 instructions
2025-02-18 13:04:05 0 [Note] InnoDB: Initializing buffer pool, total size = 10G, instances = 8, chunk size = 128M
2025-02-18 13:04:05 0 [Note] InnoDB: Completed initialization of buffer pool
2025-02-18 13:04:06 0 [Note] InnoDB: 128 out of 128 rollback segments are active.
2025-02-18 13:04:06 0 [Note] InnoDB: Creating shared tablespace for temporary tables
2025-02-18 13:04:06 0 [Note] InnoDB: Setting file 'C:\xampp\mysql\data\ibtmp1' size to 12 MB. Physically writing the file full; Please wait ...
2025-02-18 13:04:06 0 [Note] InnoDB: File 'C:\xampp\mysql\data\ibtmp1' size is now 12 MB.
2025-02-18 13:04:06 0 [Note] InnoDB: Waiting for purge to start
2025-02-18 13:04:06 0 [Note] InnoDB: 10.4.32 started; log sequence number 16746547497; transaction id 4480427
2025-02-18 13:04:06 0 [Note] InnoDB: Loading buffer pool(s) from C:\xampp\mysql\data\ib_buffer_pool
2025-02-18 13:04:06 0 [Note] Plugin 'FEEDBACK' is disabled.
2025-02-18 13:04:06 0 [Note] Server socket created on IP: '::'.
2025-02-18 13:04:06 0 [Note] Reading of all Master_info entries succeeded
2025-02-18 13:04:06 0 [Note] Added new Master_info '' to hash table
2025-02-18 13:04:06 0 [Note] C:\xampp\mysql\bin\mysqld.exe: ready for connections.
Version: '10.4.32-MariaDB'  socket: ''  port: 3306  mariadb.org binary distribution
2025-02-18 13:04:06 0 [Note] InnoDB: Buffer pool(s) load completed at 250218 13:04:06

該当のソースコード

# Example MySQL config file for small systems.
#
# This is for a system with little memory (<= 64M) where MySQL is only used
# from time to time and it's important that the mysqld daemon
# doesn't use much resources.
#
# You can copy this file to
# C:/xampp/mysql/bin/my.cnf to set global options,
# mysql-data-dir/my.cnf to set server-specific options (in this
# installation this directory is C:/xampp/mysql/data) or
# ~/.my.cnf to set user-specific options.
#
# In this file, you can use all long options that a program supports.
# If you want to know which options a program supports, run the program
# with the "--help" option.

# The following options will be passed to all MySQL clients
[client]
character-set-server=utf8
# password       = your_password 
port=3306
socket="C:/xampp/mysql/mysql.sock"


# Here follows entries for some specific programs 

# The MySQL server
default-character-set=utf8mb4
[mysqld]
character-set-server=utf8
skip-character-set-client-handshake
port=3306
socket="C:/xampp/mysql/mysql.sock"
basedir="C:/xampp/mysql"
tmpdir="C:/xampp/tmp"
datadir="C:/xampp/mysql/data"
pid_file="mysql.pid"
# enable-named-pipe
key_buffer=16M

#2025.02.18
#max_allowed_packet=1M
#max_allowed_packet=4M

# 2025.02.14 https://runebook.dev/ja/articles/mariadb/mariadb-memory-allocation/index
# 2025.02.18 512k -> 40M -> 512M
sort_buffer_size=512M

net_buffer_length=8K
read_buffer_size=256K
read_rnd_buffer_size=512K
myisam_sort_buffer_size=8M
log_error="mysql_error.log"

# Change here for bind listening
# bind-address="127.0.0.1" 
# bind-address = ::1          # for ipv6

# Where do all the plugins live
plugin_dir="C:/xampp/mysql/lib/plugin/"

# Don't listen on a TCP/IP port at all. This can be a security enhancement,
# if all processes that need to connect to mysqld run on the same host.
# All interaction with mysqld must be made via Unix sockets or named pipes.
# Note that using this option without enabling named pipes on Windows
# (via the "enable-named-pipe" option) will render mysqld useless!
# 
# commented in by lampp security
#skip-networking
#skip-federated

# Replication Master Server (default)
# binary logging is required for replication
# log-bin deactivated by default since XAMPP 1.4.11
#log-bin=mysql-bin

# required unique id between 1 and 2^32 - 1
# defaults to 1 if master-host is not set
# but will not function as a master if omitted
server-id	=1

# Replication Slave (comment out master section to use this)
#
# To configure this host as a replication slave, you can choose between
# two methods :
#
# 1) Use the CHANGE MASTER TO command (fully described in our manual) -
#    the syntax is:
#
#    CHANGE MASTER TO MASTER_HOST=<host>, MASTER_PORT=<port>,
#    MASTER_USER=<user>, MASTER_PASSWORD=<password> ;
#
#    where you replace <host>, <user>, <password> by quoted strings and
#    <port> by the master's port number (3306 by default).
#
#    Example:
#
#    CHANGE MASTER TO MASTER_HOST='125.564.12.1', MASTER_PORT=3306,
#    MASTER_USER='joe', MASTER_PASSWORD='secret';
#
# OR
#
# 2) Set the variables below. However, in case you choose this method, then
#    start replication for the first time (even unsuccessfully, for example
#    if you mistyped the password in master-password and the slave fails to
#    connect), the slave will create a master.info file, and any later
#    change in this file to the variables' values below will be ignored and
#    overridden by the content of the master.info file, unless you shutdown
#    the slave server, delete master.info and restart the slaver server.
#    For that reason, you may want to leave the lines below untouched
#    (commented) and instead use CHANGE MASTER TO (see above)
#
# required unique id between 2 and 2^32 - 1
# (and different from the master)
# defaults to 2 if master-host is set
# but will not function as a slave if omitted
#server-id       = 2
#
# The replication master for this slave - required
#master-host     =   <hostname>
#
# The username the slave will use for authentication when connecting
# to the master - required
#master-user     =   <username>
#
# The password the slave will authenticate with when connecting to
# the master - required
#master-password =   <password>
#
# The port the master is listening on.
# optional - defaults to 3306
#master-port     =  <port>
#
# binary logging - not required for slaves, but recommended
#log-bin=mysql-bin


# Point the following paths to different dedicated disks
#tmpdir = "C:/xampp/tmp"
#log-update = /path-to-dedicated-directory/hostname

# Uncomment the following if you are using BDB tables
#bdb_cache_size = 4M
#bdb_max_lock = 10000

# Comment the following if you are using InnoDB tables
#skip-innodb
innodb_data_home_dir="C:/xampp/mysql/data"
innodb_data_file_path=ibdata1:10M:autoextend
innodb_log_group_home_dir="C:/xampp/mysql/data"
#innodb_log_arch_dir = "C:/xampp/mysql/data"
## You can set .._buffer_pool_size up to 50 - 80 %
## of RAM but beware of setting memory usage too high

## 2025.02.18 chaange
##innodb_buffer_pool_size=16M
innodb_buffer_pool_size=10G

## Set .._log_file_size to 25 % of buffer pool size
## 2025.02.18 chaange
##innodb_log_file_size=5M
##innodb_log_buffer_size=8M
innodb_log_file_size=1G
innodb_log_buffer_size=512M

innodb_flush_log_at_trx_commit=1
innodb_lock_wait_timeout=50

## UTF 8 Settings
#init-connect=\'SET NAMES utf8\'
#collation_server=utf8_unicode_ci
#character_set_server=utf8
#skip-character-set-client-handshake
#character_sets-dir="C:/xampp/mysql/share/charsets"
sql_mode=NO_ZERO_IN_DATE,NO_ZERO_DATE,NO_ENGINE_SUBSTITUTION
log_bin_trust_function_creators=1

character-set-server=utf8mb4
collation-server=utf8mb4_general_ci
[mysqldump]
max_allowed_packet=200M

[mysql]
# Remove the next comment character if you are not familiar with SQL
#safe-updates

[isamchk]
key_buffer=20M
sort_buffer_size=20M
read_buffer=20M
write_buffer=20M

[myisamchk]
key_buffer=20M
sort_buffer_size=20M
read_buffer=20M
write_buffer=20M

[mysqlhotcopy]

試したこと・調べたこと

• teratailやGoogle等で検索した
• ソースコードを自分なりに変更した
• 知人に聞いた
• その他

上記の詳細・結果

ネット情報を見て　my.ini を色々と変更しましたが上手く行きませんでした。
現状設定状況は上記を参照して下さい。
また、PCのタスクマネージャー状況を添付します。
PHP動作中もメモリー容量は殆ど変化しませんでした。

補足

データーを少なくしてLOOPを抜けた状態のデバッグ画面

LOOPから抜けない状態のデバッグ画面

Comments

[maisumakun]

「途中で止まる」とは「サーバが落ちる」なのか「応答がなくなる」のか、あるいはそのいずれでもない事象なのか、どういう状況なのでしょうか。

あと、SQLを呼ぶコードの側もご提示いただければ幸いです。

[dendoushishi]

まいすまくん　様　コメントありがとうございます！
PHP デバッグの為、sql結果を print・var_dump　等で　ブラウザ表示しながらデバッグしております。
データーを少なくして　LOOPを抜けた状態と　LOOPから抜けてこない状態の画面を添付致します。
初心者なので、「サーバが落ちる」なのか「応答がなくなる」のか、あるいはそのいずれでもない事象なのか　が分かっておりません・・・
デバッグ画面を追加しましたので、ご確認をお願い致します。
お手数をお掛けしますが、アドバイス頂ければ助かります。

[tezcello]

> XAMMP(SQLite+php)　で動いていた　PHPプログラムを　MariaDB用に書き換えています。
書き換えた際に間違っている事を否定できないのでは？

> 途中までLOOPしているので、書き換えた部分は問題無い物と思っています。
ループ回数を少なくした場合は上手くいっているのですから、問題なのはループの終了条件や抜け方、その後の処理かもしれません。
なので、「書き換えた部分は問題無い」は信用できない様に思います。

> mariaDB の設定を変更すれば動きそう
SQLiteの方が一般に能力が低いので、問題点はそこ（mariaDBの設定）では無さそうに思います。

> プログラムがあまりに長いので
プログラム全てを記載する必要はなく、問題が再発する最小のを掲示されると良いでしょう。
その過程で、ご自身でNG部分を見つける事が出来るかもしれませんし。
何よりも、デバッグメッセージだけを見せられても、不具合部分を推測するのはまず不可能です。
＿＿具体的なエラーメッセージを出す様にもなっていないし...
＿＿そもそも全てのエラーを表示売る様になっているかもあやしい...

[dendoushishi]

tezcello様コメントありがとうございます！
> XAMMP(SQLite+php)　で動いていた　PHPプログラムを　MariaDB用に書き換えています。 書き換えた際に間違っている事を否定できないのでは？
→該当部分のみ別プログラムに分離し、ループをやめ、データ量を減らしてみるとOKでしたので問題ないように思います。
　データ量が増えると状況は同じです。
> 途中までLOOPしているので、書き換えた部分は問題無い物と思っています。 ループ回数を少なくした場合は上手くいっているのですから、問題なのはループの終了条件や抜け方、その後の処理かもしれません。 なので、「書き換えた部分は問題無い」は信用できない様に思います。
→ご指摘の通りだと思いますが、どうやってデバッグするかが分からないので悩んでいます。
　プログラムを走らせてはprint, dump で動作確認している初心者状態です。
　デバッグ環境構築, 方法に関してお勧めのサイトや本がありましたらアドバイス頂けるとありがたいです。
> mariaDB の設定を変更すれば動きそう SQLiteの方が一般に能力が低いので、問題点はそこ（mariaDBの設定）では無さそうに思います。
> プログラムがあまりに長いので
プログラム全てを記載する必要はなく、問題が再発する最小のを掲示されると良いでしょう。 その過程で、ご自身でNG部分を見つける事が出来るかもしれませんし。 何よりも、デバッグメッセージだけを見せられても、不具合部分を推測するのはまず不可能です。
→申し訳ありません。
　デバッグ環境を構築できていないので、掲載しようがありません。
　お恥ずかしい.．．．
＿＿具体的なエラーメッセージを出す様にもなっていないし... ＿＿そもそも全てのエラーを表示売る様になっているかもあやしい
→エラー表示方法の情報を頂けるとありがたいです。

以上、宜しくお願い致します。

[tezcello]

> データ量が増えると状況は同じ
データ量が増える＝ループ回数が増える
ですよね？
ある回数以上繰り返そうとすると終了条件が想定外に成立してしまうなどのループのプログラム部分に問題があるのではないかと推測して上記の様に述べました。

> どうやってデバッグするか
> プログラムを走らせてはprint, dump で動作確認
それでチャンとデバッグできると思います。
＿＿僕も長い間それで対処してきた

> デバッグ環境を構築できていないので、掲載しようがありません。
デバッグ環境が無いのと、プログラムの不具合部分を絞り出すのとは全く別の事で、関連ありません。
「問題点はループ処理」だとするなら、その前段である繰り返し処理をするデータ群（配列、あるいはTraversable なナニカ（PDOStatement とか））をセットする部分（単純な配列で代用するのも可）と、ループ処理部だけ（先ずはループ内で出力するのはループ回数だけにしてみる）にして、期待通りに処理できるかを試してみては？
その後、徐々に内容を現状に近付けて（それでもループ内で長々と出力はしない）いけば、ループ部分に問題ない事が確認できるでしょう。

出来るだけシンプルな形にしても問題が再現するなら、ループ処理そのものに問題がある可能性が高いです。
その状態なら精々10行程度に成るでしょうから、「問題の起こるソース」として掲示する事は簡単だと思います。

> エラー表示方法の情報
error_reporting(E_ALL);
ini_set('display_errors', 1);
ini_set('display_startup_errors', 1);
辺りをプログラムの先頭に書いておくと細かくエラーメッセージを出してくれると思います。

ソースが全く提示されない場合、もの凄く特徴的なエラーメッセージとかが無いと第三者には推測が出来ません。
しかも、現状エラーメッセージは全く示されていませんし、var_dump()の出力結果を見せられても、それが何を出力しているのか、どの部分で出力しているのかは解りません。
＿＿ソースを見れば一目瞭然

[dendoushishi]

テズチェロ 様　お返事が遅れまして申し訳ありません！
ご指摘ありがとうございます！
早速、エラー表示が出ましたので、これからデバッグ致します。
また、変化がありましたら投稿させて頂きます。
以上。

[dendoushishi]

テズチェロ様へ
続編です。

> エラー表示方法の情報
error_reporting(E_ALL);
ini_set('display_errors', 1);
ini_set('display_startup_errors', 1);
辺りをプログラムの先頭に書いておくと細かくエラーメッセージを出してくれると思います。

を試したところ色々とエラー箇所が見つかり問題が解決しました！
結局、原始的に　実際にプログラムを走らせて　print, var_dump 等で出力を見ながら
デバッグしました。
　他にやり方が分からないと言うのもありますが・・・・
　ラズパイだと　Thonny　を使ったりしていましたが・・・
ご指摘の通り、ループを抜けた後の処理や、
関係無いと思っていたところのエラー等が原因でした。
他にも何故か同じプログラムのはずなのに、オリジナルを再コピーして
同じように修正したら動いたとか・・・・
ゴミでも付いていたのか？・・・まいりました。

前回頂きましたコメント内容をベストアンサーに選びたいので
同じ内容を回答欄に投稿いただけますでしょうか？
お手数をおかけ致しますが、宜しくお願い致します。

[tezcello]

> 前回頂きましたコメント内容をベストアンサーに選びたいので
> 同じ内容を回答欄に投稿いただけますでしょうか？
承知しました。

Answer 1

途中までLOOPしているので、書き換えた部分は問題無い物と思っています。

ループ回数を少なくした場合は上手くいっているのですから、問題なのはループの終了条件や抜け方、その後の処理かもしれません。

デバッグ環境を構築できていないので、掲載しようがありません。

デバッグ環境が無いのと、プログラムの不具合部分を絞り出すのとは全く別の事で、関連ありません。
「問題点はループ処理」だとするなら、その前段である繰り返し処理をするデータ群（配列、あるいはTraversable なナニカ（PDOStatement とか））をセットする部分（単純な配列で代用するのも可）と、ループ処理部だけ（先ずはループ内で出力するのはループ回数だけにしてみる）にして、期待通りに処理できるかを試してみては？
その後、徐々に内容を現状に近付けて（それでもループ内で長々と出力はしない）いけば、ループ部分に問題ない事が確認できるでしょう。

出来るだけシンプルな形にしても問題が再現するなら、ループ処理そのものに問題がある可能性が高いです。
その状態なら精々10行程度に成るでしょうから、「問題の起こるソース」として掲示する事は簡単だと思います。

エラー表示方法の情報

error_reporting(E_ALL);
ini_set('display_errors', 1);
ini_set('display_startup_errors', 1);
辺りをプログラムの先頭に書いておくと細かくエラーメッセージを出してくれると思います。

Comments

[dendoushishi]

テズチェロ 様
回答ありがとうございます。
試したところ問題が解決しました！
ベストアンサーに選ばせていただきました。
今後とも宜しくお願い致します！！！