勿忘初心做自己 发表于 2025-1-3 09:59:32

GreatSQL temp文件占用时长分析

GreatSQL temp文件占用时长分析

GreatSQLDBA在一样寻常工作中可能会遇到这种情况,存在一个 InnoDB 引擎下的 temp_x.ibt 文件很大,但是却无法确定这个文件是什么时间由哪个连接建立的,难以支持后续定位问题,今天这篇文章彻底讲明白这个问题。
现象:发现一个实例下面(4406端口对外提供服务的实例)temp文件很大,如下所示:
-rw-r----- 1 greatsql greatsql       81920 Sep 26 23:56 temp_1.ibt
-rw-r----- 1 greatsql greatsql       81920 Sep 30 16:43 temp_10.ibt
-rw-r----- 1 greatsql greatsql       81920 Sep 26 23:56 temp_2.ibt
-rw-r----- 1 greatsql greatsql       81920 Sep 26 23:56 temp_3.ibt
-rw-r----- 1 greatsql greatsql       81920 Sep 26 23:56 temp_4.ibt
-rw-r----- 1 greatsql greatsql 18392023040 Oct9 15:56 temp_5.ibt
-rw-r----- 1 greatsql greatsql 18417188864 Oct 11 14:51 temp_6.ibt
-rw-r----- 1 greatsql greatsql 18417188864 Oct 11 14:51 temp_7.ibt
-rw-r----- 1 greatsql greatsql 18392023040 Oct9 15:54 temp_8.ibt
-rw-r----- 1 greatsql greatsql       81920 Sep 30 16:43 temp_9.ibt

$ cd /data/greatsql/dbdata/datanode4406/data/#innodb_temp
$ du -sm temp_6.ibt
17565   temp_6.ibt单个文件巨细到达17G,而且还在持续增加。
那么,这个文件是由那个连接占用的呢?
$ ps -ef|grep greatsql|grep 4406
greatsql   3504933132 88 Sep26 ?      15-18:21:22 /data/greatsql/svr/greatsql/bin/greatsqld --defaults-file=/greatsql/conf/datanode4406.cnf --basedir=/greatsql/svr/greatsql --datadir=/greatsql/dbdata/datanode4406/data --plugin-dir=/greatsql/svr/greatsql/lib/plugin --log-error=/greatsql/logs/error4406.log --pid-file=/greatsql/dbdata/datanode4406/data/greatsql.pid --socket=/greatsql/dbdata/datanode4406/data/greatsql.sock --port=4406通过上述命令可以得到GreatSQL的历程ID。
GreatSQL数据库的历程为35049接下来通过命令查看这个历程打开的这个连接的文件名,lsof -p pid|grep port或者lsof目次名称,可以得到这个历程在在这个端口上的连接的文件编号:
$ lsof /data/greatsql/dbdata/datanode4406/data/#innodb_temp/temp_6.ibt
COMMAND    PID    USER   FD   TYPE DEVICE    SIZE/OFF      NODE NAME
greatsqld 35049 greatsql282uWREG   8,17 18417188864 16642999840 /data/greatsql/dbdata/datanode4406/data/#innodb_temp/temp_6.ibt/proc//fd 是一个目次,包含历程打开文件的情况,大家注意到 282uW 这个值,其中数字部分代表fdid,这个里面282就是代表fdid,然后执行下面的命令:
$ ll /proc/35049/fd/282
lrwx------ 1 greatsql greatsql 64 Sep 26 23:57 /proc/35049/fd/282 -> /data/greatsql/dbdata/datanode4406/data/#innodb_temp/temp_6.ibt这样就得到连接建立这个文件的时间了,通过这个方法判断是否为恒久不开释的连接,然后通过数据库的information_schema.innodb_session_temp_tablespaces,找到连接会话ID,它与information_schema.processlist的ID是逐一对应关系,从而举行下一步研判和深度分析处置惩罚,异常的长连接可以kill处置惩罚,如下图 KILL 907即可。
greatsql> SELECT * FROM information_schema.innodb_session_temp_tablespaces ;
+---------+------------+----------------------------+-------------+----------+-----------+
| ID      | SPACE      | PATH                     | SIZE      | STATE    | PURPOSE   |
+---------+------------+----------------------------+-------------+----------+-----------+
|   29356 | 4243767288 | ./#innodb_temp/temp_8.ibt| 18392023040 | ACTIVE   | INTRINSIC |
|   473 | 4243767285 | ./#innodb_temp/temp_5.ibt| 18392023040 | ACTIVE   | INTRINSIC |
|   907 | 4243767286 | ./#innodb_temp/temp_6.ibt| 18417188864 | ACTIVE   | INTRINSIC |
|   501 | 4243767287 | ./#innodb_temp/temp_7.ibt| 18417188864 | ACTIVE   | INTRINSIC |
| 1798928 | 4243767284 | ./#innodb_temp/temp_4.ibt|      245760 | ACTIVE   | INTRINSIC |
|       0 | 4243767281 | ./#innodb_temp/temp_1.ibt|       81920 | INACTIVE | NONE      |
|       0 | 4243767282 | ./#innodb_temp/temp_2.ibt|       81920 | INACTIVE | NONE      |
|       0 | 4243767290 | ./#innodb_temp/temp_10.ibt |       81920 | INACTIVE | NONE      |
|       0 | 4243767289 | ./#innodb_temp/temp_9.ibt|       81920 | INACTIVE | NONE      |
|       0 | 4243767283 | ./#innodb_temp/temp_3.ibt|       81920 | INACTIVE | NONE      |
+---------+------------+----------------------------+-------------+----------+-----------+
10 rows in set (0.00 sec)

greatsql>KILL 907
Query OK, 0 rows affected (0.00 sec)感谢大家观看,不足之处还请指正。

Enjoy GreatSQL
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页: [1]
查看完整版本: GreatSQL temp文件占用时长分析