初相识|performance_schema全方位介绍(一)

| setup_timers |

| 3 |_client_name | libmysql |1|

MySQL Performance-Schema(二) 理论篇,performanceschema

     MySQL
Performance-Schema中总共包含52个表,主要分为几类:Setup表,Instance表,Wait
Event表,Stage Event表Statement
Event表,Connection表和Summary表。上一篇文章已经着重讲了Setup表,这篇文章将会分别就每种类型的表做详细的描述。

Instance表
   
 instance中主要包含了5张表:cond_instances,file_instances,mutex_instances,rwlock_instances和socket_instances。
(1)cond_instances:条件等待对象实例
表中记录了系统中使用的条件变量的对象,OBJECT_INSTANCE_BEGIN为对象的内存地址。比如线程池的timer_cond实例的name为:wait/synch/cond/threadpool/timer_cond

(2)file_instances:文件实例
表中记录了系统中打开了文件的对象,包括ibdata文件,redo文件,binlog文件,用户的表文件等,比如redo日志文件:/u01/my3306/data/ib_logfile0。open_count显示当前文件打开的数目,如果重来没有打开过,不会出现在表中。

(3)mutex_instances:互斥同步对象实例
表中记录了系统中使用互斥量对象的所有记录,其中name为:wait/synch/mutex/*。比如打开文件的互斥量:wait/synch/mutex/mysys/THR_LOCK_open。LOCKED_BY_THREAD_ID显示哪个线程正持有mutex,若没有线程持有,则为NULL。

(4)rwlock_instances: 读写锁同步对象实例
表中记录了系统中使用读写锁对象的所有记录,其中name为
wait/synch/rwlock/*。WRITE_LOCKED_BY_THREAD_ID为正在持有该对象的thread_id,若没有线程持有,则为NULL,READ_LOCKED_BY_COUNT为记录了同时有多少个读者持有读锁。通过
events_waits_current
表可以知道,哪个线程在等待锁;通过rwlock_instances知道哪个线程持有锁。rwlock_instances的缺陷是,只能记录持有写锁的线程,对于读锁则无能为力。

(5)socket_instances:活跃会话对象实例
表中记录了thread_id,socket_id,ip和port,其它表可以通过thread_id与socket_instance进行关联,获取IP-PORT信息,能够与应用对接起来。
event_name主要包含3类:
wait/io/socket/sql/server_unix_socket,服务端unix监听socket
wait/io/socket/sql/server_tcpip_socket,服务端tcp监听socket
wait/io/socket/sql/client_connection,客户端socket

Wait Event表
     
Wait表主要包含3个表,events_waits_current,events_waits_history和events_waits_history_long,通过thread_id+event_id可以唯一确定一条记录。current表记录了当前线程等待的事件,history表记录了每个线程最近等待的10个事件,而history_long表则记录了最近所有线程产生的10000个事件,这里的10和10000都是可以配置的。这三个表表结构相同,history和history_long表数据都来源于current表。current表和history表中可能会有重复事件,并且history表中的事件都是完成了的,没有结束的事件不会加入到history表中。
THREAD_ID:线程ID
EVENT_ID:当前线程的事件ID,和THREAD_ID组成一个Primary Key。
END_EVENT_ID:当事件开始时,这一列被设置为NULL。当事件结束时,再更新为当前的事件ID。
SOURCE:该事件产生时的源码文件
TIMER_START, TIMER_END,
TIMER_WAIT:事件开始/结束和等待的时间,单位为皮秒(picoseconds)

OBJECT_SCHEMA, OBJECT_NAME, OBJECT_TYPE视情况而定
对于同步对象(cond, mutex, rwlock),这个3个值均为NULL
对于文件IO对象,OBJECT_SCHEMA为NULL,OBJECT_NAME为文件名,OBJECT_TYPE为FILE
对于SOCKET对象,OBJECT_NAME为该socket的IP:SOCK值
对于表I/O对象,OBJECT_SCHEMA是表的SCHEMA名,OBJECT_NAME是表名,OBJECT_TYPE为TABLE或者TEMPORARY
TABLE
NESTING_EVENT_ID:该事件对应的父事件ID
NESTING_EVENT_TYPE:父事件类型(STATEMENT, STAGE, WAIT)
OPERATION:操作类型(lock, read, write)

Stage Event表 

     
 Stage表主要包含3个表,events_stages_current,events_stages_history和events_stages_history_long,通过thread_id+event_id可以唯一确定一条记录。表中记录了当前线程所处的执行阶段,由于可以知道每个阶段的执行时间,因此通过stage表可以得到SQL在每个阶段消耗的时间。

THREAD_ID:线程ID
EVENT_ID:事件ID
END_EVENT_ID:刚结束的事件ID
SOURCE:源码位置
TIMER_START, TIMER_END,
TIMER_WAIT:事件开始/结束和等待的时间,单位为皮秒(picoseconds)
NESTING_EVENT_ID:该事件对应的父事件ID
NESTING_EVENT_TYPE:父事件类型(STATEMENT, STAGE, WAIT)

Statement Event表
     
Statement表主要包含3个表,events_statements_current,events_statements_history和events_statements_history_long。通过thread_id+event_id可以唯一确定一条记录。Statments表只记录最顶层的请求,SQL语句或是COMMAND,每条语句一行,对于嵌套的子查询或者存储过程不会单独列出。event_name形式为statement/sql/*,或statement/com/*
SQL_TEXT:记录SQL语句
DIGEST:对SQL_TEXT做MD5产生的32位字符串。如果为consumer表中没有打开statement_digest选项,则为NULL。
DIGEST_TEXT:将语句中值部分用问号代替,用于SQL语句归类。如果为consumer表中没有打开statement_digest选项,则为NULL。
CURRENT_SCHEMA:默认的数据库名
OBJECT_SCHEMA,OBJECT_NAME,OBJECT_TYPE:保留字段,全部为NULL
ROWS_AFFECTED:影响的数目
ROWS_SENT:返回的记录数
ROWS_EXAMINED:读取的记录数目
CREATED_TMP_DISK_TABLES:创建物理临时表数目
CREATED_TMP_TABLES:创建临时表数目
SELECT_FULL_JOIN:join时,第一个表为全表扫描的数目
SELECT_FULL_RANGE_JOIN:join时,引用表采用range方式扫描的数目
SELECT_RANGE:join时,第一个表采用range方式扫描的数目
SELECT_SCAN:join时,第一个表位全表扫描的数目
SORT_ROWS:排序的记录数目
NESTING_EVENT_ID,NESTING_EVENT_TYPE,保留字段,为NULL。

Connection表
   
 Connection表记录了客户端的信息,主要包括3张表:users,hosts和account表,accounts包含hosts和users的信息。
USER:用户名
HOST:用户的IP

Summary表
   
Summary表聚集了各个维度的统计信息包括表维度,索引维度,会话维度,语句维度和锁维度的统计信息。
(1).wait-summary表
events_waits_summary_global_by_event_name
场景:按等待事件类型聚合,每个事件一条记录。
events_waits_summary_by_instance
场景:按等待事件对象聚合,同一种等待事件,可能有多个实例,每个实例有不同的内存地址,因此
event_name+object_instance_begin唯一确定一条记录。
events_waits_summary_by_thread_by_event_name
场景:按每个线程和事件来统计,thread_id+event_name唯一确定一条记录。
COUNT_STAR:事件计数
SUM_TIMER_WAIT:总的等待时间
MIN_TIMER_WAIT:最小等待时间
MAX_TIMER_WAIT:最大等待时间
AVG_TIMER_WAIT:平均等待时间

(2).stage-summary表
events_stages_summary_by_thread_by_event_name
events_stages_summary_global_by_event_name
与前面类似

(3).statements-summary表
events_statements_summary_by_thread_by_event_name表和events_statements_summary_global_by_event_name表与前面类似。对于events_statements_summary_by_digest表,
FIRST_SEEN_TIMESTAMP:第一个语句执行的时间
LAST_SEEN_TIMESTAMP:最后一个语句执行的时间
场景:用于统计某一段时间内top SQL

(4).file I/O summary表
file_summary_by_event_name [按事件类型统计]
file_summary_by_instance [按具体文件统计]
场景:物理IO维度
FILE_NAME:具体文件名,比如:/u01/my3306/data/tcbuyer_0168/tc_biz_order_2695.ibd
EVENT_NAME:事件名,比如:wait/io/file/innodb/innodb_data_file
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计IO操作
COUNT_READ,SUM_TIMER_READ,MIN_TIMER_READ,AVG_TIMER_READ,MAX_TIMER_READ,
SUM_NUMBER_OF_BYTES_READ
统计读
COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,MAX_TIMER_WRITE,
SUM_NUMBER_OF_BYTES_WRITE
统计写
COUNT_MISC,SUM_TIMER_MISC,MIN_TIMER_MISC,AVG_TIMER_MISC,MAX_TIMER_MISC
统计其他IO事件,比如create,delete,open,close等

(5).Table I/O and Lock Wait Summaries-表
table_io_waits_summary_by_table
根据wait/io/table/sql/handler,聚合每个表的I/O操作,[逻辑IO]
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计IO操作
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计读
COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,
MAX_TIMER_WRITE
统计写
COUNT_FETCH,SUM_TIMER_FETCH,MIN_TIMER_FETCH,AVG_TIMER_FETCH,
MAX_TIMER_FETCH
与读相同
COUNT_INSERT,SUM_TIMER_INSERT,MIN_TIMER_INSERT,AVG_TIMER_INSERT,MAX_TIMER_INSERT
INSERT统计,相应的还有DELETE和UPDATE统计。

(6).table_io_waits_summary_by_index_usage
与table_io_waits_summary_by_table类似,按索引维度统计

(7).table_lock_waits_summary_by_table
聚合了表锁等待事件,包括internal lock 和 external lock。
internal lock通过SQL层函数thr_lock调用,OPERATION值为:
read normal
read with shared locks
read high priority
read no insert
write allow write
write concurrent insert
write delayed
write low priority
write normal

external lock则通过接口函数handler::external_lock调用存储引擎层,
OPERATION列的值为:
read external
write external

(8).Connection Summaries表
events_waits_summary_by_account_by_event_name
events_waits_summary_by_user_by_event_name
events_waits_summary_by_host_by_event_name
events_stages_summary_by_account_by_event_name
events_stages_summary_by_user_by_event_name
events_stages_summary_by_host_by_event_name
events_statements_summary_by_account_by_event_name
events_statements_summary_by_user_by_event_name
events_statements_summary_by_host_by_event_name

(9).socket-summaries表
socket_summary_by_instance
socket_summary_by_event_name

其它表
performance_timers: 系统支持的统计时间单位
threads: 监视服务端的当前运行的线程

Performance-Schema(二)
理论篇,performanceschema MySQL
Performance-Schema中总共包含52个表,主要分为几类:Setup表,Instance表,Wait
Event表,Stage Ev…

+—————————————-+—————-+

2rows inset ( 0. 00sec)

+——————————————————+

MAX_TIMER_WAIT: 18446696808701862260

| wait/synch/mutex/sql/LOCK_open
|88|

(1)metadata_locks表

qogir_env@localhost: performance_schema 04:23:40> UPDATE setup_consumers SET
ENABLED = ‘YES’where name like
‘%wait%’;

责任编辑:

原标题:初相识|performance_schema全方位介绍(一)

COUNT _READ_WITH _SHARED_LOCKS: 0

|Transactions | XA |Savepoints
|

根据请求锁的线程数以及所请求的锁的性质,访问模式有:独占模式、共享独占模式、共享模式、或者所请求的锁不能被全部授予,需要先等待其他线程完成并释放。

| /data/mysqldata1/innodb_ts/ibdata1
|wait/io/file/innodb/innodb_data_file | 3 |

1row inset ( 0. 00sec)

+—————————————-+

·READ_LOCKED_BY_COUNT:当一个线程在共享(读)模式下持有一个rwlock时,READ_LOCKED_BY_COUNT列值增加1,所以该列只是一个计数器,不能直接用于查找是哪个线程持有该rwlock,但它可以用来查看是否存在一个关于rwlock的读争用以及查看当前有多少个读模式线程处于活跃状态。

|
/data/mysqldata1/mydata/mysql/help_relation.ibd
|wait/io/file/innodb/innodb_data_file | 3 |

|TABLE | xiaoboluo |test | 140568038528544 |0| 0 |NULL | NULL |

使用
INFORMATION_SCHEMA.ENGINES表来查询你的数据库实例是否支持INFORMATION_SCHEMA引擎

SUM_TIMER_READ_NORMAL: 0

阶段事件记录表,记录语句执行的阶段事件的表,与语句事件类型的相关记录表类似:

OBJECT _INSTANCE_BEGIN: 2658004160

责任编辑:

·OWNER_THREAD_ID,OWNER_EVENT_ID:这些列表示创建prepare语句的线程ID和事件ID。

| Tables_in_performance_schema
(%wait%) |

OWNER_OBJECT_SCHEMA: NULL

|
/data/mysqldata1/mydata/mysql/server_cost.ibd
|wait/io/file/innodb/innodb_data_file | 3 |

·prepare语句解除资源分配:对已检测的prepare语句实例执行COM_STMT_CLOSE或SQLCOM_DEALLOCATE_PREPARE命令,同时将删除prepare_statements_instances表中对应的行信息。为了避免资源泄漏,请务必在prepare语句不需要使用的时候执行此步骤释放资源。

+—————————————+

·PROCESSLIST_ID:会话的连接标识符,与show
processlist结果中的ID字段相同;

+—————————————————+————+

·当请求元数据锁不能立即获得时,将插入状态为PENDING的锁信息行;

|EVENT_NAME | SUM_TIMER_WAIT |

·hosts:按照host名称对每个客户端连接进行统计;

2、performance_schema使用快速入门

我们先来看看表中记录的统计信息是什么样子的。

| wait/synch/mutex/sql/LOCK_plugin
|86027823|

SUM _TIMER_WAIT: 56688392

INDEX_NAME: NULL

表字段含义与session_account_connect_attrs表字段含义相同。

|wait/synch/mutex/sql/LOCK_plugin | 337
|

1. 连接信息统计表

| EVENT_NAME |COUNT_STAR |

SUM_ROWS_SENT: 0

| ENGINE |SUPPORT | COMMENT |TRANSACTIONS | XA |SAVEPOINTS |

* _runtime_version:Java运行环境(JRE)版本

|
/data/mysqldata1/mydata/mysql/gtid_executed.ibd
|wait/io/file/innodb/innodb_data_file | 3 |

(3)mutex_instances表

|wait/io/file/sql/casetest | 104324715
|

4.套接字事件统计

+———–+———-+——————————————+————+

prepared_statements_instances表字段含义如下:

|
events_statements_summary_by_account_by_event_name |

(2)users表

| wait/synch/mutex/mysys/LOCK_alarm
|145126935|

| file_summary_by_instance |

……

(2)file_instances表

ORDER BY COUNT_STAR DESC LIMIT 10;

MIN_TIMER_WAIT: 1905016

OBJECT_SCHEMA: NULL

admin@localhost : performance _schema 01:55:49> select * from
table_io _waits_summary _by_index _usage where
SUM_TIMER_WAIT!=0G;

|
/data/mysqldata1/innodb_log/ib_logfile1
|wait/io/file/innodb/innodb_log_file | 2 |

·rwlock_instances:wait sync相关的lock对象实例;

performance_schema实现机制遵循以下设计目标:

mutex_instances表列出了server执行mutex
instruments时performance_schema所见的所有互斥量。互斥是在代码中使用的一种同步机制,以强制在给定时间内只有一个线程可以访问某些公共资源。可以认为mutex保护着这些公共资源不被随意抢占。

从上文中我们已经知道,performance_schema在5.7.x及其以上版本中默认启用(5.6.x及其以下版本默认关闭),如果要显式启用或关闭时,我们需要使用参数performance_schema=ON|OFF设置,并在my.cnf中进行配置:

* 使用mysqlnd编译:只有_client_name属性,值为mysqlnd

2.3. performance_schema表的分类

| PROCESSLIST_ID |ATTR_NAME | ATTR_VALUE |ORDINAL_POSITION |

+—————————————–+

OBJECT _INSTANCE_BEGIN: 139882156936704

|
memory_summary_by_account_by_event_name |

属性统计表

|
events_stages_summary_by_thread_by_event_name |

…………

| 15 |291|
wait/synch/mutex/innodb/buf_dblwr_mutex |37392|

+——-+———————+——————-+

+—————————————————-+

下篇将为大家分享 《复制状态与变量记录表 |
performance_schema全方位介绍》 ,谢谢你的阅读,我们不见不散!返回搜狐,查看更多

+————————————————+

·当互斥体被销毁时,从mutex_instances表中删除相应的互斥体行。

+——————————————————+

(2)table_handles表

qogir_env@localhost :
performance_schema 03:55:30>
show tables like ‘events_transaction%’;

OBJECT_TYPE: TABLE

| Engine |Support | Comment

EVENT_NAME: wait/io/socket/sql/client_connection

| Tables_in_performance_schema
(%setup%) |

应用程序可以使用mysql_options()和mysql_options4()C
API函数在连接时提供一些要传递到server的键值对连接属性。

| file_summary_by_instance |

SUM _NUMBER_OF _BYTES_READ: 11567104

+—————————————————+————+

·
COUNT_REPREPARE:该行信息对应的prepare语句在内部被重新编译的次数,重新编译prepare语句之后,之前的相关统计信息就不可用了,因为这些统计信息是作为语句执行的一部分被聚合到表中的,而不是单独维护的。

2.2. 启用performance_schema

·释放元数据锁时,对应的锁信息行被删除;

罗小波·沃趣科技高级数据库技术专家

上一篇 《事件统计 |
performance_schema全方位介绍》详细介绍了performance_schema的事件统计表,但这些统计数据粒度太粗,仅仅按照事件的5大类别+用户、线程等维度进行分类统计,但有时候我们需要从更细粒度的维度进行分类统计,例如:某个表的IO开销多少、锁开销多少、以及用户连接的一些属性统计信息等。此时就需要查看数据库对象事件统计表与属性统计表了。今天将带领大家一起踏上系列第五篇的征程(全系共7个篇章),本期将为大家全面讲解performance_schema中对象事件统计表与属性统计表。下面,请跟随我们一起开始performance_schema系统的学习之旅吧~

| events_transactions_history |

EVENT_NAME: wait/io/socket/sql/client_connection

……

文件I/O事件统计表只记录等待事件中的IO事件(不包含table和socket子类别),文件I/O事件instruments默认开启,在setup_consumers表中无具体的对应配置。它包含如下两张表:

summary表提供所有事件的汇总信息。该组中的表以不同的方式汇总事件数据(如:按用户,按主机,按线程等等)。例如:要查看哪些instruments占用最多的时间,可以通过对events_waits_summary_global_by_event_name表的COUNT_STAR或SUM_TIMER_WAIT列进行查询(这两列是对事件的记录数执行COUNT(*)、事件记录的TIMER_WAIT列执行SUM(TIMER_WAIT)统计而来),如下:

(4)rwlock_instances表

+——————————————————+————————————–+————+

7.锁对象记录表

本文首先,大致介绍了什么是performance_schema?它能做什么?

admin@localhost : performance _schema 01:57:20> select * from
table_lock _waits_summary _by_table where SUM _TIMER_WAIT!=0G;

+——————————————————+

(5) socket_instances表

| 4 |350|
wait/synch/mutex/innodb/log_sys_mutex |25536|

·依赖于连接表中信息的summary表在对这些连接表执行truncate时会同时被隐式地执行truncate,performance_schema维护着按照accounts,hosts或users统计各种事件统计表。这些表在名称包括:_summary_by_account,_summary_by_host,*_summary_by_user

performance_schema库下的表可以按照监视不同的纬度进行了分组,例如:或按照不同数据库对象进行分组,或按照不同的事件类型进行分组,或在按照事件类型分组之后,再进一步按照帐号、主机、程序、线程、用户等,如下:

OBJECT_SCHEMA: xiaoboluo

|wait/io/file/sql/FRM | 1292823243
|

·COUNT_MISC,SUM_TIMER_MISC,MIN_TIMER_MISC,AVG_TIMER_MISC,MAX_TIMER_MISC:这些列统计了所有其他套接字操作,如socket的CONNECT、LISTEN,ACCEPT、CLOSE、SHUTDOWN类型操作。注意:这些操作没有字节计数

现在,我们已经大概知道了performance_schema中的主要表的分类,但,如何使用他们来为我们提供需要的性能事件数据呢?下面,我们介绍如何通过performance_schema下的配置表来配置与使用performance_schema。

* mysqlbinlog定义了_client_role属性,值为binary_log_listener

|
memory_summary_by_host_by_event_name |

*
使用libmysqlclient编译:php连接的属性集合使用标准libmysqlclient属性,参见上文

|
events_waits_summary_by_host_by_event_name |

*************************** 1. row
***************************

| events_statements_current |

·OBJECT_INSTANCE_BEGIN:此列是套接字实例对象的唯一标识。该值是内存中对象的地址;

| wait/io/file/sql/binlog_index
|1385291934|

·libmysqlclient客户端库(在MySQL和MySQL Connector /
C发行版中提供)提供以下属性:

|
/data/mysqldata1/mydata/mysql/help_topic.ibd
|wait/io/file/innodb/innodb_data_file | 3 |

*************************** 2. row
***************************

| events_waits_history_long |

*
events_waits_current表中可以查看到当前正在等待互斥体的线程时间信息(例如:TIMER_WAIT列表示已经等待的时间)

+—————————————–+

mutex_instances.LOCKED_BY_THREAD_ID和rwlock_instances.WRITE_LOCKED_BY_THREAD_ID列对于排查性能瓶颈或死锁问题至关重要。

| 0 |

·socket_instances:活跃连接实例。

|
wait/synch/mutex/sql/LOCK_global_system_variables |89|

·OBJECT_INSTANCE_BEGIN:读写锁实例的内存地址;

1 row in set (0.02 sec)

+————————————+————————————–+————+

| Tables_in_performance_schema
(%stage%) |

OWNER _EVENT_ID: 49

+———————————————–+

·server
监听一个socket以便为网络连接协议提供支持。对于监听TCP/IP或Unix套接字文件连接来说,分别有一个名为server_tcpip_socket和server_unix_socket的socket_type值,组成对应的instruments名称;

+——————–+———+——————–+————–+——+————+

套接字instruments具有wait/io/socket/sql/socket_type形式的名称,如下:

+————————————————+

MIN_TIMER_READ: 15213375

+——————–+———+—————————————————————-+————–+——+————+

·如果使用到了索引,则这里显示索引的名字,如果为PRIMARY,则表示表I/O使用到了主键索引

按照事件类型分组记录性能事件数据的表

从客户端发送到服务器的连接属性数据量存在限制:客户端在连接之前客户端有一个自己的固定长度限制(不可配置)、在客户端连接server时服务端也有一个固定长度限制、以及在客户端连接server时的连接属性值在存入performance_schema中时也有一个可配置的长度限制。

|
events_statements_summary_by_program |

users表包含连接到MySQL
server的每个用户的连接信息,每个用户一行。该表将针对用户名作为唯一标识进行统计当前连接数和总连接数,server启动时,表的大小会自动调整。
要显式设置该表大小,可以在server启动之前设置系统变量performance_schema_users_size的值。该变量设置为0时表示禁用users统计信息。

+—————————————+

COUNT_STAR: 56

+——————————————————+

| USER |HOST | CURRENT_CONNECTIONS |TOTAL_CONNECTIONS |

本文小结

table_io_waits_summary_by_index_usage表:

| wait/io/file/sql/MYSQL_LOG
|1599816582|

·ATTR_NAME:连接属性名称;

END_EVENT_ID: 60

+———————————-+———————–+

qogir_env@localhost :
performance_schema 03:58:38>
show tables like ‘%memory%’;

INDEX_NAME: PRIMARY

#
这些结果表明,THR_LOCK_malloc互斥事件是最热的。注:THR_LOCK_malloc互斥事件仅在DEBUG版本中存在,GA版本不存在

PS:MySQL
server使用几种缓存技术通过缓存从文件中读取的信息来避免文件I/O操作。当然,如果内存不够时或者内存竞争比较大时可能导致查询效率低下,这个时候您可能需要通过刷新缓存或者重启server来让其数据通过文件I/O返回而不是通过缓存返回。

|
/data/mysqldata1/mydata/multi_master/test.ibd
|wait/io/file/innodb/innodb_data_file | 1 |

……

OBJECT_INSTANCE_BEGIN: 955681576

COUNT_READ: 577

|
memory_summary_by_user_by_event_name |

+————————————————-+

Rowsmatched: 3 Changed: 3 Warnings: 0

|4| _os |linux-glibc2. 5| 0 |

TIMER_START: 1582395491787124480

MIN _TIMER_READ _WITH_SHARED_LOCKS: 0

| wait/io/file/myisam/kfile |411193611|

admin@localhost : performance_schema 05:47:55> select * from
table_handles;

8rows inset (0.00sec)

·metadata_locks:元数据锁的持有和请求记录;

“翻过这座山,你就可以看到一片海”

| qfsys |1| 1 |

PS:本系列文章所使用的数据库版本为 MySQL
官方 5.7.17版本

+————————————————+

| events_waits_history |

metadata_locks表不允许使用TRUNCATE TABLE语句。

#
该事件信息表示线程ID为4的线程正在等待innodb存储引擎的log_sys_mutex锁,这是innodb存储引擎的一个互斥锁,等待时间为65664皮秒(*_ID列表示事件来自哪个线程、事件编号是多少;EVENT_NAME表示检测到的具体的内容;SOURCE表示这个检测代码在哪个源文件中以及行号;计时器字段TIMER_START、TIMER_END、TIMER_WAIT分别表示该事件的开始时间、结束时间、以及总的花费时间,如果该事件正在运行而没有结束,那么TIMER_END和TIMER_WAIT的值显示为NULL。注:计时器统计的值是近似值,并不是完全精确)

1 row in set (0.00 sec)

Database changed

+—————————————-+———————–+———–+———–+——————–+——-+——–+

| wait/io/file/sql/FRM |452|

通过对以下两个表执行查询,可以实现对应用程序的监控或DBA可以检测到涉及锁的线程之间的一些瓶颈或死锁信息:

|
/data/mysqldata1/mydata/mysql/innodb_index_stats.ibd
|wait/io/file/innodb/innodb_data_file | 3 |

OBJECT _INSTANCE_BEGIN: 140568048055488

+———–+———-+——————————————+————+

……

语句事件记录表,这些表记录了语句事件信息,当前语句事件表events_statements_current、历史语句事件表events_statements_history和长语句历史事件表events_statements_history_long、以及聚合后的摘要表summary,其中,summary表还可以根据帐号(account),主机(host),程序(program),线程(thread),用户(user)和全局(global)再进行细分)

[Warning] Connection attributes oflength N were truncated

|目
1、什么是performance_schema

SUM_TIMER_READ: 0

| users |

rwlock_instances表字段含义如下:

| events_transactions_current |

| table_lock_waits_summary_by_table |#
按照每个表进行统计的表锁等待事件

21 rows inset (0.00 sec)

·SQL_TEXT:prepare的语句文本,带“?”的表示是占位符标记,后续execute语句可以对该标记进行传参。

+—————————————-+

| NULL |41| 45 |

qogir_env@localhost : performance_schema 06:19:20> SELECT
EVENT_NAME,SUM_TIMER_WAIT FROM
events_waits_summary_global_by_event_name

在服务器端面,会对连接属性数据进行长度检查:

……

PS:socket统计表不会统计空闲事件生成的等待事件信息,空闲事件的等待信息是记录在等待事件统计表中进行统计的。

|
/data/mysqldata1/innodb_log/ib_logfile0
|wait/io/file/innodb/innodb_log_file | 2 |

·COUNT_EXECUTE,SUM_TIMER_EXECUTE,MIN_TIMER_EXECUTE,AVG_TIMER_EXECUTE,MAX_TIMER_EXECUTE:执行prepare语句时的相关统计数据。

| TABLE_NAME |

* _pid:客户端进程ID

| /data/mysqldata1/undo/undo004
|wait/io/file/innodb/innodb_data_file | 3 |

table_io_waits_summary_by_table表:

+——————–+——-+

| 4 |program_name | mysql |5|

打开等待事件的保存表配置开关,修改修改setup_consumers
配置表中对应的配置i向

允许执行TRUNCATE TABLE语句,但是TRUNCATE
TABLE只是重置prepared_statements_instances表的统计信息列,但是不会删除该表中的记录,该表中的记录会在prepare对象被销毁释放的时候自动删除。

+——————————————————+

OBJECT _INSTANCE_BEGIN: 2658003840

EVENT_ID: 60

admin@localhost : performance _schema 10:50:38> select * from
prepared_statements_instancesG;

|
events_statements_summary_global_by_event_name |

·当一个pending状态的锁被死锁检测器检测并选定为用于打破死锁时,这个锁会被撤销,并返回错误信息(ER_LOCK_DEADLOCK)给请求锁的会话,锁状态从PENDING更新为VICTIM;

root@localhost : performance_schema
12:18:46> show tables like
‘%setup%’;

·HOST:某连接的客户端主机名。如果是一个内部线程创建的连接,或者是无法验证的用户创建的连接,则该字段为NULL;

qogir_env@localhost :
performance_schema 03:13:22>
SELECT TABLE_NAME FROM INFORMATION_SCHEMA.TABLES

我们先来看看表中记录的统计信息是什么样子的。

|performance_schema | ON |

* _pid:客户端进程ID

NESTING_EVENT_ID: NULL

我们先来看看表中记录的统计信息是什么样子的。

……

AVG _TIMER_READ _WITH_SHARED_LOCKS: 0

|
events_waits_summary_by_thread_by_event_name |

| wait/io/socket/sql/server_unix_socket |110667520| 1 |34| |0| ACTIVE
|

| file_summary_by_event_name |

*************************** 1. row
***************************

2.4.
performance_schema简单配置与使用

·accounts:按照user@host的形式来对每个客户端的连接进行统计;

+—————————————————-+

·每个文件I/O统计表都有一个或多个分组列,以表明如何统计这些事件信息。这些表中的事件名称来自setup_instruments表中的name字段:

  1. row ***************************

·当已授予的锁或挂起的锁请求被杀死时,其锁状态从GRANTED或PENDING更新为KILLED;

|
wait/synch/mutex/sql/THD::LOCK_thd_data |115|

·socket_summary_by_instance:针对每个socket实例的所有 socket
I/O操作,这些socket操作相关的操作次数、时间和发送接收字节信息由wait/io/socket/*
instruments产生。但当连接中断时,在该表中对应socket连接的信息行将被删除(这里的socket是指的当前活跃的连接创建的socket实例)

+———————————————–+

1row inset ( 0. 00sec)

| events_statements_history |

·OBJECT_INSTANCE_BEGIN:instruments对象的内存地址;

qogir_env@localhost :
performance_schema 06:14:08>
SELECT THREAD_ID,EVENT_ID,EVENT_NAME,TIMER_WAIT FROM
events_waits_history ORDER BY THREAD_ID limit 21;

MIN_TIMER_READ_NORMAL: 0

+————————————————+

*
file_summary_by_instance表:有额外的FILE_NAME、OBJECT_INSTANCE_BEGIN列,按照FILE_NAME、EVENT_NAME列进行分组,与file_summary_by_event_name
表相比,file_summary_by_instance表多了FILE_NAME和OBJECT_INSTANCE_BEGIN字段,用于记录具体的磁盘文件相关信息。

| setup_actors |

| file_summary_by_event_name |

|
events_statements_summary_by_host_by_event_name |

OBJECT_TYPE: TABLE

QueryOK, 0 rowsaffected(0.00sec)

·每个文件I/O事件统计表有如下统计字段:

qogir_env@localhost :
performance_schema 03:20:43>
use performance_schema

rwlock_instances表列出了server执行rwlock
instruments时performance_schema所见的所有rwlock(读写锁)实例。rwlock是在代码中使用的同步机制,用于强制在给定时间内线程可以按照某些规则访问某些公共资源。可以认为rwlock保护着这些资源不被其他线程随意抢占。访问模式可以是共享的(多个线程可以同时持有共享读锁)、排他的(同时只有一个线程在给定时间可以持有排他写锁)或共享独占的(某个线程持有排他锁定时,同时允许其他线程执行不一致性读)。共享独占访问被称为sxlock,该访问模式在读写场景下可以提高并发性和可扩展性。

| Tables_in_performance_schema
(%statement%) |

·COUNT_READ,SUM_TIMER_READ,MIN_TIMER_READ,AVG_TIMER_READ,MAX_TIMER_READ,SUM_NUMBER_OF_BYTES_READ:这些列统计所有接收操作(socket的RECV、RECVFROM、RECVMS类型操作,即以server为参照的socket读取数据的操作)相关的次数、时间、接收字节数等信息

| Tables_in_performance_schema
|

+——-+———————+——————-+

9rows inset (0.00sec)

| HOST |CURRENT_CONNECTIONS | TOTAL_CONNECTIONS |

3rows inset (0.01sec)

OBJECT _INSTANCE_BEGIN: 2655351104

| Tables_in_performance_schema
(%file%) |

·SUM_xxx:其余的SUM_xxx开头的列与语句统计表中的信息相同,语句统计表后续章节会详细介绍。

EVENT_NAME:
wait/synch/mutex/innodb/log_sys_mutex

MAX_TIMER_READ: 9498247500

| variables_by_thread |

·TIMER_PREPARE:执行prepare语句本身消耗的时间。

现在,很高兴的告诉大家,我们基于 MySQL
官方文档加上我们的验证,整理了一份可以系统学习 performance_schema
的资料分享给大家,为了方便大家阅读,我们整理为了一个系列,一共7篇文章。下面,请跟随我们一起开始performance_schema系统的学习之旅吧。

+————-+—————+————-+———————–+—————–+—————-+—————+—————+

| cond_instances |

| admin |1| 1 |

|2、performance_schema使用快速入门

·prepare步骤:语法PREPARE stmt_name FROM
preparable_stmt,示例:PREPARE stmt FROM’SELECT 1′;
执行了该语句之后,在prepared_statements_instances表中就可以查询到一个prepare示例对象了;

| users |

+————————————————+

+—————————————————-+

STATEMENT_ID: 1

|
/data/mysqldata1/mydata/mysql/help_category.ibd
|wait/io/file/innodb/innodb_data_file | 3 |

1.数据库表级别对象等待事件统计

qogir_env@localhost :
performance_schema 03:53:51>
show tables like ‘events_wait%’;

+————————————————-+

现在,你可以在performance_schema下使用show
tables语句或者通过查询
INFORMATION_SCHEMA.TABLES表中performance_schema引擎相关的元数据来了解在performance_schema下存在着哪些表:

admin@localhost : performance _schema 11:00:44> select * from
file_summary _by_event _name where SUM_TIMER _WAIT !=0 and
EVENT_NAME like ‘%innodb%’ limit 1G;

NUMBER_OF_BYTES: NULL

这些连接表都允许使用TRUNCATE TABLE语句:

|PERFORMANCE_SCHEMA | YES
|Performance Schema | NO
|NO | NO |

cond_instances表字段含义如下:

| /data/mysqldata1/undo/undo001
|wait/io/file/innodb/innodb_data_file | 3 |

* _thread:客户端线程ID(仅适用于Windows)

IT从业多年,历任运维工程师、高级运维工程师、运维经理、数据库工程师,曾参与版本发布系统、轻量级监控系统、运维管理平台、数据库管理平台的设计与编写,熟悉MySQL体系结构,Innodb存储引擎,喜好专研开源技术,追求完美。

| 4 |_client_name | libmysql |1|

+———————————————–+

·PORT:TCP/IP端口号,取值范围为0〜65535;

| 0 |

performance_schema还统计后台线程和无法验证用户的连接,对于这些连接统计行信息,USER和HOST列值为NULL。

TIMER_END: 1582395491787190144

·INTERNAL_LOCK:在SQL级别使用的表锁。有效值为:READ、READ WITH
SHARED LOCKS、READ HIGH PRIORITY、READ NO INSERT、WRITE ALLOW
WRITE、WRITE CONCURRENT INSERT、WRITE LOW
PRIORITY、WRITE。有关这些锁类型的详细信息,请参阅include/thr_lock.h源文件;

Rowsmatched: 323 Changed: 0 Warnings: 0

performance_schema提供了针对prepare语句的监控记录,并按照如下方法对表中的内容进行管理。

+—————————————–+

AVG _TIMER_WAIT: 56688392

| 4 |348|
wait/io/file/innodb/innodb_log_file |693076224|

users表字段含义如下:

[mysqld]

·TOTAL_CONNECTIONS:某主机的总连接数。

OBJECT_NAME: NULL

EVENT_NAME: wait/io/socket/sql/server_tcpip_socket

2.1检查当前数据库版本是否支持

01

|
events_statements_summary_by_thread_by_event_name |

OBJECT_SCHEMA: xiaoboluo

本篇内容到这里就接近尾声了,相信很多人都认为,我们大多数时候并不会直接使用performance_schema来查询性能数据,而是使用sys
schema下的视图代替,为什么不直接学习sys schema呢?那你知道sys
schema中的数据是从哪里吐出来的吗?performance_schema
中的数据实际上主要是从performance_schema、information_schema中获取,所以要想玩转sys
schema,全面了解performance_schema必不可少。另外,对于sys
schema、informatiion_schema甚至是mysql
schema,我们后续也会推出不同的系列文章分享给大家。

+————————————–+———————–+———————+

qogir_env@localhost :
performance_schema 02:41:54>
show engines;

*************************** 1. row
***************************

| variables_by_thread |

COUNT_REPREPARE: 0

下篇将为大家分享
“performance_schema之二(配置表详解)”
,谢谢你的阅读,我们不见不散!返回搜狐,查看更多

·LOCKED_BY_THREAD_ID:当一个线程当前持有一个互斥锁定时,LOCKED_BY_THREAD_ID列显示持有线程的THREAD_ID,如果没有被任何线程持有,则该列值为NULL。

等待事件记录表,与语句事件类型的相关记录表类似:

·table_handles:表锁的持有和请求记录。

|PERFORMANCE_SCHEMA | YES
|Performance Schema

这些信息使您能够了解会话之间的元数据锁依赖关系。不仅可以看到会话正在等待哪个锁,还可以看到当前持有该锁的会话ID。

1row inset (0.00sec)

澳门新葡亰网址,·TOTAL_CONNECTIONS:某帐号的总连接数(新增加一个连接累计一个,不会像当前连接数那样连接断开会减少)。

|wait/synch/mutex/mysys/THR_LOCK::mutex | 89 |

连接属性记录在如下两张表中:

|
events_statements_summary_by_user_by_event_name |

我们先来看看表中记录的统计信息是什么样子的。

|1、**什么是performance_schema**

| 4 |_client_version | 5.7.18 |3|

|13| 2261
|wait/synch/mutex/innodb/flush_list_mutex | 122208 |

·对于Unix
domain套接字(server_unix_socket)的server端监听器,端口为0,IP为空串;

|
memory_summary_global_by_event_name |

MIN_TIMER_WAIT: 0

|4|
349 |wait/synch/mutex/innodb/fil_system_mutex | 65664 |

admin@localhost : performance_schema 09 :34:49> select * from
accounts;

87rows inset (0.00sec)

·LOCK_TYPE:元数据锁子系统中的锁类型。有效值为:INTENTION_EXCLUSIVE、SHARED、SHARED_HIGH_PRIO、SHARED_READ、SHARED_WRITE、SHARED_UPGRADABLE、SHARED_NO_WRITE、SHARED_NO_READ_WRITE、EXCLUSIVE;

| events_statements_summary_by_digest
|

| wait/synch/mutex/mysys/THR_LOCK_heap |32576832| NULL |

|wait/io/file/myisam/dfile | 322401645
|

· NAME:与condition相关联的instruments名称;

| 13 |2259|
wait/synch/mutex/innodb/fil_system_mutex |8708688|

我们先来看看表中记录的统计信息是什么样子的。

配置好之后,我们就可以查看server当前正在做什么,可以通过查询events_waits_current表来得知,该表中每个线程只包含一行数据,用于显示每个线程的最新监视事件(正在做的事情):

| USER |CURRENT_CONNECTIONS | TOTAL_CONNECTIONS |

qogir_env@localhost :
performance_schema 03:55:07>
show tables like ‘events_stage%’;

2rows inset ( 0. 00sec)

使用show命令来查询你的数据库实例是否支持INFORMATION_SCHEMA引擎

澳门新葡亰网址 1

+——————–+———+——————–+————–+——+————+

·file_instances:文件对象实例;

+———–+———-+——————————————+————+

| FILE_NAME |EVENT_NAME | OPEN_COUNT |

澳门新葡亰网址 2

我们先来看看表中记录的统计信息是什么样子的。

| accounts |

* _os:操作系统类型(例如Linux,Win64)

5rows inset (0.00sec)

+————-+—————+————-+———————–+—————–+—————-+—————+—————+

然后,简单介绍了如何快速上手使用performance_schema的方法;

……

| events_waits_summary_by_instance
|

·CURRENT_CONNECTIONS:某用户的当前连接数;

| events_transactions_history_long
|

*************************** 1. row
***************************

+——————–+——-+

·MySQL
Connector/J定义了如下属性:

+——————————————————+

·rwlock_instances:查看当前rwlock行的一些锁信息(独占锁被哪个线程持有,共享锁被多少个线程持有等)。

| FILE_NAME |EVENT_NAME | OPEN_COUNT |

SUM _TIMER_READ _WITH_SHARED_LOCKS: 0

20rows inset (0.00sec)

澳门新葡亰网址 3

qogir_env@localhost :
performance_schema 06:27:26>
SELECT * FROM file_instances limit 20;

| /data/mysqldata1/innodb_ts/ibdata1
|wait/io/file/innodb/innodb_data_file | 3 |

+——————————————————+————————————–+————+

+———————————-+———————–+

| Variable_name |Value |

·ATTR_VALUE:连接属性值;

12rows inset (0.01sec)

SQL_TEXT: SELECT 1

***************************

*
如果log_error_verbosity系统变量设置值大于1,则performance_schema还会将错误信息写入错误日志:

相关文章