performance_schema 开着却查不到 SQL:三层前提和几个会误判的地方
performance_schema=ON、实例跑得正常,events_statements_history 却是空的,或者 events_statements_summary_by_digest 只剩几行,也没有报错。P_S 不记录数据时通常不会报错;一条事件要写进表,必须同时满足三个前提,缺哪个维度,对应的表就是空的。
三层前提:线程、仪器、consumer
MySQL 内部开发者 Marc Alff 在 StackOverflow 的回答中给出了这套判定,可以当作检查顺序:
- 产生事件的线程被 instrument,即
performance_schema.threads.INSTRUMENTED = YES; - 当前执行的 instrument 被启用,即
setup_instruments里该name的ENABLED=YES; - 目标 consumer 被启用,即
setup_consumers里对应行的ENABLED=YES。
按这个顺序逐层检查。
select THREAD_ID, NAME, PROCESSLIST_ID, PROCESSLIST_USER,
PROCESSLIST_HOST, INSTRUMENTED
from performance_schema.threads;
控制哪些线程会被 instrument 由 setup_actors 决定。它只对之后新建的线程生效,已有连接不会回填,所以改完得重新连接才能看到。MySQL 8.0 增加了 setup_threads 表,可以直接改已有线程的 INSTRUMENTED;5.7/5.6 没有这张表,只能靠重连。
select * from setup_instruments
where name like 'statement/%' and enabled='NO';
statement/% 默认 ENABLED=YES, TIMED=YES。如果 TIMED=NO,事件仍会计数,但 TIMER_WAIT 为 NULL,按耗时排序时这一列就全是空值;看起来像“没采集”,其实只是没计时。
8.0 与 5.6 的默认值不一样
MySQL 8.0 的 setup_consumers 默认值:
events_stages_current NO
events_stages_history NO
events_stages_history_long NO
events_statements_current YES
events_statements_history YES
events_statements_history_long NO
events_transactions_current YES
events_transactions_history YES
events_transactions_history_long NO
events_waits_current NO
events_waits_history NO
events_waits_history_long NO
global_instrumentation YES
thread_instrumentation YES
statements_digest YES
consumer 有层级关系,父级关掉后子级不会发布数据。修改 setup_consumers 立即生效,但对这张表执行 TRUNCATE 是不允许的。
5.6 的默认值不同:events_statements_history 默认为 NO。因此,从老实例升级上来的实例,最常误判“history 表默认能用”。
digest 表满了会落进一行 NULL
events_statements_summary_by_digest 的行数上限由 performance_schema_digests_size 决定,这个变量由 autosize 决定,具体值以 SHOW GLOBAL VARIABLES 实测为准。表满之后,新出现的 digest 会全部写入同一行兜底记录:SCHEMA_NAME 为 NULL、DIGEST 为 NULL。采集侧看到的就是一堆无法归类的 SQL,或者指标在某次发布后突然只剩几行。
SHOW STATUS LIKE 'Performance_schema_digest_lost';
该值大于 0 表示已有语句被丢进兜底行。清理方式:
TRUNCATE performance_schema.events_statements_summary_by_digest;
但排查事故时不要急着 truncate,历史数据就丢了。先存快照:
CREATE TABLE analysis.stmt_snapshot AS
SELECT * FROM performance_schema.events_statements_summary_by_digest;
分区表场景(daily_aggregates_001/002/…)更明显:每张分区表各产生一个 digest,很快就能撑满这张表。采集侧需要按 replace_digits 之类的规则先做归一化,再入库。
内存仪器必须在分配之前启用
memory/innodb/buf_buf_pool 这类 instrument 只在内存分配的那一刻统计。MySQL 启动后 buffer pool 已经分配完,再打开它,CURRENT_NUMBER_OF_BYTES_USED 会一直是 0,直到下次重启。所以这类改动要写进 my.cnf:
--performance-schema-instrument='statement/sql/%=ON'
--performance-schema-consumer-events-waits-history=ON
运行期间改 setup_* 表重启就丢;启动配置和运行配置要分开管理。
无锁读:读的过程中数值会变
P_S 的表不加锁,读的过程中数值会变。统计百分比加起来不等于 100%、ORDER BY 排序不稳定,都属于正常现象,不是数据坏了。需要一致快照时,把 P_S 表物化到子查询里:
select ... from (
select ... from performance_schema.events_statements_summary_by_digest
) x
或者用 NO_MERGE 提示阻止子查询合并。
自检 P_S 本身是否正常:
SHOW ENGINE PERFORMANCE_SCHEMA STATUS;
能看到内存占用和丢失事件计数,比只盯某张表更直接。
全开的代价
instrument 关掉只是不采集,内存仍按配置预分配,没法只分配不分配。全开则有性能成本:阿里云 DAS 的压测报告显示,RDS MySQL 4c16g 只读场景下从 47176 降到 39168(pfson_conon_inson),约 -17%。
所以在生产上不要直接执行 UPDATE setup_instruments SET ENABLED='YES' 全部开启;按需开 statement/sql/%,用完后关闭。
参考
- MySQL 8.0 Reference Manual 29.12.2.2 setup_consumers Table
- MySQL 8.0 Reference Manual 29.3 Startup Configuration
- Datadog 文档:truncating events_statements_summary_by_digest
- Percona Community《MySQL: Tracing a single query with PERFORMANCE_SCHEMA》