Percona 资深工程师 Marco Tusa 近日爆料称,升级到 MySQL 8.0.38 版本后,当实例中的表个数超过一万个,实例重启后会发生 Crash 而失败,即便是重启时加上validate_tablespace_paths=OFF
也不 行。
这个问题在 >= 8.0.38 版本中存在,包括 8.4.1 和 9.0.0。
详细复现过程参见:https://perconadev.atlassian.net/browse/PS-9306。
用 MySQL 9.0.0 版本测试:
--创建一个最简单的表,并写入数据 >CREATEDATABASEtest; >USEtest; >CREATETABLEt_1( `id`intNOTNULL, PRIMARYKEY(`id`) ); >INSERTINTOt_1SELECT1;
然后反复创建类似上面的表,表个数达到 1 万。
>SELECTCOUNT(*)FROMinformation_schema.tablesWHERETABLE_SCHEMA='test'; +----------+ |count(*)| +----------+ |10000| +----------+
之后重启实例,就能看到日志里有类似下面的内容,启动失败:
[Note][MY-012207][InnoDB]Using2threadstoscan10002tablespacefiles [Note][MY-012200][InnoDB]Thread #0-Checked876/10002files ... [Note][MY-012201][InnoDB]Checked10002files [Note][MY-012208][InnoDB]CompletedspaceIDcheckof10004files. ... 2024-07-12T06:48:14ZUTC-mysqldgotsignal11; SignalSIGSEGV(Addressnotmappedtoobject)ataddress0x508 Mostlikely,youhavehitabug,butthiserrorcanalsobecausedbymalfunctioninghardware. BuildID[sha1]=7f06a4743d7801096bd81bc999201fdbca43a12c Threadpointer:0x0 Attemptingbacktrace.Youcanusethefollowinginformationtofindout wheremysqlddied.Ifyouseenomessagesafterthis,somethingwent terriblywrong... stack_bottom=0thread_stack0x100000 [root@db160mysql-9.0.0-linux-glibc2.17-x86_64-minimal]##00x103f726 #10x103fa8c #20x7f18f666ac1f atsysdeps/unix/sysv/linux/x86_64/sigaction.c:0 #30x218a7be #40x21705a7 #50x2b1d263 #60x7f18f6660179start_threadat/usr/src/debug/glibc-2.28/nptl/pthread_create.c:479 #70x7f18f4811dc2 atsysdeps/unix/sysv/linux/x86_64/clone.S:95 #80xffffffffffffffff Themanualpageathttp://dev.mysql.com/doc/mysql/en/crashing.htmlcontains informationthatshouldhelpyoufindoutwhatiscausingthecrash.
确实挺拉胯的。
除了上面的测试用例,还测试了几种情形:
1、从 8.0.38 降级到 8.0.37、36、35都是OK的,可以重新拉起,不报错;
2、拉起后删掉多余的表后再次用 8.0.38 也可以拉起;再次降级回 8.0.35 后又升级回 8.0.38 还是正常。
结论:
1、8.0.35 - 8.0.38 间可以反复升级、降级操作不影响,仅限我的测试场景,更复杂场景不能保证也 OK。
2、降级到 8.0.34 后就开始跪了,没再继续往下测试。
MySQL 8.0 手册和 release notes 里都没有说允许 8.0.35-8.0.38 间相互升降级,但目前简单测试是 OK 的。
当然,还是有办法可以规避的,也就是采用共享/通用表空间方案,例如:
--1.共享表空间方案 >SETGLOBALinnodb_file_per_table=0; >CREATETABLE...; --2.通用表空间方案 >CREATETABLESPACEtestADDDATAFILE'test.ibd'; >CREATETABLEt_1(...)TABLESPACE=test;
上述方案我已经验证过。
说下我个人看法,这个 Bug 虽很 low,但这个问题很小,也很容易规避。
MySQL 最近表现确实很辣鸡,但我依然热爱它 。。。这算不算罗曼罗兰说的那种英雄主义,咱就是这么乐观,哈哈哈。
最后,看看AliSQL 的内核开发者对引发此问题的 bug (#bug115517)进行的深入分析。他曾在 AliSQL 上做了海量表场景下的启动优化,使百万表 Recovery 启动时间从 500 多秒缩短到 20 多秒。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.