Коли ендпоінт гальмує, команда часто починає не з читання запиту, а з розмови про нову межу сервісу. Потім поруч з’являються кеш, черга і ще одна точка відмови, хоча slow log ні разу не сказав, що проблема саме в архітектурному поділі. Він показує лише SQL, який перейшов часовий поріг. Якщо змінити форму системи раніше, ніж прочитано ці рядки, той самий запит просто переїде в інше місце, а зайва робота в базі залишиться.
Надійніший порядок починається не зі схеми, а з уже відчутного очікування. Спершу фіксують, скільки чекала людина. Потім дістають slow log за цей проміжок, групують записи за текстом SQL, звіряють Rows_examined із Rows_sent і рахують повтори. Лише після цього стає видно, що саме треба міняти: індекс, один агрегувальний запит замість циклу, менший набір колонок або винесення роботи з вебзапиту. Цифри нижче належать окремим операціям на одній навчальній платформі. Вони не є обіцянкою для будь-якої іншої системи й не з’явилися через сам факт поділу на сервіси.
1. Що насправді каже один запис
Окремий запис у slow log MySQL складається із шапки та SQL. У шапці видно час, користувача, хост, Query_time, Lock_time, Rows_sent і Rows_examined. Далі йде сам текст запиту. Query_time стосується лише цього SQL, а не всього очікування сторінки. Lock_time показує, скільки часу пішло на блокування. Rows_sent означає, скільки рядків сервер повернув. Rows_examined показує, скільки рядків довелося переглянути для цього результату.
Перший корисний зріз тут — співвідношення Rows_examined і Rows_sent. Якщо база переглянула сотні тисяч рядків, а віддала кілька десятків, проблема майже завжди в шляху доступу до даних. Причиною може бути відсутній індекс, пошук із шаблоном на початку, функція навколо колонки або JOIN, який роздуває набір ще до фільтрації. Усе це говорить про форму запиту, а не про те, що сервіс треба терміново розрізати. Після поділу той самий дисбаланс нікуди не зникне.
Коли Lock_time майже дорівнює Query_time, варто шукати не новий сервіс, а конкуренцію за блокування. Якщо інший записувач тримає рядок, додатковий мережевий крок лише ускладнить картину. Спочатку треба знайти джерело блокування, а вже потім вирішувати, чи є сенс змінювати межі системи.
2. Лог не завжди покаже цикл
long_query_time — це поріг, а не повна історія всіх звернень до бази. Якщо один короткий запит виконується багато разів, сторінка може тримати людину довго, хоча slow log майже порожній. Запит на 200 мс, який запускається в циклі для кожного рядка, легко дає секунди очікування без жодного помітного сліду у файлі.
Тому порожній або майже порожній slow log ще не означає, що база ні до чого. Якщо людина чекала дванадцять секунд, а в журналі видно лише один короткий SQL, потрібно рахувати повтори. Лог запитів фреймворка або копія зі зниженим порогом часто показують саме те, що slow log пропустив.
На одній навчальній платформі загальна фраза про повільну систему не допомагала зовсім. Реальна причина виявилася в циклі запитів. Після заміни цього циклу одним агрегувальним SQL конкретна операція скоротилася з 12,41 секунди до 2,451, а споживання пам’яті зменшилося на 1,5 ГБ. Вузьким місцем був повтор. Якби новий запит і далі читав не ті рядки, такого виграшу не сталося б. Саме тому перенесення циклу у воркер із поясненням, що «ручка тепер швидка», не відповідає на питання з логу.
Практично це означає таке: записи групують за текстом SQL і прибирають літерали, які змінюються від запуску до запуску. П’ятдесят рядків, що відрізняються лише id, — це не п’ятдесят окремих проблем, а один повторюваний запит. Поруч із Query_time треба бачити кількість запусків. Якщо болить саме кількість, потрібен один агрегувальний запит. Якщо болить один запуск, який читає надто багато рядків, треба міняти індекс або умову. Поділ сервісу — це вже інший клас рішень.
3. EXPLAIN на копії, а вже потім зміна
EXPLAIN має сенс лише там, де форма даних і обсяг близькі до робочих. Порожня схема може вибрати інший план і створити хибне відчуття безпеки. Тому експеримент проводять на копії, а не на базі, яка зараз обслуговує клієнтів. Якщо доступний лише живий MySQL, спершу потрібна репліка або відновлення з резервної копії. Додавання індексу — це зміна запису, і на великій таблиці вона може тривати відчутно довго.
План читають для вже згрупованого запиту, а не для абстрактної ідеї «у нас повільні замовлення». Дивляться на тип доступу, використаний ключ і очікувану кількість рядків. Якщо на вибірковій умові немає ключа, це кандидат на індекс. Якщо ключ є, але рядків усе одно надто багато, значить умова не збігається з ключем або запит просить сортування чи шаблон пошуку, який цей ключ не покриває. Це формулювання варто записати буквально. Індекс без такого речення швидко стає зайвим.
На тій самій навчальній платформі частиною роботи були відсутні пошукові індекси. Після усунення цих та інших вузьких місць середнє тижневе навантаження CPU знизилося з 82,2% до 2,75%. Це не число, яке друкує EXPLAIN, і не прогноз для будь-якого іншого сервера. Лог і план лише показали, де система витрачала ресурси даремно. CPU впав тому, що запити перестали робити зайву роботу, а не тому, що хтось перейменував межу сервісу.
Якщо окремого середовища ще немає, спочатку будують копію, а вже потім змінюють індекс. Для людей, які відчують наслідки релізу, пов’язане правило просте: не з’ясовуйте це на продакшені.
4. Чого slow log не доводить
Slow log не доводить, що перед непрочитаним запитом треба поставити чергу. Фонова задача з тим самим циклом перегляне ті самі рядки, просто очікування змінить форму. Черга доречна тоді, коли робота не повинна тримати вебзапит і коли повтор не дублює побічний ефект. Це окреме рішення, а не спосіб не дивитися на SQL. Про таку межу йдеться тут: коли черга на Node доречна поруч із Laravel.
Slow log не доводить і те, що першим кроком має бути кеш. Якщо закешувати повільний результат раніше, ніж виправлено сам запит, легко законсервувати випадкову форму відповіді та вигадати складну інвалідацію для того, що можна було один раз порахувати правильно. Кеш має сенс після виміряного агрегувального запиту, а не замість нього.
Є ще одна межа, яку цей журнал не покриває: він не показує розмір відповіді, яку обробник формує після SQL. На тій самій навчальній платформі одна критична операція скоротилася з 23 937 мс до 48 мс, а одна відповідь API — з 912 КБ до 2,1 КБ. Зменшення відповіді не є рядком у slow log. Сторінці просто не були потрібні всі дані. Якщо рефакторинг і далі вибирає кожну колонку, той самий обсяг поїде через нову межу. Тому після читання логу треба читати і те, що повертає дія.
Так само slow log не дає автоматичного права на переписування фреймворку чи всього сервісу. Успадковані системи часто стабілізують формою запиту, індексами та розміром відповіді. Якщо пропозиція звучить як «код брудний, тож перепишімо все», спершу варто попросити SQL, лічильники рядків і секунди. Неідеальний код, який виконує один індексований запит, — це питання підтримки, а не обов’язково причина сьогоднішнього інциденту.
5. Порядок, який можна повторити
Почніть зі сторінки або задачі, де людина вже чекає. Самостійно запишіть секунди. Підніміть slow log за цей проміжок, а якщо числа не сходяться, знайдіть і ті SQL, які поріг приховав. Згрупуйте запити за текстом. Для верхнього запису випишіть Query_time, Lock_time, Rows_sent, Rows_examined і кількість повторів. Запустіть EXPLAIN на копії. Потім змініть щось одне: цикл на агрегувальний запит, відсутній індекс або зайві колонки. Після цього знову виміряйте ту саму операцію й залиште нове число поруч із тим самим SQL.
Якщо потрібних полів логу немає, перший крок усе одно не змінюється: назвіть сторінку до будь-якого редизайну. Якщо люди чекають на CRM-звіт, перевірте, чи належать рядки саме цьому клієнту: звіти без переписування. Швидший запит, який повертає чужі дані, не є покращенням.
Коли варто просити другий погляд
Згрупувати лог і виписати лічильники рядків часто можна самостійно. Другий погляд потрібен тоді, коли журнал лежить на сервері, який команда не вміє читати, коли для EXPLAIN потрібна копія з обсягом продакшену, а її немає, або коли запит живе всередині сервісу, який уже збираються замінити, але в плані заміни немає навіть згадки про Rows_examined. Надсилайте сторінку, секунди й SQL із цими числами. Сирий лог із клієнтськими значеннями краще не пересилати. Літерали варто прибрати.
Таке читання логу й зміни після нього — це робота, яку я роблю на системах, що вже працюють у продакшені. Послуги охоплюють швидкодію та backend-системи. Роботи тримають кожну цифру поруч з операцією, яка її дала: агрегувальний запит, індекси, розмір відповіді. В сфері продуктивності та масштабованості усе починається з конкретних текстів запитів: переписати той самий запит, додати потрібний індекс, порівняти цифри на копії. Якщо у вас уже є SQL і лічильники, напишіть мені і надішліть саме їх. Дані клієнтів залиште в себе.