Воркеры PHP-FPM, которые съели хост
RSS рос после каждого запроса в каталог. Утечкой оказался copy-on-write, а не забытый unset().
Разборы
Бизнес-кейсы
Разборы прошлых бизнес-проектов. Какая была цель, какие решения приняли и что изменилось после релиза.
Memcached для HTML, Redis для lock
Два хранилища, у каждого своя работа. Страницы живут в Memcached. Lock на пересборку живёт в Redis.
Locale-slab вместо JSON на 2 МБ
Три локали в одной JSON-колонке раздували каждый листинг. Упакованный slab в Memcached срезал кучу воркера вдвое.
Job в Horizon, который вёз всю модель
Redis забился serialize Eloquent. Очередь тормозила, потому что payload был каталогом.
Node-процесс, который держал все локали
Vue SSR рендерил русский и всё равно выделял файлы en и de. Изолят рос с каждой страницей.
Microcache, который выучил каждую cookie
nginx кэшировал HTML по auth_token. Hit rate умер. Публичным страницам этот ключ в cookie не нужен.
Листинг, который сортировал JSON в MySQL
ORDER BY JSON_EXTRACT заполнял временную таблицу. Сорок строк всё равно стоили filesort по пятидесяти тысячам SKU.
502 из-за полной listen-очереди
PHP-FPM не был медленным. Docker NAT на порт 9000 ронял SYN, когда backlog упирался в 128.
Планировщик, который запускал один job четыре раза
withoutOverlapping жил в Memcached. Вытеснение HTML снимало mutex. Четыре пересборки писали один ключ листинга.
Ключи сессий, которые не истекали
Redis забился блобами laravel_session. Horizon терял reserved job из-за allkeys-lru.
Bind-mount, который выключил OPcache
Сервис php монтировал apps/. Каждый запрос делал stat() дерева через virtiofs. Hits в OPcache были шумом.
SIGTERM посреди записи каталога
compose restart php убивал FCGI в полёте. nginx отдавал 502. Полузаписанный ключ Memcached оставался.
Спящие хендлы PDO, которые забили MySQL
ATTR_PERSISTENT на php-fpm, Horizon и schedule. max_connections 151. Too many connections в полдень.
Дата, которая в браузере была вчера
Vue SSR писал 14 Jul в UTC. Клиент писал 13 Jul в Берлине. Гидратация падала, страница рисовалась дважды.
GIN, который не видел запрос листинга
WHERE title->>'ru' ILIKE сканировал пятьдесят тысяч строк JSONB. GIN был для тегов. Каталог платил за extract.
Messenger, который списал карту дважды
Провайдер вернул 200. Воркер умер до ack. Redis отдал сообщение снова. Unique middleware не закрыл SIGKILL.
Liveness, который убивал PHP во время OPcache
Healthcheck Docker стал liveness. Первый запрос компилировал LaraBoom. Kubelet слал SIGKILL. Реплика не стала Ready.
React, который гидрировал разметку Vue
Каталог был Vue SSR. Общий остров крутил React. Даты не сошлись. Страница рисовалась дважды и везла граф CMS.
HTML на крае, который игнорировал cookie локали
Cloudflare закэшировал первый HTML для URL. Посетитель de получил разметку ru. Vue гидрировал чужой язык и уходил в навигацию.