Оптимизация LAMP-приложения на примере OpenX: разгоняемся до 1000 запросов в секунду (Александр Чистяков, ADD-2011)
Материал из 0x1.tv
(перенаправлено с «2b7-lamp-optimization-openx-chistyakov»)
Короткая ссылка: 2b7-lamp-optimization-openx-chistyakov
Аннотация
- Докладчик
- Александр Чистяков
Типичная ситуация: имеется существующий веб-проект, написанный с применением Linux, Apache, MySQL и PHP, и заказчик хочет сделать проект быстрее с наиболее полным сохранением функциональности.
В данном случае в качестве существующего проекта выступает open source баннерная платформа OpenX, и существенное требование заказчика — разогнать OpenX до пиковой нагрузки в 1000 запросов в секунду и долговременной нагрузки в 600 запросов в секунду.
Постановка задачи: отдача JavaScript-баннеров с заданными параметрами производительности при заданном числе объектов системы.
- Краткий обзор объектов предметной области OpenX: баннеры, кампании, зоны.
- Особенности OpenX: подходы к оптимизации, предлагаемые производителем, несколько раундов оптимизации уже было.
- Проблемы: алгоритм скрипта выбора баннеров плохо работает при требуемом количестве объектов, имеем CPU-bound систему (обычно IO-bound).
- Решение: кэширование предрассчитанных данных в БД.
- Новые вводные от заказчика, поиск компромисса.
- Сбор информации о системе: точки профилирования в коде скрипта, мониторинг с помощью Cacti и Zabbix.
- Архитектура системы: типы узлов и связи между узлами. Балансирование нагрузки: nginx vs. HAProxy.
- Действия после перенесения нагрузки на уровень БД: кэширование в памяти, проблема: много записи на диск.
- MySQL vs MySQL (выбор движка хранилища), MySQL vs MySQL (выбор сборки: stock, Percona Server, MariaDB), MySQL vs PostgreSQL, MySQL vs in-memory RDBMS, MySQL vs NoSQL.
- Тюнинг MySQL: параметры конфигурации, параметры платформы (файловая система).
- Нагрузочное тестирование: как получить 1000 rps от клиента? siege vs JMeter vs Tsung.
- Эволюция архитектуры. Поиск возможностей шардирования данных.
- Отказоустойчивость: memcached, moxi, Membase.
- Управление конфигурацией: проблема развертывания нод и управления нодами.
- Использование Puppet для управления конфигурацией.
Видео
Посмотрели доклад? Понравился? Напишите комментарий! Не согласны? Тем более напишите.
Примечания и отзывы
Александр Чистяков рассказал об опыте оптимизации производительности в условиях политического давления :). ©
Александр Чистяков полгода оптимизировал php-приложение, не меняя его код. Очень сжатый и по существу доклад, построенный по принципу серии доктора Хауса. ©
Выступление Александра Чистякова с разгоном LAMP до второй космической скорости вообще целиком состояло из трюков и ощущалось как детективный сериал «Спрут». То мы их, то они нас, и таких двести итераций. Интересно, но несколько однообразно. ©
Plays:306 Comments:0