Workspace Digital Awards — приём заявок в самом разгаре! Успейте номинироваться по льготной цене до 30 декабря.
Интернет-магазины

Фильтр товаров и скорость каталога: что проверить, когда товаров десятки тысяч

159 
 

Фильтр в каталоге работает тяжелее любой другой части интернет-магазина. Покупатель отмечает бренд и диапазон цены, а магазин должен не только показать подходящие товары, но и пересчитать, сколько товаров останется у каждого значения каждого фасета. На каталоге в пару тысяч позиций этого не видно. Когда товаров становится десятки тысяч, фильтр часто превращается в самое медленное место сайта, и покупатель ждет ответа после каждого клика.

Мы разрабатываем интернет-магазины на OpenCart и сделали для них свой модуль фильтра. Ниже то, что мы проверяем в каталоге, когда магазин растет, и цифры наших замеров.

Что происходит при каждом клике

Чтобы рядом с каждым значением стояло число товаров, магазин выполняет несколько операций:

  • находит товары раздела с учетом подразделов, наличия и цен для группы покупателя;

  • отбирает те, что подходят под уже выбранные значения;

  • для каждого фасета считает, сколько товаров останется при выборе каждого значения;

  • находит минимальную и максимальную цену для ползунка.

Если в разделе 10 фасетов и 300 значений, это сотни подсчетов на один клик. Штатные таблицы движка для такой работы не предназначены: они хранят товары, характеристики и опции так, как удобно админке, а не поиску по сочетаниям. Поэтому решения, которые считают фасеты прямо по таблицам товаров, замедляются вместе с ростом каталога.

Где обычно теряется время

  • Долгий ответ на клик. Если товары после выбора значения появляются дольше чем через секунду, тормозит подсчет.

  • Перезагрузка всей страницы. После выбора должен обновляться только список товаров, а не страница целиком.

  • Число товаров в меню категорий. OpenCart считает его отдельно для каждой категории. На каталоге в 200 000 товаров это 3,9 секунды на страницу, подсчет одним запросом сократил время до 0,5 секунды.

  • Первый заход после синхронизации. Если после обновления остатков и цен статистика раздела строится при первом заходе, первый покупатель ждет дольше. Крупные разделы лучше считать заранее.

Свой индекс вместо подсчета по таблицам товаров

Основное решение, которое мы применили в своем модуле PS Filter: фильтр работает по собственному индексу в базе магазина. В индексе для каждого товара уже разложены значения фасетов, цены по группам покупателей и привязки к разделам. Подсчеты идут по этим таблицам, а не по штатным.

Чтобы индекс не отставал от каталога, он обновляется сам: при сохранении, удалении и отключении товара в админке, при правке категорий и после заказа. Полная переиндексация идет пачками в транзакциях, поэтому покупатель не застает пустой фильтр посреди пересчета. Раз в час индекс сверяется с каталогом, а после пересчета цен заранее строится статистика крупных разделов.

Замеры на тестовом стенде: 50 000 сгенерированных товаров, MySQL 8, учитывается время запросов к базе на один клик.

  • Категория на 1 287 товаров: медиана около 20 мс, 90% кликов быстрее 40 мс.

  • Раздел с подразделами на 7 709 товаров: медиана около 44 мс, 90% быстрее 62 мс.

Это время запросов к базе. Ответ на клик целиком, вместе со сборкой блока товаров, на стенде с OpenCart 4 занимает около 0,1 секунды.


Разместите
тендер бесплатно

Есть задача на услуги, связанные с разработкой сайта или приложения, поисковой оптимизацией, контекстной рекламой, маркетингом, SMM и PR? Создайте тендер и выберите подходящего исполнителя из откликов.

Заполнить заявку 13850 тендеров
проведено за восемь лет работы нашего сайта.


Обычный хостинг: работает, но с оговорками

Большинство магазинов живут на виртуальном хостинге, и фильтр должен работать там без настройки сервера. На части тарифов запрещены временные таблицы, которые модуль использует для быстрого пересечения множеств. Для таких хостингов есть запасной способ подсчета. Он медленнее: в том же разделе на 7 709 товаров медиана клика около 190 мс, а 90% кликов укладываются в 440 мс. Для каталога в несколько тысяч товаров этого хватает. Если же магазин вырос до десятков тысяч позиций и упирается в ограничения тарифа, стоит переходить на собственный сервер.

На видео фильтр работает на нашем демонстрационном магазине, который размещен на обычном виртуальном хостинге: раздел на 434 товара, выбор бренда, наличия и цены без перезагрузки страницы.

Когда пора подключать Manticore

Для крупных каталогов, от сотен тысяч товаров, мы предусмотрели второй движок подсчета: поисковый сервер Manticore Search. Это отдельная программа, которая хранит копию индекса фильтра и считает фасеты быстрее базы данных. Ставится она на собственный сервер магазина (VPS или выделенный), на виртуальном хостинге такой возможности обычно нет.

Как это устроено в модуле:

  • основным остается индекс в базе магазина, Manticore получает его копию и обновляется сразу после каждого изменения;

  • движок выбирается в настройках, переделывать тему или шаблоны не нужно;

  • если сервер Manticore не ответил, фильтр сам пересчитывает запрос по базе магазина, покупатель ошибки не видит;

  • для проверки есть сверка двух движков на случайных выборках: число товаров, счетчики, диапазоны цен и порядок товаров при всех сортировках.

Замеры на каталоге в 200 000 товаров, без кеша фильтра:

  • Раздел с подразделами, 31 256 товаров: клик 96–220 мс на базе данных и 15–23 мс на Manticore; раздел без фильтра 418 мс и 14 мс

  • Категория, 5 142 товара: клик 38–54 мс на базе данных и 14–17 мс на Manticore; раздел без фильтра 85 мс и 9 мс

  • Бренд, около 5 000 товаров: клик 36 мс на базе данных и 16 мс на Manticore

На самых крупных разделах разница в 5–10 раз. Сверка двух движков на всех разделах не нашла ни одного расхождения, а полная пересборка индекса Manticore на 200 000 товаров занимает 11 секунд.

Скорость и поисковые системы

Медленный фильтр мешает не только покупателю. Каждое сочетание значений фильтра может стать отдельным адресом, и поисковый робот тратит время на обход тысяч почти одинаковых страниц вместо новых товаров. Поэтому вместе со скоростью мы настраиваем, какие страницы фильтра открыты для поиска:

  • открыты посадочные страницы с собственным заголовком, описанием и текстом, например «раздел + бренд»;

  • остальные сочетания закрыты от индексации и указывают на раздел как на основную страницу;

  • диапазоны цен в индекс не попадают никогда;

  • выбор, который не сужает раздел, считается дублем раздела и тоже закрыт.

Тогда робот тратит обход на страницы, которые стоит показывать в поиске, а не на тысячи дублей раздела.

Короткий список для проверки своего каталога

  1. Сколько длится ответ сервера на клик в самом большом разделе? Больше секунды означает, что пора менять способ подсчета.

  2. Перезагружается ли страница целиком после выбора значения?

  3. Включен ли показ количества товаров у категорий, и сколько из-за него собирается страница?

  4. Как быстро открывается раздел после синхронизации с остатками и ценами?

  5. Сколько адресов фильтра знает поисковая система? Если их в десятки раз больше, чем товаров, фильтр открыт для индексации без правил.

  6. Хватит ли хостинга при росте каталога вдвое, и есть ли запасной вариант на случай отказа поискового сервера?

Модуль, на котором сделаны замеры, называется PS Filter. Он работает на OpenCart 3 и 4, распространяется бесплатно с открытым исходным кодом по лицензии MIT и стоит в магазинах наших клиентов. Если хотите проверить скорость своего каталога по этому списку, напишите нам через карточку студии на Workspace.

Выскажите мнение
Авторизуйтесь, чтобы добавить свой комментарий.








159

Лучшие статьи

Поделиться: 0 0 0
Лайки за кейсы:  0 Подписчики:  0

Оцените статью
Спасибо за оценку