Интернет-магазин на 70 000 товаров: автоматизация вместо ручной модерации

Заказчик, с которым уже были сделаны сайты (первый, второй, третий), пришёл с новой задачей: «хочу интернет-магазин, такой как onliner.by, примерно на сто тысяч товаров». В базе реально было 70 000 позиций, потенциал — 100 000. И сразу выяснилось: одно маленькое решение в таком масштабе разрастается в двадцать раз. Прайс-листы приходят по 20 штук в день, их надо синхронизировать с сотней тысяч товаров. Этот кейс показал, как устроен настоящий e-commerce — и какие вопросы надо задавать до старта, а не после.

Цели:

• Создать интернет-магазин с каталогом 70 000 — 100 000 товаров.
• Автоматизировать обработку прайс-листов от ~20 поставщиков.
• Сделать модерацию реально возможной при таком масштабе.
• Обеспечить скорость работы под высокой нагрузкой.

Задачи и решения:

• Синхронизация прайс-листов — поставщики присылали Excel-файлы на почту (~20 компаний). Настроена обработка: файлы выгружаются, сравниваются с базой, обновляют цены и наличие. Для каждой категории — свои характеристики (для одежды — размер и рост, для техники — процессор, объём памяти).
• Модерация на уровне автоматизации — для магазина на 70 000 товаров кнопка «редактировать» не работает: модератору нужно два дня только на правки, и цены станут нереальными. Система должна сама проверять, подсвечивать разницу и показывать, что править, а не давать править всё вручную.
• Выделенный сервер — виртуальный хостинг не справлялся с обработкой таких объёмов. Куплен и настроен отдельный сервер, сайт переведён на него: стабильность и скорость под нагрузкой.
• Оптимизация базы данных — обращение к БД стало точечным: лимитные запросы, правильная структура, скорость вместо «взять всё и показать». Нагрузка на систему — отдельная задача, а не деталь.
• E-commerce-функционал — корзина, заказы, оплата, доставка, передача заказов дилерам.

Результаты:

• Сайт с базой 70 000+ товаров запущен и работал — подключался программист с Украины, решение внедрено, клиент был доволен.
• Автоматизация прайс-листов — обработка данных поставщиков почти без ручного труда.
• Скорость под нагрузкой — выделенный сервер и оптимизация кода и базы данных.
• Ключевой вывод — без проработанного ТЗ модерация 70 000 товаров невозможна: «вы должны были предусмотреть, где править». Этот урок изменил подход: сайт не делается за неделю, сначала — чек-листы, анкетирование на 70 вопросов, бизнес-процессы и путь клиента.

Выводы и уроки:

• Масштаб умножает всё в 20 раз. То, что работает для магазина на 5 000 товаров, ломается на 100 000: цены, наличие, фото, импорт, экспорт — каждая мелочь становится системной задачей.
• Модерация должна быть автоматизированной. Проверка, подсветка разницы и синхронизация — вместо ручного редактирования десятков тысяч позиций.
• Инфраструктура — заранее. Выделенный сервер и масштабируемая структура базы данных закладываются на этапе планирования.
• ТЗ — до старта, а не после. Задавайте правильные вопросы: откуда приходят данные, кто их ведёт, как будет выглядеть путь клиента, что будет через год.
• Экспертиза важнее скорости. «Сайт делается за месяц, а потом выясняется куча нюансов». Этот опыт привёл в область медицины — именно потому, что здесь он уже понимал, как работают сложные системы.

Ссылки:

• Проект завершён, сайт не поддерживается. Название и документация проекта сохранились в архиве студии.