Радиоэлемент

Интернет-магазин электронных компонентов с автоматизированным парсингом поставщиков

500 000+ товаров на сайте

Сотни тысяч запросов ежедневно

30-120 секунд занимает парсинг

О клиенте

radioelementy.ru — интернет-магазин радиодеталей и электронных компонентов. На собственных складах — десятки тысяч SKU, у поставщиков — сотни тысяч. Сайт развиваем с 2014 года.

Задача

Поиск доступных компонентов выполнялся менеджерами в полуручном режиме. Розничные покупатели в принципе не могли оформить заказ. Нужно было это исправить:

Автоматизировать загрузку товаров с разных источников поставщиков

Добавить остатки со складов с актуальными сроками доставки

Дать покупателям возможность самостоятельно оформлять заказы

Вызовы, с которыми мы столкнулись

Источники данных у поставщиков — разные: прайс-листы лежат на FTP, приходят по почте или доступны через личный кабинет. Конкурирующие решения на тех же объёмах работали несколько часов.

Когда поставщиков стало несколько десятков — разрабатывать каждый новый парсер вручную стало слишком накладно. Нужен был инструмент, который клиент мог настраивать сам, без участия разработчиков. И нужна была видимость: когда в системе работают десятки парсеров одновременно, важно сразу замечать, если что-то пошло не так.

Решение

Разработали высокопроизводительные парсеры прайс-листов: обрабатывают данные за 30–120 секунд вместо нескольких часов на тех же объёмах.

Каталог агрегирует остатки из нескольких источников — собственных складов и складов поставщиков — с актуальными сроками поставки по каждому. Расширенные фильтры позволяют быстро искать среди сотен тысяч позиций. Автоматический подбор аналогов (cross-replacement) снизил число отказов: если нужного компонента нет, система сразу предлагает замену.

Когда число поставщиков продолжило расти, сделали универсальный конструктор парсеров. Клиент сам подключает нового поставщика через интерфейс — без разработки. Система мониторинга отслеживает работу каждого источника: статус виден в административной панели, ежедневные отчёты о состоянии системы приходят автоматически, ошибки — моментально в Telegram-канал.

Дополнительно реализованы SEO-оптимизация каталога и интеграции с маркетплейсами для увеличения трафика и заказов.