Парсер каталога косметики и товарных остатков
При таком объёме проверка качества стала полноценной частью решения, а не ручной проверкой нескольких случайных строк.
Задача
Для работы с каталогом косметики требовалась полная выгрузка: товарные характеристики, условия доставки и числовые остатки по магазинам.
Данные поступали из разных ответов источника, и их нужно было собрать в согласованную структуру без путаницы между артикулами.
Интернет-магазины и торговля
- Парсинг
- проверка SKU
- CSV
- XLSX
Что сделали
- [ 01 ]
Мы разработали парсер, который проверяет соответствие ответа исходному SKU и происхождение каждого поля. Карточки, доставка и остатки объединяются по товару. Если значение не подтверждено, система не заменяет его сведениями о похожей позиции или старой выгрузкой.
- [ 02 ]
Предусмотрели продолжение сбора после остановки: обработку можно возобновить по реестру заданий. Готовые файлы проходят проверку структуры и полноты, чтобы результат был пригоден для дальнейшего анализа и обработки.
Итог — 161 601 товарная позиция, 201 колонка и остатки по 16 магазинам в форматах CSV и XLSX. Это более 32 миллионов ячеек в структуре таблицы, включая пустые.