Задача

Имея набор кодов магазинов(десятки) и штрихкодов (десятки тысяч), организовать сбор цен на товары сети "Лента" на ежедневной основе.

Проблемы

• последовательный перебор всех имеющихся штрихкодов - слишком медленно
• при большом количестве запросов попадаем в бан

С чего начать?

• Прилагается текущий скрипт сбора данных. Написан отвратительно, но может стать отправной точкой
• Возможно, поможет пул прокси для распределенного сбора данных. При надобности можно приобрести

Фактическая реализация ограничена только Вашей фантазией и опытом.