Чтобы запросы парсера не забанили, нужно делать пошаговый импорт. На многих сайтах есть контроль активности пользователей, который может временно заблокировать посетителей, сделавших большое количество хитов в единицу времени. Так вот, делая интервалы между хитами, мы с меньшей вероятностью попадем в стоп-лист, а значит, сможем успешно получить нужные данные.
Выбор за вами, можно заниматься рутиной, скачивать картинки и тексты вручную или же автоматизировать этот процесс и написать парсер контента.
Если требуется получить данные со стороннего ресурса и загрузить их на ваш сайт, обращайтесь.
Перенос контента со старого сайта для solidea-russia.ru
Подробнее..
Парсинг каталога товаров с сайта kamaz.ru
Подробнее..
У меня Вы можете заказать программные работы или проконсультироваться по сайту. Напишите мне или позвоните
по телефону +7(904) 589-06-04