Вопрос к знатокам WPGrabber

Сообщений: 160 Регистрация: Апр 2017

30 Января 2019 23:26

Можно ли включить парсер с начала 2018г. к примеру с января и спарсить старые записи?
Или парсер в любом случае старые новости не сможет спарсить?

http://megaslesar.ru/ | http://dverportal.ru/ | http://buresh-art.ru/

Web scraping

Сообщений: 36 Регистрация: Ноя 2017

31 Января 2019 10:56

Спарсит всё, что найдёт по адресу "URL индексной страницы". Если это sitemap, то можно весь сайт спарсить

Изменено: Web scraping - 31 Января 2019 10:57

Настройка лент WPGrabber (http://"https://goo.gl/jKucGK")
Парсинг AVITO (http://"https://goo.gl/hAxLVS") по вашим запросам
Установлю и настрою анонимный прокси сервер 3proxy (http://"https://goo.gl/Yk1Uu7") на вашем сервере

Александр Крикун Сообщений: 6 Регистрация: Сен 2013	#3 9 Мая 2019 14:56 Как вариант можете установить крон задачу на сервере. По поводу sitemap все верно. Неплохой вариант. Более гемарно же будет парсить меняя индексную страницу на страницу с пагинацией.

Похожие темы:

31.01.2021 16:37	Вопрос по плагину Yoast Seo или ламер постигает азы сайтостроения
18.11.2020 20:20	Вопрос про вордпресс и технические дубли страниц.
06.10.2020 11:26	Вопрос по багу в меню
16.01.2020 00:51	Вопрос к тем, кто переходил на https с Вордпрессом
29.01.2019 08:02	Вопрос по добавлении записи в WP

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
06:08 АП Яндекс выдача 2 декабря 2023 \| Как вам "чёрные пятницы"? 02:00 Супер-партнерка PayV: избранные офферы в топовых нишах 21:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 20:51 Юридический трафик на Воронеж + область (CPA покупка) 19:44 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 18:38 Partners.House - платформа по монетизации push-трафика со всего мира 18:34 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам).	07:35 SHARKY - круглосуточный обмен криптовалют 01:27 Купить дедики Абузоустойчивые сервера Аренда сервера Купить dedic Дедик Дешево vps vds сервера дедики на SSD! 01:01 USMobileSMSBot - 00:14 Европейский эквайринг 21:07 Ссылки от SEOALEX 20:12 Продаём аккаунты Google Voice 20:06 Продаём аккаунты Huawei Developer	07:31 У Лукоморья дуб зеленый 02:24 Точные прогнозы на футбол 22:00 С юмором по жизни! 21:14 Список обновленных тем пуст... 20:58 Курс доллара упал ниже 85 рублей 10:41 Как создать сайт самому бесплатно? Если нужна инструкция для новичков или даже школьников. 04:18 Партнерка Cpa.House

Вверх