Вопрос к знатокам WPGrabber

Сообщений: 160 Регистрация: Апр 2017

30 Января 2019 23:26

Можно ли включить парсер с начала 2018г. к примеру с января и спарсить старые записи?
Или парсер в любом случае старые новости не сможет спарсить?

http://megaslesar.ru/ | http://dverportal.ru/ | http://buresh-art.ru/

Web scraping

Сообщений: 33 Регистрация: Ноя 2017

31 Января 2019 10:56

Спарсит всё, что найдёт по адресу "URL индексной страницы". Если это sitemap, то можно весь сайт спарсить

Изменено: Web scraping - 31 Января 2019 10:57

Настройка лент WPGrabber (http://"https://goo.gl/jKucGK")
Парсинг AVITO (http://"https://goo.gl/hAxLVS") по вашим запросам
Установлю и настрою анонимный прокси сервер 3proxy (http://"https://goo.gl/Yk1Uu7") на вашем сервере

Александр Крикун Сообщений: 6 Регистрация: Сен 2013	#3 9 Мая 2019 14:56 Как вариант можете установить крон задачу на сервере. По поводу sitemap все верно. Неплохой вариант. Более гемарно же будет парсить меняя индексную страницу на страницу с пагинацией.

Похожие темы:

31.01.2021 16:37	Вопрос по плагину Yoast Seo или ламер постигает азы сайтостроения
18.11.2020 20:20	Вопрос про вордпресс и технические дубли страниц.
06.10.2020 11:26	Вопрос по багу в меню
16.01.2020 00:51	Вопрос к тем, кто переходил на https с Вордпрессом
29.01.2019 08:02	Вопрос по добавлении записи в WP

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
20:48 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 18:41 Финский дата-центр Яндекса уже более 10 суток работает на дизель-генераторах 14:30 FriendsPartners партнерская программа по Гемблингу 13:15 Вирусный плагин background-image-cropper (Вордпресс) и файл accesson.php Помогите избавиться 11:36 Апдейт Яндекс выдача 29.09.2022 10:59 Партнерская программа Xoffers с прямыми офферами в вертикалях форекс, крипта и бинарные опционы. 23:17 AMarkets - партнерские программы финансовых рынков	21:01 Услуги копирайтера 19:01 ProxyWins.com - 15% по промо-коду "venividivici" 14:31 [PRIVATE MOBILE PROXY][8 стран][тест всем][скидки внутри] 13:55 Маркетолог в компанию 11:41 Первый шаг на пути к SEO-агенству \| Ищу клиента срочно! 09:08 Scsobmen.com – сервис обмена цифровых валют (электронных денег и криптовалют). 23:21 Продвижения вашего сайта прогонами по базе с ИСК до 46000. Рост позиций по СЧ и НЧ запросам + рост ИКС	22:23 С юмором по жизни! 20:32 Подтягиваем физкультурку 20:14 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 18:40 Добро пожаловать в цифровой мир... 16:54 В России создается импортонезависимая мобильная ОС с поддержкой Android-приложений 16:26 150+ хакерских поисковых систем и инструментов 11:39 Курс доллара упал ниже 85 рублей

Вверх