Вопрос к знатокам WPGrabber

Сообщений: 160 Регистрация: Апр 2017

30 Января 2019 23:26

Можно ли включить парсер с начала 2018г. к примеру с января и спарсить старые записи?
Или парсер в любом случае старые новости не сможет спарсить?

http://megaslesar.ru/ | http://dverportal.ru/ | http://buresh-art.ru/

Web scraping

Сообщений: 35 Регистрация: Ноя 2017

31 Января 2019 10:56

Спарсит всё, что найдёт по адресу "URL индексной страницы". Если это sitemap, то можно весь сайт спарсить

Изменено: Web scraping - 31 Января 2019 10:57

Настройка лент WPGrabber (http://"https://goo.gl/jKucGK")
Парсинг AVITO (http://"https://goo.gl/hAxLVS") по вашим запросам
Установлю и настрою анонимный прокси сервер 3proxy (http://"https://goo.gl/Yk1Uu7") на вашем сервере

Александр Крикун Сообщений: 6 Регистрация: Сен 2013	#3 9 Мая 2019 14:56 Как вариант можете установить крон задачу на сервере. По поводу sitemap все верно. Неплохой вариант. Более гемарно же будет парсить меняя индексную страницу на страницу с пагинацией.

Похожие темы:

31.01.2021 16:37	Вопрос по плагину Yoast Seo или ламер постигает азы сайтостроения
18.11.2020 20:20	Вопрос про вордпресс и технические дубли страниц.
06.10.2020 11:26	Вопрос по багу в меню
16.01.2020 00:51	Вопрос к тем, кто переходил на https с Вордпрессом
29.01.2019 08:02	Вопрос по добавлении записи в WP

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
01:05 «Тавро» - «российский Telegram» — клиент популярного мессенджера для ОС «Аврора» 22:05 АП Яндекс ИКС 06.03.2023 21:08 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 19:43 Купил сайт и забросил 19:36 Пост в блоге "2022 год. Кризис. Что делать с SEO? Вкладывать деньги" 19:34 Кому пришла выплата с AdSense? 19:29 GPT-4 от ChatGPT языковая модель нового поколения	06:50 Статейные семантические ядра для сайтов, кратное увеличение клиентов 00:18 sms.chekons.com - Сервис для получения SMS на реальные номера USA "Non-VoIP, безлим SMS, API" 21:18 Живые лайки, подписчики, просмотры и комментарии Дешево. Быстро. Безопасно. 19:15 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 14:58 Регистрация компании за рубежом + Stripe / PayPal и евросчет: удаленно, быстро, надежно 14:31 ZennoPoster - софт №1 для автоматизации любых SEO задач! 14:14 Мобильные скоростные прокси 4G	21:21 Некомплексное SEO-продвижение сайтов 14:35 С юмором по жизни! 13:03 В России начали блокировать VPN-подключения 12:59 В России и Европе одновременно озаботились маркировкой контента, созданного нейросетями 21:35 Я придумал новую игру 15:51 Партнерка Cpa.House 19:14 Как получить рефералов и посетителей на сайт бесплатно.

Вверх