Вопрос к знатокам WPGrabber

Сообщений: 168 Регистрация: Апр 2017

30 Января 2019 23:26

Можно ли включить парсер с начала 2018г. к примеру с января и спарсить старые записи?
Или парсер в любом случае старые новости не сможет спарсить?

http://megaslesar.ru/ | http://dverportal.ru/ | http://buresh-art.ru/

Web scraping

Сообщений: 39 Регистрация: Ноя 2017

31 Января 2019 10:56

Спарсит всё, что найдёт по адресу "URL индексной страницы". Если это sitemap, то можно весь сайт спарсить

Изменено: Web scraping - 31 Января 2019 10:57

Настройка лент WPGrabber (http://"https://goo.gl/jKucGK")
Парсинг AVITO (http://"https://goo.gl/hAxLVS") по вашим запросам
Установлю и настрою анонимный прокси сервер 3proxy (http://"https://goo.gl/Yk1Uu7") на вашем сервере

Александр Крикун Сообщений: 6 Регистрация: Сен 2013	#3 9 Мая 2019 14:56 Как вариант можете установить крон задачу на сервере. По поводу sitemap все верно. Неплохой вариант. Более гемарно же будет парсить меняя индексную страницу на страницу с пагинацией.

Похожие темы:

31.01.2021 16:37	Вопрос по плагину Yoast Seo или ламер постигает азы сайтостроения
18.11.2020 20:20	Вопрос про вордпресс и технические дубли страниц.
06.10.2020 11:26	Вопрос по багу в меню
16.01.2020 00:51	Вопрос к тем, кто переходил на https с Вордпрессом
29.01.2019 08:02	Вопрос по добавлении записи в WP

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
14:28 17.03.2025 АПдейт Яндекс выдача 14:10 МТС разуверилась в своём заменителе YouTube 13:58 Традиционные сайты на грани вымирания из-за ИИ-поисковиков 21:03 Индексация страниц 09:57 Мошенники-копирайтеры 22:47 Заработок на Биржах ссылок 2025 22:02 Стоит ли добавлять сайт в Rambler топ 100?	15:52 Продам аккаунт Google Ads за 100$ 15:34 TrueMeds - Революционная Фарма Партнерка! Увеличь свой профит в x2 раза вместе с нами! 13:39 Expa24.com Обмен Криптовалют. Ввод/Вывод наличные Украина/Северный Кипр/Мир 11:56 Современный скрипт обменника электронных валют 09:13 PAY2DAY.TOP - Покупка и продажа криптовалюты за рубли. 04:17 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 04:01 ProxyWins.com - 15% по промо-коду "venividivici"	14:21 Власти усиливают давление на соцсети: штрафы до 1 993 500 000 руб. 14:03 С юмором по жизни! 03:18 Точные прогнозы на футбол 09:58 Думскроллинг превращает нас в зомби. Как вернуть мозг к жизни? 22:59 Блогер А4 на грани: компания Влада Бумаги объявляет о банкротстве 22:23 Telegram не смог провести различие между требованиями автократических режимов и законными демократическими запросами 21:43 Потеря для пиратского интернета: основатель Pirate Bay погиб!

Вверх