Вопрос к знатокам WPGrabber

Сообщений: 168 Регистрация: Апр 2017

30 Января 2019 23:26

Можно ли включить парсер с начала 2018г. к примеру с января и спарсить старые записи?
Или парсер в любом случае старые новости не сможет спарсить?

http://megaslesar.ru/ | http://dverportal.ru/ | http://buresh-art.ru/

Web scraping

Сообщений: 40 Регистрация: Ноя 2017

31 Января 2019 10:56

Спарсит всё, что найдёт по адресу "URL индексной страницы". Если это sitemap, то можно весь сайт спарсить

Изменено: Web scraping - 31 Января 2019 10:57

Настройка лент WPGrabber (http://"https://goo.gl/jKucGK")
Парсинг AVITO (http://"https://goo.gl/hAxLVS") по вашим запросам
Установлю и настрою анонимный прокси сервер 3proxy (http://"https://goo.gl/Yk1Uu7") на вашем сервере

Александр Крикун Сообщений: 6 Регистрация: Сен 2013	#3 9 Мая 2019 14:56 Как вариант можете установить крон задачу на сервере. По поводу sitemap все верно. Неплохой вариант. Более гемарно же будет парсить меняя индексную страницу на страницу с пагинацией.

Похожие темы:

31.01.2021 16:37	Вопрос по плагину Yoast Seo или ламер постигает азы сайтостроения
18.11.2020 20:20	Вопрос про вордпресс и технические дубли страниц.
06.10.2020 11:26	Вопрос по багу в меню
16.01.2020 00:51	Вопрос к тем, кто переходил на https с Вордпрессом
29.01.2019 08:02	Вопрос по добавлении записи в WP

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
18:58 Нужен сайт для интернет-магазина 06:06 Телега на ручнике: РКН включил замедление и логи админок покраснели 03:35 MAX выкатил приватные каналы - закрытые тусы теперь лепишь за минуту 15:39 Кнопки "скрыть" и "пожаловаться" в рекламе яндекса 15:23 Яндекс туда же: "Нейро" отжал 50% первого экрана. Органический трафик падает 18:27 Карпати реально заставил GPT, Кло, Gemini и Grok спорить между собой перед ответом 15:30 Indus AI: индийский "грааль" или мусор для дорвеев?	21:28 nexgen24.io - криптовалюта и фиат в одном месте 18:09 PriceGid.com - услуги парсинга сайтов, наполнение интернет-магазинов, обновление цен, мониторинг конкурентов. Оплата после выполнения 16:47 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ! 12:33 E-currency.exchange — ваш помощник в мире обменов 06:22 [Comcash.io] Анонимный обмен и чистка крипты без AML/KYC 01:01 Portfel.cc - современный помощник в Ваших финансовых операциях. 21:53 TETChange-Обменник криптовалют	22:34 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 22:28 Добро пожаловать в цифровой мир... 21:29 Точные прогнозы на футбол 13:09 Смотри, птичка! Трамп вскрывает папки про НЛО 04:49 Ставки на супер тренды в спорте 20:25 Вместо золота - RTX 5090: почему кремний стал валютой на свадьбах 18:50 Тройной агент Паша Дуров

Вверх