Вопрос к знатокам WPGrabber

Сообщений: 168 Регистрация: Апр 2017

30 Января 2019 23:26

Можно ли включить парсер с начала 2018г. к примеру с января и спарсить старые записи?
Или парсер в любом случае старые новости не сможет спарсить?

http://megaslesar.ru/ | http://dverportal.ru/ | http://buresh-art.ru/

Web scraping

Сообщений: 39 Регистрация: Ноя 2017

31 Января 2019 10:56

Спарсит всё, что найдёт по адресу "URL индексной страницы". Если это sitemap, то можно весь сайт спарсить

Изменено: Web scraping - 31 Января 2019 10:57

Настройка лент WPGrabber (http://"https://goo.gl/jKucGK")
Парсинг AVITO (http://"https://goo.gl/hAxLVS") по вашим запросам
Установлю и настрою анонимный прокси сервер 3proxy (http://"https://goo.gl/Yk1Uu7") на вашем сервере

Александр Крикун Сообщений: 6 Регистрация: Сен 2013	#3 9 Мая 2019 14:56 Как вариант можете установить крон задачу на сервере. По поводу sitemap все верно. Неплохой вариант. Более гемарно же будет парсить меняя индексную страницу на страницу с пагинацией.

Похожие темы:

31.01.2021 16:37	Вопрос по плагину Yoast Seo или ламер постигает азы сайтостроения
18.11.2020 20:20	Вопрос про вордпресс и технические дубли страниц.
06.10.2020 11:26	Вопрос по багу в меню
16.01.2020 00:51	Вопрос к тем, кто переходил на https с Вордпрессом
29.01.2019 08:02	Вопрос по добавлении записи в WP

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
12:22 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 06:06 Яндекс прекращает поддержку технологии Турбо 05:50 SEO 2025 - контент, уже не главное. Главное - Конечная цель... 09:03 Нужна помощь советом! 20:01 Работаем в P2P платежах BYBIT \| USDT - RUB , RUB - USDT \| Ищем постоянных клиентов , выгодные условия. 19:04 Gambling Craft - гемблинг по белому 10:44 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов	20:28 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 13:08 Сканы, фото + снилс, селфи 10:43 SpaceSwap.cc - Быстрый и надежный обменник криптовалют 10:26 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 14:59 Volna.money	20:11 Точные прогнозы на футбол 23:47 Добро пожаловать в цифровой мир... 22:39 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 11:58 Куплю проигрышные букмекерские аккаунты 00:12 Огородники 10:59 Новости искусственного интеллекта 04:26 Хром ругается на форум

Вверх