SEO и не очень программы и скрипты
Парсер v2.0. Бета
Несколько дней назад закончил работу над основой нового парсера. Вот скриншот того что сейчас имеется:
А вот ссылка на скачивание: ссылка
Владельцы парсера могут попробовать новые плюшки и настройки. Ключ от старого парсера подходит к новому. Из новых плюшек – более избирательное посещение парсером страниц сайта за счет более тонкой настройки. Возможность сохранять настройки в файл (наконец-то!) и загружать их обратно. Думаю вы оцените. Вывод сейчас идет только в один файл. Вопщем бета:) Спасибо за внимание.
| Print article | Эта запись была опубликована admin 02.02.2010 в 23:31, в категории Программы. Вы можете следить за комментариями через RSS 2.0. Вы можете оставить комментарий или трэкбэк с вашего сайта. |
7 месяцев назад
походу не работает функция «ходить только по таким линкам»
У меня сразу выдаёт «готово»
А так вроде ничего правда не проверял как он спарсит только нужный раздел, но вроде левые ссылки отсеивает.. Нашел пару тысяч ссылок, но подходящих фильтру нет.. Но это думаю потому что парсер перебирает все страницы подряд.. Поэтому до нужных просто не дошел..
у меня терпения не хватило дождаться.. Но думаю если функция для обхода будет работать всё будет нормально.. И можно будет парсить только нужные разделы..
7 месяцев назад
ещё было б здорово добавить функцию загрузки файла с урлами страниц для поиска ссылок на статьи.. т.к. иногда быстрее быстрее отредактировать список страниц чем ждать парсинга.. но это может пока..
например: мне нужно спарсить категорию
http://kata-log.ru/auto/
А там есть список страниц внизу, я могу его быстро отредактировать и дать парсеру точную зону поиска.
Кстати на этом примере видно ещё одно..
Я даю парсеру зону поиска http://kata-log.ru/auto/
и у него возникают трудности с формированием относительного урла.. т.е. вместо того чтобы к ссылке вила page2.html подставить «http://kata-log.ru/auto/» парсер подставляет только «http://kata-log.ru/» а такой страницы нет..
7 месяцев назад
Все поправлю, все сделаю:)
6 месяцев назад
ура, наконец-то обновления!
1 месяц назад
Не очень понимаю что парсер и зачем он нужен можно побольше инфы да и Ссылка на скачивания не работает! Если можно продублировать ссылку.