Перейти к содержимому


Парсер контента Content Downloader v11.39


  • Вы не можете ответить в тему
Сообщений в теме: 8

#1 vsupport

    Продвинутый пользователь

  • Администраторы
  • 758 сообщений
Репутация: 31
Ассистент

Отправлено 23 January 2012 - 08:03 PM

Изображение

Год выпуска: 2011
Версия: 11.39
Разработчик: sbfactory
Активация Активировано
Язык интерфейса: rus


Описание: Програма Content Downloader изобретена умышленно для заполнения интернет-торговых центров, блогов и порталов разным контентом, в том количестве графическими изображениями и видео файлами.

С поддержкою програмки Content Downloader вы сможете парсить контент с разных долей интернет-страничек (16 обыденных пределов парсинга + 3 циклических + рубежа заголовка).

В програмке Content Downloader имеется огромное численность приборов для отделки добытого контента и импорта его в знаменитые CMS.
Достоинства програмки Content Downloader:
– Разносторонность: идет перед 90% страниц в козни, имеет возможность парсить никак не лишь заметки, однако и рисунки, гиперссылки (надлежащие данным фильтрам), видео, файлы. Дозволяет парсить некоторое количество отмеченных долей web-странички;
– Парсер контента владеет огромное численность способов прибавления гиперссылок;
– Дозволяет закачивать незапятнанный контент, лишь контент заметки, ничто излишнего;
– Content Downloader имеет возможность заделывать как конкретные доли акта, этак и отыскать контент заметки автоматом (возможность корректного определения ~ 85%);
– многопоточная загрузка контента;
– Парсер контента дозволяет беречь изображения с подменой их имен;
– Хранение контента в формате txt, htm и csv (для WebAssist и остальных торговых центров);
– Вероятность прибавлять в загружаемые бумаги строчки из отмеченных файлов с диска (при парсинге контента), прибавлять в бумаги хоть какой случайный код/контент, видоизменять распорядок вывода пределов парсинга;
– Импорт в знаменитые CMS + предпубликационная переработка (автокартинки, автометки и другое);
– Самодействующая чистка web-документов от скриптов, классов, стилей и излишних тегов (с вероятностью поручения перечня тегов, которые никак не надлежит устранять);
– Вероятность творить автонаполняемые веб-сайты (отложенная объявление);
– Эластичная наладка парсинга.

Content Downloader поддерживает последующие CMS:
– Zebrum (с вероятностью отложенной публикации);
– DLE (с вероятностью отложенной публикации);
– Zerber (подробнее);
– Wordpress (с вероятностью отложенной публикации);
– Satellite-X и Autoblog-X;
– Импорт сообразно шаблону (идет практически для всех CMS) (с вероятностью отложенной публикации);
- Творение статических html и php страниц (с функцией автовставки кодов бирж).

Способы прибавления гиперссылок в парсер контента:
1) Загрузка гиперссылок из файла;
2) Вставка гиперссылок из буфера (разрешено навалить хоть какой перечень гиперссылок в програмку);
3) Загрузка гиперссылок из XML игра в карты интернет-сайта;
4) Творение перечня гиперссылок сообразно шаблону;
5) Парсер контента владеет интегрированный многопоточный сканнер страниц (с поддержкою него разрешено составить все гиперссылки на заметки с интернет-сайта среднего объема из-за некоторое количество мин.);
6) Наличествует функция парсинга гиперссылок со перечня страничек;
7) Вероятность парсинга гиперссылок с конкретных долей страничек (способом зрительного выделения + фильтрация), с поддержкою встроенного браузера.

Скачать:
[HIDE="1"][ATTACH]302.vB[/ATTACH][/HIDE]


  • 0

#2 micehide

    Продвинутый пользователь

  • Assistent vsupport.club
  • PipPipPip
  • 359 сообщений
Репутация: 124
Мастер

Отправлено 24 January 2012 - 01:52 AM

Попробую чего умеет, а вообще настраиваемый парсер имеет много преимуществ перед "зашитым". Только вот описание настораживает - Промт с элементами старословянского ("с поддержкою")?
  • 0

#3 mr_crossy

    Новичок

  • Пользователи
  • Pip
  • 2 сообщений
Репутация: 0
Начинающий

Отправлено 31 January 2012 - 02:19 AM

Попробую чего умеет, а вообще настраиваемый парсер имеет много преимуществ перед "зашитым". Только вот описание настораживает - Промт с элементами старословянского ("с поддержкою")?

Есть результаты тестов?
  • 0

#4 micehide

    Продвинутый пользователь

  • Assistent vsupport.club
  • PipPipPip
  • 359 сообщений
Репутация: 124
Мастер

Отправлено 31 January 2012 - 01:29 PM

Есть результаты тестов?

Там фишка в том, что нужно задавать сначала список URL-ов откуда парсить характеристики, а потом настраивать сам фильтр парсинга - для этого нужно лезть в код сайта-донора и по его тегам ориентировать парсер. Так вот, если характеристики есть в постраничном списке товаров, то URL-ы можно сгененировать, указав изменяющуюся часть (страницы категории например), а если хар-ки находятся внутри страницы с товаром, то нужно сначала сориентировать парсер на "забор" этих ссылок из постраничного списка, а потом уже настраивать парсер. При этом я не совсем понял как выбрать именно те товары (модели), которые нужно. Поэтому тем, кто хочет забрать ВСЕ товары из категории сайта-донора или отфильтрованные по возможным критериям на сайте-доноре - эта программка полезна. А если вам нужно список ТОЛЬКО определенных моделей, то настроить все это будет сложно. В этом смысле гораздо интереснее Парсер товаров 8.0 - т.к. он автоматически выбирает из постраничного списка ссылки на товары, содержащие определенный код или наименование, а затем уже парсит эти ссылки.

Вот есть видео-урок (без звука правда) по программе: [HIDE="1"][/HIDE]
  • 0

#5 Shaxr

    Продвинутый пользователь

  • Download User
  • PipPipPip
  • 41 сообщений
Репутация: 0
Начинающий

Отправлено 20 November 2012 - 06:11 PM

Что будет если создать отдельный сайт и напарсить на него огромное количество товара? Его не забанят, если на нем почти ничего другого не будет (только товар)?
  • 0

#6 badisoft

    Продвинутый пользователь

  • Assistent vsupport.club
  • PipPipPip
  • 5075 сообщений
Репутация: 786
Мастер

Отправлено 20 November 2012 - 08:46 PM

Что будет если создать отдельный сайт и напарсить на него огромное количество товара?

Будет сайт с огромным количеством товара. А уж говносайт это будет, где хрен что купишь или вполне приличный сайт с понятным и удобным (для клиента) алгоритмом работы - совершенно не зависит от количества товаров на сайте и от того, каким образом получено наполнение сайта.

Его не забанят, если на нем почти ничего другого не будет (только товар)?

Не забанят. Но если кроме совершенно не уникального товара будут какие-то уникальные статьи, обсуждения товаров и прочие радостные для поисковиков моменты - вылезание сайта в топ потребует меньшего времени и/или денег.
  • 0
http://cpu.badisoft.ru (тестовый сайт), http://badisoft.ru (модули)

#7 R.Sergey

    Администратор

  • Администраторы
  • 2810 сообщений
Репутация: 332
Мастер

Отправлено 20 November 2012 - 08:51 PM

Что будет если создать отдельный сайт и напарсить на него огромное количество товара? Его не забанят, если на нем почти ничего другого не будет (только товар)?


В данной теме обсуждается парсер и нюансы его работы, а не "что будет".
Вам предупреждение.!!!
  • 0

#8 Valentin

    Продвинутый пользователь

  • Assistent vsupport.club
  • PipPipPip
  • 146 сообщений
Репутация: 6
Начинающий
  • ГородШахты Ростовская область

Отправлено 16 March 2013 - 06:58 PM

Уважаемые Профи.
Подскажите как правильно настроить этот инструмент на парсинг инет. магазина?
Касательно обычных сайтов, он справляется отлично, а вот настроить на инет. магазин не удаётся.
У меня не получается выставить настройки чтоб спарсеная инфа сохранилась в максимально удобном виде для последующего импорта в shopcms.
Для вывода необходимо что-то отметить в шаблоне вывода, я же не пойму что именно надо и где это взять.
Ещё необходимо чтоб парсились фотки все сколько есть у товаров, это также можно как-то указать при помощи макросов, но опять же где взять нужные, в каком месте и как их составить?
Самая же больная для меня проблема эта картинки!
После парсенга вся графика сохраняется в одну папку, для меня же это крайне нежелательно, так как на слепую сортировать тысячи фоток нереально.
Возможно в программе есть возможность разделять спарсенные картинки в отдельные папки в соответствии каждому товару или присваивать именам картинок title страницы с которой они были взяты с префиксом 1, 2, 3 и тд. если картинок более одной.
На данный момент я нужной мне настройки не обнаружил.
  • 0
Социально-информационный проект Nvda.ru о бесплатной программе экранного доступа Nvda для незрячих и слабовидящих.
С уважением ко всем Valentin-Kupriyanov.ru

#9 ajaxworker

    Пользователь

  • Пользователи
  • PipPip
  • 15 сообщений
Репутация: 1
Начинающий

Отправлено 18 December 2014 - 02:46 PM

Программа хорошая, жаль только что возможность парсить характеристики товаров доступно только для версии ULTIMATE, но это критично только для контента интернет-магазинов.
  • 0