Граббер контента 1.1 + бонус

Позволяет импортировать контент с других сайтов в неограниченном количестве!

  1. Sanchez
    Модуль доступен для скачивания после единоразовой оплаты и если у вас имеется действующая подписка на обновления доргена!

    С помощью данного модуля вы можете парсить и импортировать контент практически с любых сайтов!
    Он пригодится для создания СДЛ - автоматического парсинга и импорта каких-либо баз, создание новостных сайтов и тд. Если раньше вы сначала парсили свою базу в мультикеи, а затем импортировали ее в дорген, то теперь нужно всего один раз настроить ленту(ы) граббера, а остальное модуль сделает за Вас! При этом, по мере появления нового контента на донорах - граббер будет автоматически парсить и импортировать этот контент в базы ваших сайтов.

    Основные преимущества:
    1. Парсинг по регулярному выражению или в стиле simple_html_dom.
    2. Неограниченное кол-во лент для каждого вашего сайта.
    3. В каждой ленте можно указать в какую категорию добавлять новости.
    4. В настройках ленты можно указать файл шаблона для будущих новостей.
    5. Поддержка парсинга Atom/RSS.
    6. Автоматический парсинг статей (если не указать параметры парсинга).
    7. В полученном контенте можно выполнить поиск-замену с помощью регулярных выражений или в стиле simple_html_dom.
    8. Неограниченная поддержка мультикеев - вы можете указать сколько угодно названий для подключей и парсить для них нужные участки кода на сайте-доноре (например, цена, url на постер, описание и тд).
    9. Экспорт и импорт параметров для граббера.
    10. Все новости добавляются согласно настройкам сайта.
    Демо-сайт: http://auto.news24-7.ru/

    Конфиг для граббера, который вы можете импортировать себе для примера:
    Код:
    {"grab_name":"Новости drive.ru","grab_url":"https://www.drive.ru/api/v1/news?from=0&to=30","grab_type":"0","template":"page.html","html_tags":"1","source_url":"2","update_time":"0","article_tags":"script,style,iframe[src|width|height|frameborder|allowfullscreen],br,i,u,em,ul,ol,li,strong,b,h1,h2,h3,h4,h5,h6,span,p,div[id|class],input[value|type],textarea,form[method],table[cellspacing|cellpadding],tr,td[colspan|rowspan|align|valign],img[src|alt|title]","links[reg]":"\"url\":\"([^\"]*?)\"","links[search]":"","links[replace]":"","titles[reg]":"<title>(.*?) — ДРАЙВ</title>","titles[search]":"","titles[replace]":"","articles[required]":"1","articles[reg]":"`.article-main`","articles[search]":"(<iframe[^>]*?)></iframe>||<img src=\"https://img.drive.ru/i/19/([^\"]*?)jpg\">||``.item`||``.afigure-main`||``.dv-top-mobile`||``script`||``div[id*=adfox_]`||``.poll`||``.dv-bottom`||``.article-social-container`||``.feedsub`||``.forum-col-1`||\\sid=\"article\" class=\"article cf hreview js-mediator-article\"||``.article-gallery`","articles[replace]":"<div class=\"media_container\">$1></iframe></div>||<a class=\"animate-box\" data-animate-effect=\"fadeInLeft\" data-fancybox=\"gallery\" href=\"https://img.drive.ru/i/0/$1jpg\"><img src=\"https://img.drive.ru/i/19/$1jpg\"></a>","poster[required]":"1","poster[reg]":"<meta property=\"og:image\" content=\"([^\"]*?)\"/>","poster[search]":"","poster[replace]":"","user_data[description][required]":"0","user_data[description][reg]":"`.afigure-main .afigure-caption p`","user_data[description][search]":"<a[^>]*?>([^<]*?)</a>","user_data[description][replace]":"$1","user_data[autor][required]":"1","user_data[autor][reg]":"<meta name=\"mediator_author\" content=\"([^\"]*?)\"/>","user_data[autor][search]":"","user_data[autor][replace]":"","user_data[youtube_id][required]":"1","user_data[youtube_id][reg]":"","user_data[youtube_id][search]":"","user_data[youtube_id][replace]":""}
    Если вы не хотите разбираться с регулярками и тд, то можете заказать конфиг для граббера. Стоимость 5$ за один конфиг.
    Для заказа конфига напишите в ЛС.


    С чего начать:
    1. Добавить домен в админку, при этом не нужно импортировать кейворды.
    2. В "настройках сайта -> первый запуск" указать названия подключей для мультикеев, согласно вашим требованиям.
    3. Перейти в "меню сайта -> Граббер контента" и добавить новую ленту.
    4. Запустить парсинг с помощью крона.
    5. Настроить шаблон.
    6. В настройках сайта включить кеширование.
    Bonus

    В архиве, в качестве бонуса, идет шаблон, который используется на демо-сайте.
    Внимание! В шаблоне прописаны юзер-макросы, которые вы сами должны придумать как заполнить (или измените их на свои):
    {{@USER_DATA('autor')}}
    {{@USER_DATA('description')}}
    {{@USER_DATA('youtube_id')}}

    1.png
    2.png
    3.png
    6.png
    5.png
    4.png