Скрипт Скрипт автоматического создания новостных сайтов. Постоянный парсинг с разных источников

men23

Манимэйкер
3 Июн 2015
1.132
1.476
36
Скрипт автоматического создания новостных сайтов


Скрипт автоматической генерации новостных сайтов на основе популярных сайтов-доноров (список чуть ниже).
Контент берется с нескольких источников и в случайном порядке распределяется между подключенными к парсеру сайтам.
Весь процесс идет в автоматическом режиме. Между появлением новости на доноре и появлением ее на нашем сайте проходит примерно 5-20 минут. Процесс длится постоянно, пока сайт находится в системе.
Скрипт основан на фреймворке CodeIgniter, использует шаблонизатор Smarty, требует наличия БД MySQL и наличие Cron.
Писался под себя, автор я, но, в связи с некоторыми финансовыми сложностями, вынужден продать небольшое количество копий.
Коротко о скрипте:
Состоит из двух частей: движок сайта и движок сайта с парсером. Условно назовем их <Сайт> и <Парсер>.

Парсер - это <собиратель информации>. Тянет информацию с известных ему доноров, сохраняет их в своей базе данных и распределяет по подключенным Сайтам. Сайты получают информацию без повторов, то есть если новость ушла на один сайт, то она удаляется из базы и на последующие Сайты из сетки не попадет.

Из требований к хостингу, на котором установлен Парсер, самое главное, это либо большой max_execution_time (около 60-90 секунд), либо возможность его поменять. И <Запуск задач по расписанию>, он же Cron. Парсинг нежный, хостинг не нагружает, подойдет любой недорогой тариф.

Сайты - это ведомые сайты, которые подключаются к парсеру и получают от него информацию. Сами инициативы не проявляют, только ждут команды и данных от парсера. Могут быть расположены где угодно, не обязательно на одном хостинге с Парсером. Количество Сайтов неограничено. Единственное условие - все они должны быть доступны для Парсера по HTTP-протоколу. То есть они реально должны быть установлены на каком-либо хостинге и ДНСы должны обновиться для того, чтобы Сайт мог вступить в работу.

Поддерживается экспорт в следующие CMS:

внутренняя CMS
WordPress
DataLife Engine
Joomla
Для чего этот скрипт может быть полезен:
Очевидный ответ - биржи ссылок, статей. Сайты на подобном копипасте довольно успешно держатся в индеске и принимаются в ту же сапу. С помощью этого скрипта вы сможете создать любое количество Сайтов, каждый из которых будет иметь постоянно обновляющийся контент. Если Сайт попал в бан, или вы считаете, что на нем достаточно статей, вы отключаете его в панели администратора, добавляете новый домен и он также начинает принимать информацию.

Скачать:
Для просмотра скрытого содержимого необходимо Войти или Зарегистрироваться.
 
Последнее редактирование:

Арамис

Манимэйкер
 
11 Июн 2014
2.839
5.957
36
43
men23 так просто техническое любопытство: мы наверно все понимаем, что это будет новостной сайт на чистом копипасте. Да я не спорю, ПС не могут уследить за сотнями тысяч сайтов и кое-какие копипастные сайты залетают в индекс.

А вообще по Вашему мнению есть смысл уникализироватб спарсенные статьи? или есть ли в парсере уникализатор статей? или для продажи ссылок с сайта достаточно и этого копипаста?!

Если есть мысли предлагаю развить тему, так, как знаю есть вебмастера, которые на пассиве зарабатывают до 50000р/месяц только на трех пяти сайтах заточенных под нч запросы. Монетизация: контекст + продажа ссылок с сайта.
 

men23

Манимэйкер
3 Июн 2015
1.132
1.476
36
men23 так просто техническое любопытство: мы наверно все понимаем, что это будет новостной сайт на чистом копипасте. Да я не спорю, ПС не могут уследить за сотнями тысяч сайтов и кое-какие копипастные сайты залетают в индекс.

А вообще по Вашему мнению есть смысл уникализироватб спарсенные статьи? или есть ли в парсере уникализатор статей? или для продажи ссылок с сайта достаточно и этого копипаста?!

Если есть мысли предлагаю развить тему, так, как знаю есть вебмастера, которые на пассиве зарабатывают до 50000р/месяц только на трех пяти сайтах заточенных под нч запросы. Монетизация: контекст + продажа ссылок с сайта.
Смысл всегда есть. Так как любое ново ведение может повысить приток заработка человеку
 

gelu4

Оптимизирует
3 Янв 2014
291
132
11
У кого есть время проверьте работоспособность скрипта ибо продавали его в 2012 году
 

kari74

Тестит темы
27 Дек 2013
267
54
11
49
кто нибудь пробывал эту новинку - работает?
 

Арамис

Манимэйкер
 
11 Июн 2014
2.839
5.957
36
43
Коллеги, автор выложил скрипт, вы уже качайте пробуйте. Не стоит ждать пока кто то результаты скажет. Возможно кто то уже даже молча работает. Берете скрипт, качаете, пробуете. Не сработал скрипт, не истерии тс,у ниче не высказываем. Берем скрипт идем к кодерам отдаем им его на переработку/доработку называйте, как вам будет угодно (понятно кодер себе тоже урвет, ну ниче нужно делиться, главное, чтобы беспалевный редирект вам не воткнул туда) и снова пробуете. Такое явление очень частое, когда скрипты на доработку отдают, в эту работу входит подгонка скрипта под нынешние алгоритмы поисковых систем!
 
  • Like
Реакции: kiberloki и dhusss

YandexBot

Самый главный
22 Апр 2015
529
238
26
Может я что то недопонял - но установить так и не смог... Печалька. Такое впечатление что каких то файлов не хватает. Скрипт установился, а вот открываться не захотел и админки нет...
 
  • Like
Реакции: Арамис

Арамис

Манимэйкер
 
11 Июн 2014
2.839
5.957
36
43
Может я что то недопонял - но установить так и не смог... Печалька. Такое впечатление что каких то файлов не хватает. Скрипт установился, а вот открываться не захотел и админки нет...
Вполне возможно. Бывает и такое, было у меня, что качал дорвейный скрипт, запускаться запускал, а вот в админку войти не мог.
 
  • Like
Реакции: YandexBot

esif12

Рубит бабло лопатой
6 Июл 2014
136
801
21
нужен IP ключ, только где его брать?