Парсинг поисковой выдачи Яндекса в Yahoo Pipes + новый скрипт для автопостинга в сплоги на blogger.com

Опубликовано в (Yahoo Pipes, Контент, Сплоги) | автор splogmaster | 17-02-2009

Тэги: , , , , , , , , ,

Выкладываю свою рабочую трубу для парсинга результатов поиска Яндекса по нужному ключевому запросу. Yahoo Pipes не дружит с URL-ми, где в значении передаваемых параметров присутствуют русские буквы - это скорее глюк, чем особенность. Пэтому делать сложные трубы для генерации русскоязычного контента практически невозможно. Максимум, что можно сделать, это простую трубу, которая по нужному запросу тянет контент с нужного сайта: это может быть выдача любого поисковика, поиск картинок и т.д.

Собственно, вот сама труба, генерирующая с результатов поисковой выдачи Яндекса 1 пост для сплога:

yahoo-pipes-yandex-parser

На входе 2 параметра: key - ключевой запрогс и page - номер страницы выдачи.

Затем с помощью URL Builder “строим” URL, по которому открывается нужная нам страница результатов поисковой выдачи по …

Конвертация кодировки Win-1251 в UTF-8

Опубликовано в (Техническое отступление) | автор splogmaster | 03-12-2008

Тэги: , , , , , , ,

В Yahoo Pipes иногда приходится работать с RSS-лентами русскоязычных сайтов, которые отдают ленты в кодировке Win-1251 - весь мир уже давно перешел на кодировку UTF-8, однако самописные движки или же просто древние версии известных CMS по-прежнему функционируют в традициях прошлого века. Конечно же, Yahoo Pipes изначально понимал только кодировку UTF-8, затем в процессе расширения своей универсальности Yahoo Pipes стал понимать и кодировку Win-1251, хотя и не со 100% попаданием.

Так называемые кракозябли - это результат попытки представить информацию в кодировке отличной от той, в которой эта информация создавалась.

Если вы подсовываете RSS-фид в FeedWordpress и вместо читабельных постов видите кракозябли - значит проблема с кодировкой фида. Потому что wordpress работает именно с кодировкой UTF-8, и, как выяснилось недавно, blogger.com тоже - это значит подсовывать …

Установка и настройка WordPress в один клик

Опубликовано в (WordPress, Техническое отступление) | автор splogmaster | 28-11-2008

Тэги: , , , , , , , ,

Надоело мне каждый раз при настройке очередного сплога на wordpress совершать одни и те же механические действия, такие как: активация плагинов, настройка плагинов, удаление дефолтных поста и страницы, создание страницы для карты сайта и т.д. Надо бы все это дело автоматизировать, ведь мои сплоги отличаются друг от друга только названием/описанием, адресом, блогам в ЖЖ и blogger.com для кросспостинга, некоторыми настройками плагина All in SEO pack и адресом RSS фида, с которого будет тянутся контент и оформляться в посты с помощью плагина FeedWordpress.

И так, выкладываю скрипт wp-dump.php , предназначенный для автоматической настройки wordpress-сплога, фигурально выражаясь, в один клик. Требования, описание, работа скрипта по пунктам:

Для начала вы должны скопировать на хостинг все …