Импорт записей из RSS в ЖЖ / PHP / Хабрахабр

Импорт записей из RSS в ЖЖ

Upd. Новая версия онлайн-сервиса доступна по адресу http://ljimport.idzaaus.org. Статью о ней я напишу позже.

Написал для себя скрипт импорта записей в ЖЖ. Сейчас этим онлайн-сервисом пользуются еще 50 пользователей. Решил написать и сюда, чтобы чувствовать себя еще более полезным для общества. Поскольку я сильно сомневаюсь, что мой сайт выдержит даже жалкое подобие хабраэффекта, я решил переделать скрипт для использования одним человеком и выложить исходные коды.

Вообще, я сильно удивился, узнав, что такой простой опции в ЖЖ нет (вернее, она есть только для платных аккаунтов). Постинг делается через Blogger API, для него я взял готовую реализацию. Парсер понимает кодировки Windows-1251 и UTF-8. Мой скрипт заточен под импорт с сайта онлайн-дневников diary.ru, для пользователей которого учтены некоторые приятные мелочи.

Для использования программы должен быть установлен консольный PHP-клиент. Запуск осуществляется командой:
php ljimport.php [options]
Запуск импорта осуществляется без аргументов. Перед этим введите настройки в файле config.php. Если вы не хотите, чтобы все записи из ленты сразу попали в блог, сразу после добавления ленты в список запустите программу с ключом -F. Тогда скрипт запомнит текущее время и в дальнейшем будет импортировать только записи, дата которых позже этого момента. В целях безопасности пароль можно не писать в конфиг, а вводить каждый раз вручную. Для автоматического импорта можно использовать cron.

Скачать можно на гуглокоде. Или через SVN:
svn checkout http://ljimport.googlecode.com/svn/trunk/ ljimport

+15

26 января 2010, 06:06

Riateche

комментарии (40)

wirklich 26 января 2010, 11:14 #

Давно и безуспешно ищу что-то для импорта из Джумлы в ЖЖ.
Не встречали ли?

Riateche 26 января 2010, 11:25 # ↑

Не работал с Джумлой. Могу посоветовать вам сделать генерацию RSS в Джумле (уверен, это можно сделать через какой-нибудь плагин или даже без него), а затем воспользоваться моим скриптом.

kugaevsky 26 января 2010, 19:46 # ↑

Joomla поддерживает формирование RSS-потока ваших материалов из коробки.
Скормив его скрипту автора, вы получите импорт из Joomla в ЖЖ.

Есть еще модуль Gigya Publish, но сам я его не использовал.

wirklich 26 января 2010, 23:44 # ↑

Спасибо за Гигью, попробую, хотя судя по описалову, немного не то. Я могу ошибаться.

quintus 27 января 2010, 08:20 # ↑

буквально на днях сделал с помощью сервиса rss2lj
все велосипеды уже изобретены :)

Riateche 27 января 2010, 08:24 # ↑

Наличие альтернативы — это всегда прекрасно.

wirklich 27 января 2010, 10:32 # ↑

Спасибо. Как-то сразу не думал о сторонних сервисах, искал подключаемы непосредственно в саму Джумлу модуль.

quintus 27 января 2010, 12:51 # ↑

сервис универсальный, я через него замутил отличную линию репостинга:
joomla-based webdite > rss2lj > blog.ru + ya.ru + li.ru + lj.ru

wirklich 26 января 2010, 11:41 #

Ну РСС у меня в Джумле есть. Получается, мне нужно брать этот поток, устанавливать консольный PHP-клиент и пропускать мой РСС через него?

Riateche 26 января 2010, 11:50 # ↑

Да, наверно, оно будет работать. Хотя может не работать кат или еще что-нибудь. Еще в файле readme есть ссылка на онлайновый сервис, которым вы можете воспользоваться, если не хотите устанавливать скрипт. Если что-то не заработает, отпишитесь с указанием адреса RSS.

wirklich 26 января 2010, 11:53 # ↑

О, «сылка на онлайновый сервис, которым вы можете воспользоваться, если не хотите устанавливать скрипт» — это как раз для меня, я не настолько продвинут, чтбы поднимать свои сервера и скрипты.
Спасибо! Попробую и если что, обязательно отпишусь.

wirklich 26 января 2010, 12:00 # ↑

Да, а пароли от ЖЖ как — не опасно ли отдавать, вы их видите или они хранятся в зашифрованном виде? :)

Riateche 26 января 2010, 12:10 # ↑

Пароли от ЖЖ, введенные на сайте, хранятся в виде, поддающемся дешифровке. Увы, скрипту для периодического постинга необходимо знать пароль, и я не могу зашифровать его необратимо. А имея доступ к базе и дешифрующему скрипту, я могу узнать ваш пароль. Поэтому отдавать их опасно. К сожалению, у ЖЖ нет такого API, как в твиттере (там можно сделать подобный сервис, вообще не спрашивая пароль у пользователя напрямую).

wirklich 26 января 2010, 12:11 # ↑

Понятно, спасибо за прямолинейный ответ.

neuromotor 26 января 2010, 19:23 # ↑

Почему blogger api? Если это отлично можно сделать xml-rpc жжшечки?
и пароль кстати в xml-rpc жж не надо посылать в открытом виде (используется md5 хеш)

референс апи: www.livejournal.com/doc/server/ljp.csp.xml-rpc.protocol.html

Riateche 26 января 2010, 19:49 # ↑

Согласен, и я планирую со временем перевести сервис на нативный api жжшки, к тому же он предоставляет больше возможностей. Но во время создания скрипта я решил использовать blogger api, потому что так показалось проще (а было это в прошлом году).

Тут еще такой момент: если перехватить не сам пароль, а его хеш, всё равно можно гадостей пользователю сделать через тот же lj api, поэтому польза от хеширования уменьшается.

neuromotor 26 января 2010, 20:42 # ↑

ну все же лучше чем открытый пасс попадает налево.
Кстати, у вас нет проблем с баном со стороны lj? столкнулся одно время когда банили подобные массовые сервисы из-за большого количество обращений с одного ипа к разным учеткам?

Riateche 27 января 2010, 04:04 # ↑

Меня пока не банили. Но у меня и пользователей немного. Если бы их было, например, 200, думаю, возникли бы проблемы.

Bal 27 января 2010, 01:08 # ↑

Целый ряд сервисов (навскидку — imhonet.ru, например) позволяют постить информацию в ЖЖ своих пользователей. Авторизационная информация при этом вводится не на таком сервисе, а в ЖЖ, куда происходит переадресация. Так что, видимо, API такой, всё же, есть. Хотя навскидку в документации я не нашёл.

Riateche 27 января 2010, 04:04 # ↑

Спасибо, я поищу.

MichaelXIII 26 января 2010, 16:30 #

Спасибо, а не видели что-нибудь подобное для Blogger?

Riateche 26 января 2010, 16:52 # ↑

попробуйте это

MichaelXIII 26 января 2010, 17:15 # ↑

Спасибо, но похоже это показывает только БЛОК на странице с имортированными записями.

Хотя вечером покручу, может чего придумается

kugaevsky 26 января 2010, 19:48 # ↑

Дык вот же, собственно: code.google.com/intl/ru-RU/apis/blogger/

LitrKonyaka 26 января 2010, 19:44 #

А как из google reader шарить в жж не подскажете? В смысле там можно в send to как-то прописать

Riateche 26 января 2010, 19:55 # ↑

Ну если у вас в Google Reader просто собирается много обычных RSS, то заходите в настройки → подписки, копируете адреса ваших лент и скармливаете моему импорту. Если же в Reader'е у вас настроено что-то более сложное, то не знаю.

LitrKonyaka 26 января 2010, 19:56 # ↑

Не, мне не всю ленту нужно экспортить, а просто от случая к случаю, отдельные записи

david_mz 26 января 2010, 21:17 #

$rss = str_replace("<![CDATA[", "", $rss);
$rss = str_replace("]]>", "", $rss);

preg_match_all("/<description>([^<]+)<\/description>/", $rss, $r[«text»]);

Силищща. Автор, откройте для себя хотя бы SimpleXML.

$test = substr_count($rss, chr(208));
if ($test > strlen($rss) / 30) {
//it's utf-8
}

Тоже круть.

Riateche 27 января 2010, 04:12 # ↑

Я в курсе, что это жуть. Но писалось это изначально под конкретный сервис (diary.ru), а потом обрабатывалось напильником. К тому же на имевшемся у меня тогда единственном хостинге не было даже iconv, не говоря уже о SimpleXML, поэтому я писал всё сам, наивно думая, что улучшаю переносимость кода на другие хостинги. Если я убежусь, что эта вещь нужна достаточно многим людям, половине кода светит рефакторинг.

bolk 27 января 2010, 10:50 # ↑

Вот вам простой способ определить UTF: bolknote.ru/2008/03/20/~1632

–2

zeleniy 27 января 2010, 12:12 # ↑

Рефакторинг светит вашей голове… бля, по-моему каждый кто пишет на PHP считает своим долгом опубликовать в этом блоге хоть какую то статейку… Засуньте свой пост в правильный блог! «web-сервисы», «web-программирование»… ещё может что нибудь…

«переносимость кода» — потрясающий аргумент… пишите код исходя из того, что PHP собран без единого модуля…

Riateche 27 января 2010, 14:43 # ↑

«Засуньте свой пост» звучит несколько грубо. А опыта в выборе правильного блога у меня, к сожалению, нет, я только учусь.

«переносимость кода» — потрясающий аргумент…

Я знаю, а вы пропустили в моем комментарии слово «наивно».

Vladson 25 июня 2011, 23:55 # ↑

Грубо да, но и заслуженно тоже. Код явно оставляет желать лучшего. Публиковать такое, я лично постеснялся бы.

kns 26 января 2010, 22:13 #

Хм. Я такое делал через консольный lj-клиент.
А еще попадался веб-сервис, странно, что только один.

allex 26 января 2010, 22:30 #

А в чём отличие от rss2lj.net?

Riateche 27 января 2010, 04:15 # ↑

Он понимает Atom-фиды. И он не опенсурсовый. И его нельзя запустить на собственном компьютере.

DemaN 7 июня 2010, 16:15 # ↑

rss2lj.net больше не работает.

В связи с блокировкой со стороны LJ, сервис в настоящий момент остановлен. Сейчас ведутся переговоры с LJ, и вполне возможно, что в скором времени всё заработает. Прошу вас набраться терпения, новости о проекте можно будет узнать в моём журнале: david-m.livejournal.com/tag/rss2lj.

dima_smol 26 января 2010, 23:03 #

ping.fm может постить в кучу сервисов.
Сейчас для кросспоста использую связку twitterfeed.com + ping.fm

lexxvlad 27 января 2010, 08:27 #

моя связка:
FF+плагин ScribeFire+ЖЖ+liveinternet+livejournal+ya.ru = одним кликом.

kns 25 июня 2011, 23:41 #

Upd. Новая версия онлайн-сервиса доступна по адресу ljimport.idzaaus.org.

А поправьте тогда ссылку на code.google.com/p/ljimport/

Только зарегистрированные пользователи могут оставлять комментарии. Войдите, пожалуйста.

Языки программирования ↓

PHP