Hi, I'm flop

Уведомления с помощью pynotify для moc player

noreply@blogger.com (flop) — Sun, 09 Oct 2011 21:06:00 +0000

Во время работы я люблю слушать своё любимое радио sky.fm/smoothjazz, которое благотворно влияет на творческий процесс. Как видно из заголовка слушаю его в плеере moc, мне он нравится по нескольким причинам:

он маленький, а справляется с задачами «взрослого» плеера;
можно запустить его в бэкграунде (в режиме сервера);
следовательно отдавать команды из консоли;
у него клевый консольный пользовательский интерфейс, управление в котором построено на горячих клавишах.

Но вот незадача, каждый раз писать mocp --info если заиграл неизвестный трек , а тем более держать постоянно открытым окно пользовательского интерфейса — неудобно. Хочется как у «взрослого» плеера, какое нибудь всплывающее окошко с текущим треком, исполнителем и обложкой к этому альбому.

С всплывающими окошками проблемы не возникло — ОС Ubuntu использует сервер уведомлений Notify OSD, на который и возложим задачи вывода интересующей нас информации, а вот откуда взять обложку к альбому? Первое что мне пришло на ум — это использовать albumart.org и парсить непосредственно html страницы выдачи результата. Но вовремя опомнился, ведь есть прекрасный API от last.fm, на котором я зависал несколько лет назад, который покрывает своими возможностями мои потребности чуть больше чем полностью.

Первое и вполне логичное действие — это как то «выдернуть» название трека и исполнителя, что бы потом отдать их last.fm. Помните я говорил про консольные возможности moc, так вот, что бы узнать какой трек сейчас играет достаточно набрать moc --info, вывод этой команды выглядит так:

State: PLAY
File: http://72.26.204.18:6606
Title: Brian Simpson - Paradise Island
Artist:
SongTitle: Brian Simpson - Paradise Island
Album:
CurrentTime: 26:16
CurrentSec: 1576
Bitrate: 39kbps
AvgBitrate: 0kbps
Rate: 44kHz

Поскольку это все же радио поток, то информация о треке предоставляется не совсем удобно, одной строкой, и располагается в двух строчках Title и SongTitle. Поэтому воспользуемся утилитой sed чтобы «вырезать» нужные нам данные(автор и название песни).

mocp --info | sed -n 's/^Title:\s//p'

Проверили, работает? Замечательно, значит можно открыт vim и набросать первый метод который предоставит данные для дальнейшей работы.


def _get_moc_info():
    """ получаем информацию о треке в эфире """
    moc_str = os.popen("mocp --info | sed -n 's/^Title:\s//p'").read()
    moc_str = moc_str.strip(' \n')
    to_list = re.split(' - ', moc_str)

    _get_album(to_list)

В результате работы этого метода имеем на выходе список вида ['Artist', 'Song title']. Отлично, теперь открываем LFM API в поисках нужного нам метода, чтобы чрезмерно не утомлять сразу скажу что это track.getInfo, но безусловно обилее возможностей last.fm поражает. Этот метод вернет нам xml файл определенного содержания, в котором помимо альбома к треку будет содержаться, барабанная дробь, естественно и обложка, причем разных размеров. Дело за малым, сформировать запрос и получить ответ:


def _get_album(song_info):
    """ ищем альбом исполнителя по автору и названию песни 
        используя LFM api track.getInfo 
    """
    request = {'api_key':API_KEY, 'artist':song_info[0], 'track':song_info[1], 'method':'track.getInfo'}
    lfm_request = urllib.unquote(urllib.urlencode(request))

    connect = httplib.HTTPConnection(LFM_URL)
    connect.request('GET', '/2.0/?' + lfm_request)
    result = connect.getresponse()
    to_parse = result.read()

    _get_song_image(to_parse, song_info)
    connect.close()

Словарик request — это тело запроса, в котором содержится ключ для доступа к API, исполнитель, название песни и вызываемый метод. Функция urllib приводит тело запроса в надлежащий вид, а httplib отправит запрос по нужному нам адресу.

Теперь посмотрим на ответ от last.fm в поисках нужных нам данных, а имеено обложки к альбому, если таковая конечно имеется. Для парсинга xml использую BeautifulSoup, тут к гадалке не ходи, идеальная библиотека для парсинга html xml данных. Искать будем по тагу image, их будет несколько, в зависимости от размера обложки, внутри которого будет урл до картинки.


def _get_song_image(string, song_info):
    """ парсим результат в поисках обложки к альбому """
    parse_str = BeautifulSoup.BeautifulStoneSoup(string)
    if parse_str.find('image', size='small') == None:
        return ERROR_IMG
    else:
        try:
            img = parse_str.find('image', size='small').text
            show_notify(img, song_info)
        except:
            ERROR_IMG

Отлично, осталось все это вывести на экран, для этого понадобиться pynotify, python обертка для Notify OSD:


def show_notify(image, song_info):
    tmpimg = urllib.urlretrieve(image)
    if not pynotify.init("moc-notify"):
        sys.exit(1)

    moc_notify = pynotify.Notification(song_info[0], song_info[1], tmpimg[0])
    moc_notify.show()

На этом пока я остановился, минимально-аскетичный функционал заложен, что предстоит сделать:
Todo

Привести код к надлежащему виду;
Если обложка не найдена вывести картинку-заглушку;
Предусмотреть отступ от другого оповещения, а не ждать завершения его показа;
Придумать монитор для отслеживания состояния смены трека;
Так же предусмотреть показ обложки не только для радио потока;
Ну и для conky то же можно предусмотреть вывод, и да, я знаю про coverglobus.

Весь код можно найти у меня в bitbucket репозитории.

Что почитать?
NotifyOSD
NotificationDevelopmentGuidelines
Beautiful Soup Documentation

Pysmell для Python/Django в Vim Ubuntu

noreply@blogger.com (flop) — Sun, 21 Aug 2011 19:41:00 +0000

Vim поистене мощный текстовый редактор, а программировать в нем одно удовольствие. Встроенное автодополнение кода - omni completion, не уступающее IntelliSense в VisualStudio 20xx, всплывающий pydoc в отдельном буфере, но есть одна маленькая проблемка, omni completion не очень хорошо работает со сторонними библиотека. Если точнее то отказывается дополнять их код. Поэтому на помощь приходит великолепный проект PySmell.Если цитировать разработчиков то

PySmell is a python IDE completion helper. It tries to statically analyze Python source code, without executing it, and generates information about a project's structure that IDE tools can use.
There is currently support for Vim, Emacs and TextMate. Feel free to contribute your own favourite editor bindings, or to improve the existing ones.

Так чем же он сможет помочь для нашей задачи?

Для начала установим его используя pyhton — setup tools:

sudo easy_install pysmell
или
sudo pip install pysmell

либо установить из исходников:

git clone https://github.com/orestis/pysmell.git
cd pysmell
sudo python setup.py install

Для продолжения настройки необходимо скачать архив с сайта, файл pysmell.vim поместить в директорию ~/.vim/plugin
Если Вы установили pysmell из репозитория, то в этом же каталоге скопируйте pysmell.vim в ~/.vim/plugin
Осталось только вызвать командой

:setlocal omnifunc=pysmell#Complete

или сразу прописать в .vimrc строчку

autocmd FileType python setlocal omnifunc=pysmell#Complete

Теперь осталось только сгенерировать таги для дальнейшего использования. Очень хороший пошаговый мануал есть на stackoverflow, который я за некоторым исправлением переведу сдесь.

Устанавливаем PySmell используя команду setup.py install (это мы уже сделали).
Генерируем для django PYSMELLTAGS файл, для этого перейдем в каталог dist-packeges/django:
cd /usr/local/lib/python2.7/dist-packeges/django/
и выполняем команду:
pysmell . -o ~/PYSMELLTAGS.django
ни кто не запрещает сразу же помещать файл с тагами в Вашу директорию с проектом, то есть:
pysmell . -o ~/path/to/your/django/project/PYSMELLTAGS.django
Теперь генерируем PYSMELLTAGS файл для рабочего проекта
pysmell .
Осталось убедиться что pysmell находится в нашем PYTHONPATH
export PYTHONPATH=${PYTHONPATH}:/path/to/pysmell/
Запускаем vim
Устанавливаем pysmell.vim
:source /path/to/pysmell/pysmell.vim
(мы это уже сделали скопировав pysmell.vim в каталог plugin)
Устанавливаем функцию автодополнения
:set omnifunc=pysmell#Complete
(это мы то же сделали)
Все, должно работать.

Мой пример работы PySmell:

Домашний RAID 1 в ubuntu

noreply@blogger.com (flop) — Thu, 14 Jul 2011 18:04:00 +0000

Прекрасным весенним утром, я проснувшись понял, что потеря данных в результате выхода из строя жёсткого диска, для меня дороже стоимости жесткого диска. Поэтому решил на своём домашнем\рабочем компьютере использовать RAID массив. Конечно это не панацея, ведь вероятность одновременного сбоя всех дисков массива всегда имеет место быть, но данная вероятность гораздо ниже выхода из строя одного диска, что дает моральное и душевное спокойствие о сохранности своих данных. Что такое RAID и какие бывают уровни можно прочесть тут и тут.

В качестве ОС у меня выступает Ubuntu, поэтому дальнейшее описание процесса создания массива и установки на него операционной системы осуществляется для нее, но на моё субъективное мнение, разительных отличий при выборе другой операционной системы возникнуть не должно.

Первым делом, неискушённый пользователь начнет устанавливать desktop-версию доступную на сайте ubuntu по умолчанию и неминуемо столкнется с рядом неявных моментов. Поэтому я рекомендую выбирать в качестве установщика alternate-версию, но на бескрайних просторах глобальной сети «Интернет» выловил хорошую статью по установке как раз desktop-версии Ubuntu на software RAID. Поэтому я и решил перевести данное how — to, забегая чуть — чуть вперед, так же приведу пример установки alternate-версии, который окажется много проще первого способа.

Установка Desktop - версии.

И так, приступим:

Загружаемся с Live CD (или USB) и выбираем пункт «Попробовать» без установки;
Используя Gparted (System → Administration → Gparted) создаем разделы нужного нам размера. Стоит обратить внимание на то, что создаваемые разделы должны иметь одинаковый размер. То есть, например размер раздела /home на первом жестком диске должен быть равен размеру /home на втором жестком диске итд;
Теперь используя apt-get, необходимо установить mdadm (незабудем выполнить apt-get update перед установкой). Вместе с mdadm будет предложен к установке postfix (mail server), для его конфигурирования выберем опцию Local only и ответим на вопросы;
Это простой, но самый важный шаг, сейчас мы будем создавать наш массив. Выполним следующую команду:
# mdadm --create /dev/md1 --verbose --level=1 --raid-devices=2 /dev/sda1 /dev/sdb1
Расшифровка команд:
- --create создает массив /dev/md1;
- --verbose дает подсказку в случае ошибки;
- --level=1 уровень массиава, в данном случае уровень 1;
- --raid-devices=2 количество устройств в массиве;
- /dev/sda1 и /dev/sdb1 устройства из которых создан массив
После выполнения команды вы должны увидеть сообщение:
mdadm: /dev/sda1 appears to contain an ext2fs file system
size=3927860K mtime=Thu Jan 1 01:00:00 1970
mdadm: size set to xxxxxxxK
Continue creating array?
Набираем «yes», и наш массив должен быть создан.

Соответственно применяем эту команду для всех разделов созданных на жестких дисках. У меня это:
# mdadm --create /dev/md2 --verbose --level=1 --raid-devices=2 /dev/sda2 /dev/sdb2
# mdadm --create /dev/md3 --verbose --level=1 --raid-devices=2 /dev/sda3 /dev/sdb3
То есть, для каждого раздела (/, swap, /home) по массиву.
Теперь необходимо отформатировать созданные массивы в ту файловую систему какую вам удобнее. Я выбрал ext4, но вы можете использовать ext3, ext2, xfs итд:
# mkfs.ext4 /dev/md1
Откроем установщик Ubuntu используя ярлык на рабочем столе. И далее по накатанной выбираем язык установки, временную зону, раскладку клавиатуры. После вышеописанного на шаге 4 перейдем к работе с жестким диском. Выберем пункт «ручной\Другой вариант». Выбираем RAID массивы на которые укажем что монтировать. В моем случае в /dev/md1 использую для / (root), /dev/md2 — swap и /dev/md3 — home раздел. После, нажимаем «Установить сейчас».
Ждем пока завершится процесс установки.
Следующие шаги самые сложные и мне потребовалось некоторое время чтобы выявить их. В новом установщике Ubuntu нет mdadm, и поэтому когда вы пытаетесь загрузиться с не собранного массива, очевидно вы не можете загрузится вообще. То есть придется установить mdadm.
Монтируем установщик (а так же proc, sys, и dev) и chroot в директории:
# mount /dev/md1 /target/
# mount --bind /dev/ /target/dev/
# mount --bind /sys/ /target/sys/
# mount --bind /proc/ /target/proc/
# chroot /target
Устанавливаем mdadm (так же как мы делали в шаге 3):
# apt-get update
# apt-get install mdadm
На этом шаге вы должны загрузится в свеже установленную систему, но СТОП, Ubuntu устанавливает GRUB только на один диск, если он выйдет из строя то мы не сможем загрузиться и заменить его, вернее заменить сможем, а вот загрузиться в ОС нет. Исправим это:
# grub-install /dev/sda
# grub-install /dev/sdb
Все, перезагружаемся.

Установка Alternate - версии.

Теперь простой вариант установки alternate-версии Ubuntu. Стандартно отвечаем на все вопросы установщика плавно доходя до пункта выбора разметки жестких дисков:

Выбираем ручной метод разметки
Создаем файловые системы на каждом диске

Я разбил каждый диск на три раздела, у меня это разделы для /, swap и /home соответственно. Не забываем на каждом корневом разделе указать загрузочную метку «вкл»;
В качестве файловой системы выбираем физический уровень RAID
Сохраняем изменения
Переходим в раздел настройка программного RAID и создаем новое устройство,
выбираем нужный нам уровень массива.

В моем случае это уровень 1, число активных и резервных разделов (2 и 0) оставляем по умолчанию. Далее выбираем разделы которые будут включены в массив. Важно отметить, что разделы должны быть одного размера, в моем случае md0=sda1+sdb1, md1=sda2+sdb2, md2=sda3+sdb3. Выделение нужных разделов производится нажатием клавиши пробел, причем последовательно, то есть выбрали разделы sda1 и sdb1 нажали продолжить, и так пока все массивы не будут созданы.
Теперь необходимо задать файловые системы нашим массивам:
Завершаем установку и записываем изменения на диск:
Устанавливаем GRUB. Во время установки GRUB автоматически предложит установить себя так же и на второй диск, на тот случай если первый выйдет из строя:

После установки.

Посмотрим что же получилось :

fl@virtual-ubuntu:~$ grep /dev/md /etc/fstab
# / was on /dev/md0 during installation
# /home was on /dev/md1 during installation
# swap was on /dev/md2 during installation

fl@virtual-ubuntu:~$ df -h / /home
Файловая система Разм Исп Дост Исп% смонтирована на
/dev/md0 6,2G 2,8G 3,2G 47% /
/dev/md1 2,8G 71M 2,6G 3% /home

Статус всех RAID устройств можно проверить в файле /proc/mdstat , где md(n) устройство содержит два sd(x,n) диска и каждый md(n) должен иметь статус «2/2» и «UU». Более подробную информацию предоставить утилита mdadm:

fl@virtual-ubuntu:~$ cat /proc/mdstat
Personalities : [raid1] [linear] [multipath] [raid0] [raid6] [raid5] [raid4] [raid10]
md1 : active raid1 sdb2[1] sda2[0]
2929600 blocks [2/2] [UU]

md2 : active raid1 sdb5[1] sda5[0]
1010624 blocks [2/2] [UU]

md0 : active raid1 sda1[0] sdb1[1]
6542272 blocks [2/2] [UU]

fl@virtual-ubuntu:~$ sudo mdadm --query --detail /dev/md1
/dev/md1:
Version : 00.90
Creation Time : Thu Jul 7 20:19:42 2011
Raid Level : raid1
Array Size : 2929600 (2.79 GiB 3.00 GB)
Used Dev Size : 2929600 (2.79 GiB 3.00 GB)
Raid Devices : 2
Total Devices : 2
Preferred Minor : 1
Persistence : Superblock is persistent

Update Time : Wed Jul 13 18:00:07 2011
State : clean
Active Devices : 2
Working Devices : 2
Failed Devices : 0
Spare Devices : 0

UUID : 202c108c:faad7fbf:e24ab7c2:c0e59284
Events : 0.34

Number Major Minor RaidDevice State
0 8 2 0 active sync /dev/sda2
1 8 18 1 active sync /dev/sdb2

Для полноты эффекта с эмулируем отказ одного из жестких дисков, система загрузится, но /proc/mdstat покажет, что /dev/sdb1 /dev/sdb2 и /dev/sdb3 исчезли, а /dev/md(n) примет статус «degraded».

fl@virtual-ubuntu:~$ cat /proc/mdstat
Personalities : [linear] [multipath] [raid0] [raid1] [raid6] [raid5] [raid4] [raid10]
md2 : active raid1 sda5[0]
1010624 blocks [2/1] [U_]

md1 : active raid1 sda2[0]
2929600 blocks [2/1] [U_]

md0 : active raid1 sda1[0]
6542272 blocks [2/1] [U_]

Заменяем жесткий диск на новый, теперь его надо подготовить для добавления в рейд, для этого копируем разметку с живого жесткого диска на новый:

fl@virtual-ubuntu:~$ sudo sfdisk -d /dev/sda | sfdisk /dev/sdb

И убедимся в идентичности разметки дисков:

# fdisk -l

Теперь добавим новый диск в массив:

fl@virtual-ubuntu:~$ sudo mdadm --add /dev/md0 /dev/sdb1
mdadm: added /dev/sdb1

fl@virtual-ubuntu:~$ sudo mdadm --add /dev/md1 /dev/sdb2
mdadm: added /dev/sdb1

fl@virtual-ubuntu:~$ sudo mdadm --add /dev/md2 /dev/sdb3
mdadm: added /dev/sdb1

Смотрим результат восстановления:

fl@virtual-ubuntu:~$ cat /proc/mdstat
md2 : active raid1 sda5[0]
1010624 blocks [2/1] [U_]
resync=DELAYED

md1 : active raid1 sdb2[2] sda2[0]
2929600 blocks [2/1] [U_]
resync=DELAYED

md0 : active raid1 sdb1[2] sda1[0]
6542272 blocks [2/1] [U_]
[===>.................] recovery = 15.7% (1033280/6542272) finish=3.2min speed=27881K/sec

unused devices:

Переезд

noreply@blogger.com (flop) — Tue, 05 Apr 2011 19:01:00 +0000

Доброго времени суток всем, наконец то я более или менее привел свои дела в порядок и смог засесть за свои записи. Почти год я ничего не писал, в литературном смысле конечно же, на это был целый ряд причин о которых я скорее всего упомяну в своем лытдыбр — ом бложике. Почему не здесь? Все просто, решил что не стоит мешать эмоции и тематический материал, а тем у меня накопилось достаточное количество.

Как Вы все заметили изменения коснулись прежде всего платформы, смена отдельно хостящегося Wordpress на облачный Blogger. Wordpress безусловно отличная платформа для ведения блога, но его раздутость, местами полная неадекватность при обновлении от версии к версии, стала тяжелым испытанием для моих нервов. Если честно, то к Blogger я приглядывался давно, да же пару раз использовал его как блокнотик для записей коротких житейских заметок, теперь же для этого я использую posterous.com . Шаблон решил адаптировать от wordpress темы и тут то меня ждало первое испытание в виде своеобразного, а местами да же своенравного, шаблонизатора платформы Blogger. Пришлось делать несколько финтов ушами, не все и не везде заводилось из коробки, некоторые элементы интерфейса выглядят не так как планировалось. В ближайшее время доведу внешний вид до ума, прикреплю подсветку синтаксиса, и потихонечку начну заполнять блог в силу своих навыков. Так что далеко не расходимся, будет интересно.