Блог migihajami

CherryPy autoreloader

2015-03-24T20:29:00.001+02:00

CherryPy классный легкий и удобный фреймворк под Python.

Столкнулся сегодня с такой проблемой: он автоматически перезапускается когда в исходниках происходят изменения (autoreloader). Вроде бы всё отлично, но возникает проблема с дебагом. Когда проект запущен из PyCharm авторелоад отсоединяет процесс от среды разработки и он болтается в памяти. Работает, продолжает обрабатывать запросы и релоадится при изменении фйлов. Но! Подключить дебагер нельзя. Попытка запуска завершается ошибкой с руганью на то, что порт занят и это вполне логично. Приходится искать этот процесс в таск-менеджере и убивать, либо добавлять функционал выключения CerryPy приложению и глушить его через браузер. И так каждый раз. Дико неудобно.

Ответ вроде бы лежит наповерхности, но есть нюанс.

Так вот, доки говорят, что autoreloader отключается через конфигуратор, нужно выставить engine.autoreload.on в False. Я попытался проделать это и пытался выставить это значение в секции [global] файла с конфигом. Долго мучился, но эффекта не добился.

Всё заработало и autoreloader отключился только после того как я добавил строку cherrypy.config.update({'engine.autoreload.on':False}) перед запуском cherrypy.engine.start()

Python генераторы.

2015-03-22T11:42:00.002+02:00

Продолжаю вникать в тонкости Python-а. Разглядывал как-то свой код и понял, что он не очень... в смысле совсем "не очень". А штука в том, что он хоть и написан на Python-е, но не полноценно питоновский. Что это значит? Да всё очень просто. По многолетней привычке я пишу:

result = list()
for itm in items:
    i = dict()
    i['Name'] = itm.name
    i['ItemID'] = itm.item_id
    result.append(i)
return result

Вот, код работает, но... я задумался, вспомнил что читал о Python-е, вспомнил про такую штуку как генераторы. Сказал себе: "Хмммм..." и, покопавшись в доках, написал:

return [{'Name': i.name, 'ItemID': i.item_id} for i in items]

Разница, как говорится, налицо. Код гораздо компактнее, понятнее и доки утверждают, что генераторы в Python работают быстрее циклов.

Генерировать можно не только списки. Словари тоже можно и это тоже очень просто:

result = { i.name: i.item_id for i in items}

Тут генератор возвращает словарь у которого name - это ключ, а item_id - значение. Примеры очень простые, но генераторы в Python очень мощная и гибкая штука и могут создавать довольно сложные объекты.

Вникаю в Python, генерирую классы для SQLAlchemy

2015-03-21T18:33:00.000+02:00

Собственно изучаю Python как платформу для веб-разработки. Пока всё очень нравится. В качестве ORM фреймворка стал изучать SQLAlchemy, т.к. сегодня это стандарт де-факто для Python.

Встал вопрос как для SQLAlchemy сгенерить классы на основе существующей БД, писать всё руками совсем неохота. Поиски привели меня к sqlacodegen. Инсталится он просто: pip install sqlacodegen. Запускается из консольки: sqlacodegen mysql+mysqlconnector://user:password@localhost/dbname

То есть ему нужен коннектор. А вот с установкой коннектора под винду у меня возникли сложности. Ни один из популярных коннекторов из pip ставиться не захотел. Всем им понадобился C компилятор, а ставить студию или mingw мне не захотелось. Простое решение нашлось на сайте MySQL в виде готового инсталлятора под виндовс: http://dev.mysql.com/downloads/connector/python/

Эта связка отлично заработала и сгенерила мне нужные SQLAlchemy классы со всеми связями. sqlacodegen генерит код и выводит его в stdout. Поэтому нужно просто перенаправить вывод в нужный файл: sqlacodegen mysql+mysqlconnector://user:pass@localhost/dbname > model.py

Бесплатные флеш иры

2013-08-27T15:03:00.000+03:00

Готовлю к запуску новый сайт www.get-game.ru. Как видно из темы это портал бесплатных флеш игр. Планирую реализовать на нем несколько интересных технологий, когда созрею - напишу о них. А пока можно там поиграть в свободное время.
Почему именно флеш игры? А дело в том, что иногда нужно отвлечься, расслабиться и игра - это хороший помощник. Но! Обычные компьютерные игры (или, не дай бог, MMORPG) имеют свойство затягивать и пожирают время. В итоге - хотел отвлечься, а потерял кучу времени.
У флеш игр такого недостатка нет (ну практически). В среднем на прохождение флеш-игры уходит 25-30 минут. Отвлекся, отдохнул, поиграл и можешь с новыми силами свершать подвиги в реальности.
Так, что, всем хорошего настроения, играйте с удовольствием и не забывайте о спорте!

Снова про соотношение сторон картинки

2013-08-12T12:56:00.000+03:00

Пришлось вернуться к вопросу сохранения пропорций картики. Некоторое время назад я писал об изменении размеров изображений с сохранением пропорций.

Но возникла необходимость отображать все картинки в ленте одинакового размера.

Решение довольно простое: для контейнера задаем фиксированную высоту и добавляем css атрибут overflow: hidden а для картинки задаем фиксированную ширину.

В итоге браузер приведет картинку к нужной ширине, сохранив пропорции, а контейнер отрежет лишнее. Выглядит это нормально, если картинки более-менее схожего формата.

P.S. этот рецепт действует для landscape изображений. Для портретной ориентации в контейнере нужно выставлять ширину, а в картинке высоту.

Айкидо техники с мечем и в паре

2013-05-11T13:16:00.000+03:00

Недавно мы с нашим будо клубом отсняли ролик, где одновременно исполняются техники в паре и с оружием. Получилось довольно наглядно, параллель между техниками с оружием и без оного хорошо видна.

В ролике продемонстрированы техники:

Ikkyo
Kaitennage
Aihanmi shihonage
Gyakuhanmi shihonage
Tsuki sankyo

Lucene в .net и словари hunspell

2013-04-19T11:41:00.000+03:00

Недавно на работе мне задали такую задачку: замутить в lucene поиск не только по точному совпадению ключевого слова, а также по его свловоформам.
А, надо сказать, проект у нас написан на .net и порт lucene там довольно старый (lucene 3.0.3). А что это значило для меня? А то, что штатной поддержки морфологии нужного мне языка не было. Я пошерстил интернет в поисках отвеа на вопрос: что же lucene может предложить в вопросах морфологии и стемминга той кучи языков, которую она не поодерживает из коробки?

Дальше »

Точность адресов в google maps

2013-03-15T15:45:00.000+02:00

На работе используем google maps для расчета маршрутов, но чем популярнее становится наш сервис, тем больше жалоб на неправильно рассчитанные маршруты. Причем эта тварь может выдать координаты с разницей в четыре километра для одного и того же адреса написанного по разному. Например Brivibas 372 и Brivibas gatve 372 оказывается два разных адреса! Не, ну я все понимаю, ну сказал бы про один из них: мол, нет такого, ошиблись вы, гражданин! А он наоборот: выбирай какой тебе ближе - туда и ехайте, товарищ!

Не вижу нормальных вариантов кроме использования коммерческого классификатора адресов с координатами. Они тоже не на 100% покрывают страну, но, по крайней мере, дубликатов адресов с разными координатами там нет.

Движок карты, можно и дальше гугловский использовать, или osm, а координаты из внешних сервисов брать.

А какое-то время назад вообще лажа случилась, гугл в карте Риги по запросу Lidosta (Аэропорт) начал первым выдавать координаты мелкого аэропорта где, по моему только частники летают, вместо международно Латвийского. Жалоб было - пипец. Этот мелкий аэропорт километров на 7 ближе к центру города.

Хром и панелька фейсбука

2013-03-12T11:45:00.000+02:00

С некоторых пор верхняя панель фейсбука у меня перестала быть приклеенной. Это раздражает: ленту вниз прокрутил - панелька уехала. Я думаю, что это стало происходить после того, как я разок-другой зашел на ФБ, поменяв хрому юзерагента на один из мобильных браузеров. Очистка кеша и куков не помогает. Все равно подгружается какой-то css, который переназначает фейсбучной панели позишн с fixed на relative. Блин что ж делать то.... =(

Http HEAD Online

2013-03-02T21:11:00.000+02:00

Частенько для понимания того, что происходит с http запросом нужно увидеть заголовки ответа. То есть сделать Http HEAD запрос. Обычно для этих целей я использовал curl, но это не всегда удобно. Нужно или логиниться на unix машину, либо запускать его из виндозной консоли. А раз уж я собираю утилиты на difftools.net, то и получение http заголовков тоже реализовал там.
Из приятного: можно добавлять в запрос любые опции (ну типа юзерагента или таймаута).

На очереди реализация GET/POST запросов и генератора паролей. И тогда список утилит для веб-мастеров будет довольно приличным.

Всем успехов. Если есть идеи по онлайн тулзам - велком.

URL encoder and декодер

2013-02-28T12:22:00.003+02:00

Наскоро накатал тулзу для енкодирования и декодирования ссылок. А то периодически нужно URL то енкодить, то декодить и каждый раз ищу в гугле, надоело - сделал, выложил на difftols.net.

Самое частое применение это, конечно, кликтаги (clickTAG). То подцепить туда енкодированную ссыль нужно, то проверить что туда другие подсунули, а соответственно декодировать ее. Еще бывает в параметр к другому урлу нужно прицепить, опять енкодить надо.

Ещё раз, брать тут: http://www.difftools.net/url_encoding

Да, вот еще, с месяц назад выложил JS компрессор, но забыл про него написать. Как нибудь на днях вернусь к нему.

2012-12-18T22:53:00.000+02:00

Сегодня запустил новую утилиту которая позволяет сжать css онлайн. Ему можно подсунуть стили из буфера обмена, или дать ссылку на CSS файл, или просто линк на страницу.
В результате вы получите сжатый CSS. Хоть из буфера, хоть из ссыли. Если дать линк на страницу компрессор сам найдет на ней все CSS и предложит выбрать те CSS которые нужно сжать.
В общем наслаждайтесь.

2012-12-08T23:11:00.001+02:00

На сайте www.difftools.net запущены две утилиты:

1) Подсчет количества символов, слов, предложений и строк

2) Выбор цвета (в простонародии colorpicker)

В ближайшее время там появятся еще несколько утилит. Я хочу сделать на этой площадке тулбокс который удовлетворит широкие потребности разработчика сайтов. Сейчас приходится держать большую коллекцию полезных тулзов в закладках, скоро все они будут жить на одном сайте www.difftools.net.

bash history как в csh

2012-03-28T11:11:00.000+03:00

Давно хотел сделать, но никак руки не доходили.
Дико удобно - набираешь ревые две-три буквы команды и листаешь отфильтрованную по этим буквам историю. Так по умолчанию сделано в FreeBSD csh/tcsh. А вот в bash этой прелести нет.
Но, лечится недостаток очень быстро и просто:
Открываем файл /etc/inputrc и добавляем туда две строчки:
"\e[B": history-search-forward
"\e[A": history-search-backward

После этого нужно перелогиниться.
Все, история команд bash фильтруется так-же, как в csh.

Оззи и Шакира

2012-03-07T07:18:00.000+02:00

Недавно жена уезжала на фестиваль восточного танца в Вентспилс и нам с дочкой приходилось управляться со всеми делами самостоятельно. Было много интересного, но запомнилось субботнее утро.

Раненько утром в субботу у Ксюхи тренировки по фигурному катанию. Чтобы точно не проспать, я решил помимо будильника в телефоне поставить на таймер телевизор.

И вот 7 утра, из моего телефона доносится привычная мелодия и голос Оззи Осборна, через несколько секунд включается телевизор и оттуда надрывается Шакира с "Африкой"!

Вынос мозга =)

Цены на HDD

2012-03-01T14:55:00.001+02:00

Вчера был шокирован ценами на винты.
Зашел в интернет-магазин прицениться, и челюсть сама упала на стол. Жесткие диски стали стоить в два раза дороже, чем год назад... Я уж подумал, что конкретно в этом магазине продавцы офигели, но нет, в остальных магазах ситуация та же.
Поинтересовался у знающих людей и мне растолковали, что цены взлетели после того, как на Тайване было наводнение, в котором пострадали два завода WD.
Наводнение, это конечно плохо, пострадавшие заводы - тоже ничего хорошего. Но чтобы в два раза поднимать цены?! По моему это местные торговцы решили проверить насколько сильно можено офигеть, чтобы при этом у тебя продолжали покупать...
Хотя, на том же амазоне харды ненамного дешевле, чем в наших магазах: WD 500 GB
Так, что с хардом придется чутка обождать =(

Монитор с сюрпризом

2012-02-29T09:21:00.000+02:00

У моего домашнего компа выявился баг. Небольшой такой, но неприятный.
Суть его втом, что если выдернуть из него шланг монитора он уходит в ребут, мерзавец. Вот вчера знакомый принес комп в починку, а я как раз музычку включил. Ну, думаю, пока комп починять буду пускай ACCEPT понадрывается. Только шланг выдернул, чтобы в сломанный комп воткнуть, тут меня и подстерег великий облом, со словами "Лёша, до свидания!". Обидно.
Вот такой вот монитор с сюрпризом

Но вот порадовала меня маздайка после ребута =) Она заявила, что неимоверными усилияме ей удалось подняться поле критической ошибки, и предложила мне поискать решения в интернете. Это ж надо... прям так и вижу запрос в гугл: "как не дать компу повиснуть" или "ребут от мониторного кабеля"... ппц.

Mojolicious, DBIx и UTF-8

2012-02-26T16:09:00.000+02:00

Битый час пытался заставить mojolicious нормально рендерить строки в utf8...

А он мне упорно вместо кириллицы рисовал вопросительные знаки. Я уже нервничать стал, обгуглился весь, уже и по перлу, и по Mojo, и по mysql-у прошелся крепкими выражениями. Но все они оказались невинными жертвами.

Все мучения прошли, когда в сроку коннекта DBIx я добавил параметр

mysql_enable_utf8 => 1

Кому пришло в голову отключать поддержку utf-8 в mysql по умолчанию? Что их толкнуло на этот шаг? Лично мне представляется ехидный, укуренный прогер (в очках естестно), который выставляет дефолтное значение mysql_enable_utf8 в 0, приговаривая: "Ну по...тесь часок другой, гы".

По итогу коннекшн стринг для DBIx стал выглядеть вот так:

connect("dbi:mysql:$dbname:$dbhost", $dbuser, $dbpass, { mysql_enable_utf8 => 1 });

И utf8 работает нормально.

Новый альбом ACCEPT - "STALINGRAD"

2012-02-15T20:29:00.003+02:00

Отличная новость! Совсем скоро, 6 апреля нас порадует новым альбомом легендарная группа ACCEPT! Если честно, то я не надеялся, что они соберутся выпустить еще один альбом, тем радостнее эта новость. Новый диск называется "STALINGRAD". Vivat Heavy Metal!
Уже можно сделать предзаказ!

А в конце апреля, ACCEPT дадут несколько концертов в Европе, думаю, может в Варшаву сгонять на концерт =)

UPD:
Ну, и на сладкое: ACCEPT выложили песню "Stalingrad" из нового альбома на радость нам!

Google maps кастомные кнопки.

2011-11-23T17:44:00.001+02:00

Карты google это очень популярный сервис, который используется повсеместно. Даже в своем дефолтном виде он довольно удобен. Но, после того как разработчик освоил базовые возможности google карт, он обязательно захочет побольше. Карту нужно будет кастомизировать. И одними только новыми иконками тут не обойтись. Сегодня я расскажу о том, как добавить на google карту свои кнопки и заставить их работать.

Дальше »

Галерея fancybox и её зум.

2011-11-22T12:15:00.001+02:00

В вебе существуют проверенные опытом и временем инструменты. Бывает так, что в таком инструменте не хватает какой-то детали, что тогда делать? Можно попробовать найти новый, но не всегда есть время на поиск, сравнение и изучение.

Один из таких инструментов Fancybox. Замечательный скрипт для он-лайн галереи.

Дальше »

Google chrome ошибка синхронизации (sync error)

2011-11-15T10:06:00.002+02:00

С недавних пор у меня на работе хром перестал синхронизироваться, и стал выдавать ошибку "Sync error". Предлагал заново ввести пароль аккаунта и попробовать синхронизировать данные по новой. Но ввод пароля ему никак не помогал, он долго-долго и очень безуспешно пытался авторизоваться. Я устал сидеть без синхронизации букмарков, поискал решения в сети, спросил у гугла. Мне предложили почистить кеш у куки, но это опять не помогло.

Дальше »

Тестирование скорости сайта

2011-11-12T23:54:00.004+02:00

Тест скорости своего сайта дело нужное, и если вовремя не подготовить его к нагрузкам потом будет мучительно больно. Нагрянет к Вам на сайт куча пользователей, а он ляжет. Это неправильно. К высокой посещаемости нужно готовиться заранее.

Недавно написал скрипт для тестирования скорости сайта под нагрузкой, описание выложил на отдельной странице. Кому нужно воспользоваться: скрипт для тестирования скорости сайта.

Меняем размер с сохранением пропорций

2011-11-10T22:37:00.004+02:00

Старая-старая задачка: нужно разместить на странице картинки, сохраняя пропорции, но размеры картинок заранее неизвестны.
Самое простое решение - установить размер для одной из сторон! Простой и эффективный ход. Одно но: работает только если у картинок примерно одинаковые пропорции. Итак пример:

Дальше »

Ахтунг! Дропы! Администрация, примите меры!

2011-03-31T12:52:00.001+03:00

Начал у меня глючить один район, народ звонит, волнуется, карта вся красная, трафика почти нет. Проверил. Смотрю, на сетевухе бешеные дропы. Я ей говорю:
ifconfig em0 down; sllep 3; ifconfig em0 up

Дальше »