僕ト云フ事

[python]import しようとするパッケージと実行しようとするファイル名がかぶると困ったことになる

海賊たろ（小松大輔） — 2012-01-06T09:25:22+09:00

あけおめ。

email.py って名前のファイルを作って、中身で from email.mime.text import MIMEText とかしたら、こんな事言われる。

[vkgtaro@cb21-komatsu.local] $ python email.py
Traceback (most recent call last):
  File "email.py", line 1, in 
    from email.mime.text import MIMEText
  File "/Users/vkgtaro/Desktop/email.py", line 1, in 
    from email.mime.text import MIMEText
ImportError: No module named mime.text

モジュールのパッケージ名と同じ名前の py ファイルを探索可能なところにおいてることになるわけですね。ファイル名気を付けないと。

]]> [python]

[decorator][python]引数付きの decorator

海賊たろ（小松大輔） — 2011-12-27T23:41:35+09:00

三重に関数をネストした decoration 用の関数を作る。


def deco(deco_arg):
    def deco_inner(func):
        def wrapper(*args, **kwards):
            print "before wrapper: %s" % deco_arg
            result = func(*args, **kwards)
            print "after wrapper: %s" % deco_arg
            return result
        return wrapper
    return deco_inner

んで、こうやると引数使って decorate できる。


@deco("boke")
def hoge(arg):
    print "hoge: %s" % arg
 
hoge("aaa")

実行結果

before wrapper: boke
hoge: aaa
after wrapper: boke

実際にはこうやってるのと一緒。


def boo(arg):
    print "boo: %s" % arg
 
_deco = deco("bbb")
b = _deco(boo)
b("aaa")

実行結果

before wrapper: bbb
boo: aaa
after wrapper: bbb

]]> [decorator][python]

[gdata][python]Google Calendar の内容を Spreadsheet へ流す script

海賊たろ（小松大輔） — 2011-11-07T21:39:24+09:00

仕事で Google Docs の spreadsheet に time sheet をつけなくてはいけないんだけど、いつも Calendar を実績ベースに書き換えて居るので、それを流し込むだけの script 書いた。
月末の提出時に動かしてる。（本当は column がたくさんあったり、適切な sheet 選んだりって処理があったけど省いてる。）

こんなコードなら書いてるなぁ、というカンジ。

]]> [gdata][python]

[hachioji.pm][perl]Hachioji.pm に参加してきました。

海賊たろ（小松大輔） — 2011-10-30T02:56:54+09:00

レポート書こう、ということで熱が冷めないうちに……。
hachioji.pm の皆さんお疲れさまでしたー。

ということで hachioji.pm #10行ってきました。Perl + 八王子、と言うことでホーム感ありありでした。今は新宿区民ですが。そして案の定、京王八王子着いてから、若干迷ってたり >_<

Hachiouji.pm.2011.10.29

View more presentations from Daisuke Komatsu

1枚 LT で自己紹介……のサムネイル貼りたいがために久々に slideshare 使ったw
(lazy さん、何かというと使ってしまうのよね……)
まー、コード書いてる絶対量が少ないので、python がどうとか、ruby がどうとか言えるレベルではないですね。でも自分みたいな人も受け入れてもらえる雰囲気は良かったです :-)

隣に座ってた @yellow844 さんや前に座ってた perl-o-pal さんが python 詳しかったりして、python 話も出来て良かった。ループはリスト内包表記で、というのは確かにエキスパート python プログラミングに載ってた。けど、自分で書いたことほとんど無いですw 自分も最初は普通にループ文書いちゃうだろうなw
そして、Perl の人が Itelator 嫌うというところは自分もちょっと分からなかった。確かに Python なら Generator つかいますね。

@uzulla さんの発表は良かったなぁ。人見知り的にはぼっち回避策はあると嬉しいですね。まぁ、技術系だと、blog なり github にコード上げるなりしてれば、それなりに会話が保てるんだろうけども。
イベント補助サービスとして「何が重要なのか」というところを考えてて、きちんとまとめられてるなと思いました。これで自作したらしっかり Eat your own dogfood 出来るんじゃないかと。

なにげに @hondalica さんから、blog 読んでると言われたのは嬉しかった。やっぱり、こういう場に行くと、blog 書いてるのは大事だよなぁ、と思った。まぁ、普段あまり twitter はつぶやいてなかったりするからねぇ。そして、blog ももう少し、更新頻度あげないと……。

そして una 君との数年ぶりの再開が出来て良かった。よくよく考えたら、百草に住んでた頃が最後に会った時じゃないかしら？ YAPC の時に、twitter でぽつぽつつぶやいていたら、una 君から「hachioji.pm は来ないの？」的な事聞かれて、大分以外でしたw ものすごいところから繋がったなーとw

帰り道の電車で刺身さん、@ktat さんと Perl は NameSpace しっかりしてる / Ruby は独特な名前が多い / Python はとりあえず、Py* って prefix がついてるとか Web socket の話とか楽しかったです。

いろんな会話が出来て楽しかったです。（書ききれてなくてすいません）
また機会があれば参加させてもらいたいです。お疲れさまでしたー。

]]> [hachioji.pm][perl]

[pypi][python][texttable]text な table を作る

海賊たろ（小松大輔） — 2011-10-18T13:52:18+09:00

そのまま、texttable っていうのが PyPI にある。
pip install textable して、こんなコードを書くと


# -*- coding: utf-8 -*-
 
from texttable import Texttable
 
table = Texttable()
 
table.add_rows([
        ['id', 'name', 'content'],
        [1, 'aaaaa bbbbb', 'hoge'],
        [2, 'bbb cccc', 'fuga'],
        [3, 'dddd eeee', 'awawa'],
        ])
print table.draw()

こんな感じで出力できる。

 $ python text_table.py
 +----+-------------+---------+
 | id |    name     | content |
 +====+=============+=========+
 | 1  | aaaaa bbbbb | hoge    |
 +----+-------------+---------+
 | 2  | bbb cccc    | fuga    |
 +----+-------------+---------+
 | 3  | dddd eeee   | awawa   |
 +----+-------------+---------+

add_rows() はまとめて行を追加、1行ごとであれば add_row() ってメソッドもある。

set_cols_align() で、各 column の内容の右寄せ/左寄せ/センタリングしたり、
set_cols_valign() で縦方向の位置決め、set_deco() で罫線の style 変えたりできるっぽい。

textable documentation

]]> [pypi][python][texttable]

[python][virtualenv][virtualenvwrapper]virtualenvwrapper で virtualenv な仮想環境を切り替え

海賊たろ（小松大輔） — 2011-08-31T22:04:44+09:00

また、大分間が開いてしまった……。先日、PyConJP 2011 行ってきて、かなり楽しんできました。やっぱり、こう言うのに参加するとモチベーション上がりますね。

以下、Ubuntu 11.04 上での作業ログです。
まずは easy_install を入れる。(はなから pip があったかもしれない)

sudo apt-get install python-setuptools

virtualenv と virtualenvwrapper を入れる


sudo easy_install pip
sudo pip install virtualenv
sudo pip install virtualenvwrapper

.zshrc-after に以下を追記する。(自分の .zshrc が .zshrc-after を読む設定になってるだけなので、.bashrc や .zshrc などに追記すればいい。)


export WORKON_HOME=~/Envs
source /usr/local/bin/virtualenvwrapper.sh

んで、source .zshrc すると virtualenvwrapper が使う directory を作ってくれる。
これは virtualenvwrapper.sh が、起動時に毎回 directory があるかないかを調べてやってるみたい。


[vkgtaro@ubuntu] $ source .zshrc
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/initialize
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/premkvirtualenv
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/postmkvirtualenv
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/prermvirtualenv
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/postrmvirtualenv
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/predeactivate
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/postdeactivate
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/preactivate
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/postactivate
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/get_env_details

virtualenvwrapper の setup はここまで。
後は環境作ったりを virtualenvwrapper に付属のコマンドで行える。

mkvirtualenv で hoge1 という環境を作る


[vkgtaro@ubuntu] $ mkvirtualenv hoge1
New python executable in hoge1/bin/python
Installing setuptools............done.
Installing pip...............done.
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/hoge1/bin/predeactivate
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/hoge1/bin/postdeactivate
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/hoge1/bin/preactivate
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/hoge1/bin/postactivate
virtualenvwrapper.user_scripts creating /home/vkgtaro/Envs/hoge1/bin/get_env_details
(hoge1)[vkgtaro@ubuntu] $

今作った仮想環境から抜ける


(hoge1)[vkgtaro@ubuntu] $ deactivate
[vkgtaro@ubuntu] $

作成済みの環境を list する


[vkgtaro@ubuntu] $ lsvirtualenv
hoge1

作成済みの仮想環境に切り替え


[vkgtaro@ubuntu] $ workon hoge1
(hoge1)[vkgtaro@ubuntu] $

仮想環境に入った状態で pip とか使うと、その仮想環境に対してインストール出来る


(hoge1)[vkgtaro@ubuntu] $ pip install pyramid

hoge1 には pyramid が入ってる。


(hoge1)[vkgtaro@ubuntu] $ python
Python 2.7.1+ (r271:86832, Apr 11 2011, 18:05:24) 
[GCC 4.5.2] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> from pyramid.config import Configurator
>>>

deactive して、仮想環境から抜けてみると pyramid は使えなくなってる。


(hoge1)[vkgtaro@ubuntu] $ deactivate
[vkgtaro@ubuntu] $ python
Python 2.7.1+ (r271:86832, Apr 11 2011, 18:05:24) 
[GCC 4.5.2] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> from pyramid.config import Configurator
Traceback (most recent call last):
  File "", line 1, in 
ImportError: No module named pyramid.config
>>>

かなり楽ちん。しかし、virtualenvwrapper って名前はどうなんだろw

]]> [python][virtualenv][virtualenvwrapper]

[ez publish][perl]eZ Publish に大量の画像をアップロードする

海賊たろ（小松大輔） — 2011-05-01T08:57:16+09:00

ぽちぽちぽちぽち手でやるのはばかばかしいと言われたが、multi upload できる extension をわけあってセットアップ出来ない状況だったので script 書いた。アドホック対応おつ。
Devel::KYTProf いいね。

同じ階層の images ディレクトリ以下に置いた画像を特定の media resource にアップロードしまくる。

え？ゴールデンウィークってなにそれ？おいしいの？

]]> [ez publish][perl]

自宅サーバ落として節電した

海賊たろ（小松大輔） — 2011-03-22T20:25:53+09:00

自宅サーバで動かしてた tiarra を AWS の micro instance 借りてそっちで動かすようにした。節電！

]]>

[google][oauth]google.com で OAuth の Consumer Key と Consumer Secret を取得する

海賊たろ（小松大輔） — 2011-03-22T14:38:50+09:00

OAuth を使用するドメインを登録すると取得できる。
ドメインの登録は以下から。

https://www.google.com/accounts/ManageDomains

"Add a New Domain" セクションで登録したいドメインを追加し、"Manage registration" セクションに出てくるリンクをたどる。

すると、そのドメインの所有うしゃかどうかを確認するための方法がいくつかの選択肢が出てくるので、自分がやりやすい方法で確認する。（自分は txt レコードに追加する方法でやった。）

確認出来たら、そのドメインの管理画面がでるので、"Target URL path prefix" の項目を入力すると、OAuth Consumer Key と OAuth Consumer Secret が表示される。

]]> [google][oauth]

[citrus][ruby]ruby 1.8 の正規表現でバイト列じゃなくて文字列でマッチする

海賊たろ（小松大輔） — 2011-02-26T23:09:18+09:00

mobitaro のバックエンドに使い始めた Citrus で、IRC に貼られた URL にあるタイトルを表示する機能があるんですが、woremacx さんから、長いタイトルが変なところで区切られてるという指摘を受けて見てみた。

たとえばこんな感じ。

Ruby 1.9 で日本語(マルチバイト)の文字列を扱�... [text/html; charset=euc-jp]

結論から言うと plugins/http/default.rb の 89 行目、正規表現で60文字までマッチさせて ... をくっつけてるところを u フラグ立てるようにしたら解決。


                if title.size > 70
                        title = title[/.{0,60}/u] + "..."
                end

ruby 1.8系の正規表現は $KCODE の値に従うか、オプションをつけることで文字コードを指定できるみたい。

リテラル/正規表現リテラル

Ruby は日本語化されているので、$KCODE の値に従って正規表現中の日本語文字を正しく扱います。$KCODE = "n" の場合、日本語文字を一切認識せずにバイト列として扱います。これはデフォルトの動作です。
オプションとして n, e, s, u のいずれかを指定することで正規表現の文字コードを $KCODE の値に関係なく個々の正規表現リテラルに指定することもできます。

あと、この問題を追及してるときに、String オブジェクトに to_u8 ってメソッドが生えててなにこれ、と思ったら、lib/citrus/utils.rb にあると、woremacx さんに教えてもらった。オープンクラスで再定義、なるほどー。

]]> [citrus][ruby]

[python]doctest でテストを書く

海賊たろ（小松大輔） — 2011-02-21T02:12:57+09:00

README.txt に reST でパッケージの概要を書く


=================
atomisator.parser
=================
 
parser が提供する最上位関数 'parse' を使い、フィードからコンテンツを取得します。
 
    >>> import os
    >>> from atomisator.parser import parse
 
この館数は、フィード URL を引数に取り、取得したコンテンツをイテレータとして返します。
2つめのパラメータには取得する最大エントリ数を指定できます。
最大エントリ数を指定しなかった場合、最大10件まで取得します::
 
    >>> res = parse(os.path.join(os.path.dirname(__file__), 'sample.xml'))
    >>> res #doctest: +ELLIPSIS
    
 
イテレータの各要素はエントリの情報を含む辞書型の値となります。::
 
    >>> entry = res.next()
    >>> entry['title']
    u'CSSEdit 2.0 Released'
 
辞書には以下のキーが格納されています::
 
    >>> keys = sorted(entry.keys())
    >>> list(keys)
    ['id', 'link', 'links', 'summary', 'summary_detail', 'tags', 'title', 'title_detail']

このまま ~/Desktop/my_env/bin/nosetests --with-doctest --doctest-extension=.txt とかするとテストがこける。--with-doctest は、doctest も行う指定、--doctest-extension=.txt は、doctest のファイルの拡張子の指定。んで、__init__.py にこのテストが通るようにコードを書く


from feedparser import parse as feedparse
from itertools import islice
from itertools import imap
 
def _filter_entry(entry):
    """Filters entry field."""
    entry['links'] = [link['href'] for link in entry['links'] ]
    return entry
 
def parse(url, size=10):
    """Returns entries of the feed."""
    result = feedparse(url)
    return islice(imap(_filter_entry, result['entries']), size)

すると、テストが通る。

$ ~/Desktop/my_env/bin/nosetests --with-doctest --doctest-extension=.txt . ---------------------------------------------------------------------- Ran 1 test in 0.451s

reST で概要書いたらそれがそのままテストになるのは面白いなー。
nose は unittest の機能を提供しているパッケージらしい。エキスパート Python プログラミング、6章読んだら、11章読もうかなぁ。

エキスパートPythonプログラミング

posted with amazlet at 11.02.20

Tarek Ziade
アスキー・メディアワークス
売り上げランキング: 9716

Amazon.co.jp で詳細を見る

]]> [python]

[python]setup.py に書いた依存関係を PyPI からインストールする

海賊たろ（小松大輔） — 2011-02-20T23:38:10+09:00

paster コマンドで、新規にプロジェクトを作成する。エキスパート Python プログラミングに習うと、さっきの virtualenv で作った環境に packages というディレクトリを作って、その中で新しく作るのがいいみたい。

$ mkdir packages
$ cd packages
$ paster create -t pbp_package atomisator.parser
/usr/local/bin/paster:5: UserWarning: Module zope was already imported from None, but /System/Library/Frameworks/Python.framework/Versions/2.6/Extras/lib/python is being added to sys.path
  from pkg_resources import load_entry_point
Selected and implied templates:
  pbp.skels#pbp_package  A namespaced package
 
Variables:
  egg:      atomisator.parser
  package:  atomisatorparser
  project:  atomisator.parser
Enter namespace_package (Namespace package (like pbp)) ['pbp']: atomisator
Enter package (The package contained namespace package (like example)) ['example']: parser
Enter version (Version) ['0.1.0']: 
Enter description (One-line description of the package) ['']: 
Enter long_description (Multi-line description (in reST)) ['']: 
Enter author (Author name) ['']: 
Enter author_email (Author email) ['']: 
Enter keywords (Space-separated keywords/tags) ['']: 
Enter url (URL of homepage) ['']: 
Enter license_name (License name) ['GPL']: 
Enter zip_safe (True/False: if the package can be distributed as a .zip file) [False]: 
Creating template pbp_package
Creating directory ./atomisator.parser
  Recursing into +namespace_package+
    Creating ./atomisator.parser/atomisator/
    Recursing into +package+
      Creating ./atomisator.parser/atomisator/parser/
      Copying README.txt to ./atomisator.parser/atomisator/parser/README.txt
      Copying __init__.py_tmpl to ./atomisator.parser/atomisator/parser/__init__.py
    Copying __init__.py_tmpl to ./atomisator.parser/atomisator/__init__.py
  Copying setup.py_tmpl to ./atomisator.parser/setup.py
Running /usr/bin/python setup.py egg_info
$  cd atomisator.parser

paster で使っている pbp_package は、PyPI に pbp.skels と言うパッケージ名でアップロードされてるので、pip install pbp.skels した。

んで、atomisator.parser にできた setup.py の install_requires に依存している PyPI パッケージを書く。


      install_requires=[
          'setuptools',
          'feedparser', # <= 追加した
          # -*- Extra requirements: -*-
      ],

その後、python setup.py develop を実行すると、feedparser が install される。
このとき使う python は virtualenv で用意した python の方。エキスパート python だと、/usr/bin/atomisator-python に symlink 張って、atomisator-python を実行してる。

エキスパートPythonプログラミング

posted with amazlet at 11.02.20

Tarek Ziade
アスキー・メディアワークス
売り上げランキング: 9716

Amazon.co.jp で詳細を見る

]]> [python]

[python]virtualenv でまっさらな python 環境を作る

海賊たろ（小松大輔） — 2011-02-20T23:05:40+09:00

システムの pyhton を使用せずに、開発のためのまっさらな python 環境を作成します。

$ cd my_env
$ virtualenv --no-site-packages . 
New python executable in ./bin/python
Installing setuptools............done.
$ ls -lha bin
total 176
drwxr-xr-x  12 vkgtaro  staff   408B  2 20 23:04 .
drwxr-xr-x   6 vkgtaro  staff   204B  2 20 23:04 ..
-rw-r--r--   1 vkgtaro  staff   2.1K  2 20 23:04 activate
-rw-r--r--   1 vkgtaro  staff   1.0K  2 20 23:04 activate.csh
-rw-r--r--   1 vkgtaro  staff   2.8K  2 20 23:04 activate.fish
-rw-r--r--   1 vkgtaro  staff   1.0K  2 20 23:04 activate_this.py
-rwxr-xr-x   1 vkgtaro  staff   308B  2 20 23:04 easy_install
-rwxr-xr-x   1 vkgtaro  staff   316B  2 20 23:04 easy_install-2.6
-rwxr-xr-x   1 vkgtaro  staff   266B  2 20 23:04 pip
-rwxr-xr-x   1 vkgtaro  staff   274B  2 20 23:04 pip-2.6
-rwxr-xr-x   1 vkgtaro  staff    50K  2 20 23:04 python
lrwxr-xr-x   1 vkgtaro  staff     6B  2 20 23:04 python2.6 -> python

こうすると、 my_env 以下に独立したインタプリタ環境ができる。--no-site-packages オプションを使うと、すでに easy_install などでインストールされたものは除外して構築される。
virtualenv した後は easy_install などを使用しても、このディレクトリ以下にインストールされるようになる。

エキスパート Python ではこの後、nose インストールしたりして、/usr/bin 以下に symlink はったりするんだけど、環境変数変えた方がいい気がするけどどうなんだろう。

エキスパートPythonプログラミング

posted with amazlet at 11.02.20

Tarek Ziade
アスキー・メディアワークス
売り上げランキング: 9716

Amazon.co.jp で詳細を見る

]]> [python]

[irc][ruby]Citrus で twitter の URL が貼られたときに tweet の内容を表示する plugin

海賊たろ（小松大輔） — 2011-02-20T02:32:55+09:00

irc.lazy-people.org とかに居る mobitaro のバックエンドは chokan だったんですが、twitter の url が貼られたときに、中身を表示してくれという feedback があって、せっかくだからと Citrus に移行した。

だいぶ if 文まみれだけど、とりあえずは動くということで。

]]> [irc][ruby]

[facebook]like ボタンが効かなくなってた

海賊たろ（小松大輔） — 2011-02-18T02:20:00+09:00

今日というか日が変わったので昨日ですが、人から指摘されてこの blog に設置していた facebook の like ボタンが動いていない事を発見した >_<

like button を押したときに Error と赤字でリンクがあり、クリックしてみると以下のメッセージが。

You failed to provide a valid list of administators. You need to supply the administors using either a "fb:app_id" meta tag, or using a "fb:admins" meta tag to specify a comma-delimited list of Facebook users.

OGP に対応しようとして meta 要素追加したからか？
と思い、fb:admins を head 要素内に追加してみた。

結果は、ダメでした。

あれこれやって、探してみて以下の forum にたどり着く。

Facebook Platform Developer Forum / Issue w/ Open Graph + Like Button + fb:app_id

Insights のページで、"Insights for your Domain" をクリックして、おまえさんのドメインを入れてみろと言うことでやってみたら、ふたたび、like ボタンが動くようになった！

ここまでやると、app_id 取ってまとめる用のアプリ作っておいた方がいいかもなぁ。

]]> [facebook]