== SANDmark 19106 beginning stress test ==

[Rails3] whenever

2011-02-27T18:19:00.000+09:00

【whenever】はRubyとCronの橋渡しをしてくれるようなgemで、DSLで処理を記述しておくだけで crontab に書き込んでくれるという嬉しい代物です。bash経由で実行するようです。

Railsでももちろん使えて、rakeやrunnerなどを実行できますが、runnerの場合、うちの環境では bash のオプションに -l (--login) がついているとうまく動作しませんでした。

ので、手動で crontab -e して -l を削除しましたとさ、という報告でした。

Ruby on Rails と Thread

2011-02-26T20:16:00.001+09:00

Rails2.2 の頃からスレッドセーフだとか何とか騒がれていましたがボクは知りません。知らないので、ネイティブスレッドではないRubyの Thread クラスを Rails で使っちゃおうという計画。delayed_jobではちょっと力不足だったのです。

やりたいことはただひとつ。

サーバで起こっている作業の途中経過をAjaxで取得したい。

コレ。簡単そうに思えましたが、ところがどっこい苦労しまくって体調崩すほどでした。誰か他にいい方法があったら教えてください。

つまりですよ。

クライアントがファイルをアップロードする。
サーバはレスポンスを返す。
と同時に、サーバは新しく Thread.new して非同期に処理を開始し、処理をしながら進捗情報をどこかに保存しておく。
クライアントは setInterval とかでサーバにリクエストを送信する。
サーバは保存されている進捗情報を返す。

こんなことがしたかったんですね。

超問題になったのが「進捗情報の保存場所」。ぶっちゃけると session は使えませんでした。値が保持されるかと思ったら、スレッドの外と内でスコープが異なるようです。つまり 5 の時点で謎の値が返るわけです。

次に考えたのが app/models/ に新しくクラスを作成して、クラス変数に保持しておく、ということ。でもこれも駄目でした。development環境ではリクエストのたびにクラスがロードされるらしいので、予測不可能な段階でクラス変数が吹っ飛びます→NameError。production環境では動くかも知れないけど、さすがにそんな危ない橋は渡れません。

で、さんざん悩んだ結果、 lib/thread_manager.rb を作る、ということでした。

class ThreadManager
  @@progress
  def self.progress
   @@progress
  end
  def self.progress= value
   @@progress = value
  end
end

クラス変数に対するアクセサメソッドはマクロで定義できないようです。そんなに使う機会が無いとはいえ、あればもうちょっとスマートにできましたかね。

ともあれ、これで何とか凌げそうです。苦労はしましたが、得るものも大きかった…とは言い辛いぞ！正直Scala+Liftに乗り換えたいぞ！でもそれって、「隣の芝は…」ってやつですかね…。

ActionDispatch::Session::CookieStore RuntimeError

2011-02-24T17:16:00.000+09:00

になって困ってたんですよね。

【前回の記事】で「Flashからのセッション情報を gem で解決する」と記述しましたが、どうもこれがうまく動かないときがあるので、やっぱりRackミドルウェアとして実装することにしたのです。

まずは app/middleware/flash_session_cookie_middleware.rb:

require 'rack/utils'

class FlashSessionCookieMiddleware
  def initialize app, session_key="_session_id"
   @app = app
   @session_key = session_key
  end

  def call(env)
   if env["HTTP_USER_AGENT"] =~ /^(Adobe|Shockwave) Flash/
   req = Rack::Request.new(env)
   env["HTTP_COOKIE"] = [@session_key, req.params[@session_key]].
   join("=").freeze unless req.params[@session_key].nil?
   env["HTTP_ACCEPT"] = "#{req.params['_http_accept']}".
   freeze unless req.params['_http_accept'].nil?
   end

   @app.call(env)
  end
end

次は config/application.rb:

# Custom directories with classes and modules you want to be autoloadable.

config.autoload_paths += %W(#{config.root}/app/middleware)

最後に config/initializers/session_store.rb:

MyApplication::Application.config.session_store :active_record_store, :key => '_MyApplication_session'

Rails.application.config.middleware.insert_before(
  ActionDispatch::Session::CookieStore,
  FlashSessionCookieMiddleware,
  Rails.application.config.session_options[:key]
)

としたんですが、どうも「ActionDispatch::Session::CookieStoreなんてミドルウェアは知らないよ」と、タイトルにもあるとおりRuntimeErrorを吐かれてサーバが起動できない。散々調べた結果、収穫はゼロ。このエラーに悩まされているのは世界中でボク一人だったようで、なんとも。

で、試しに :active_record_store から :cookie_store に戻してみたんですよね。

MyApplication::Application.config.session_store :cookie_store, :key => '_MyApplication_session'

Rails.application.config.middleware.insert_before(

ActionDispatch::Session::CookieStore,

FlashSessionCookieMiddleware,

Rails.application.config.session_options[:key]

)

動きました。どうやらこいつが原因だったみたいですが…それでも :active_record_store で Uploadify なんかを使っている人は多いと思うんですよね。

新しくアプリケーションを作成したときにこのエラーが発現するのかどうかが気になるところですが、もうなんか疲れたのでこれまで、ということで。気が向いたら RailsTalk に投稿するかも知れませぬ。

Rails3とUploadify

2011-02-23T19:16:00.002+09:00

「Railsでアップロードの進捗を表示させたいなぁ…」と思っていたところ、【Uploadify】というものが見付かりました。Flashこそ使えどjQueryのプラグインなので導入も簡単です。と思いきや手間取りまくったのでメモメモ（本当は jQuery-ui のプログレスバーを使うものがあったらいいなと思ったのだけれど、実装する勇気も知識もない）。

まず知らなかったのは、Flash経由でリクエストするとセッション情報が送られない、という事実。常識なのかも知れないけどFlashから遠い位置にいたんだから仕方ないよねっ！

で、作成しているアプリケーションは「ログインしてからでないとファイルをアップロードしちゃだめ」なので、当然セッション情報は無視できないのです。半日Google先生と相談してわかったのは、【flash_cookie_session】という、読んで字のごとくFlashからCookieとかセッション情報を送ってくれる gem があることでした。結論から言うと試したら動いたので、今回はこれを使って Uploadify を設置していきます。

Flashからのセッション情報送信をRackレベルで動作するミドルウェアとして手作業で実装するのが（検索した結果）メジャーのようでしたが、アプリケーションごとに書くのも「わざわざだなぁ」と思ったので、っていうかやってみたんだけど動かなかったので、今回は gem で解決です。

まずは Uploadify をダウンロード。バージョンは v2.1.4 です。zipファイルを展開すると:

com/

cancel.png

check.php

expressInstall.swf

jquery-1.4.2.min.js

jquery.uploadify.v2.1.4.js

jquery.uploadify.v2.1.4.min.js

swfobject.js

uploadify.allglyphs.swf

uploadify.css

uploadify.fla

uploadify.php

uploadify.swf

こんな感じのものが出てきました。

手軽に設置できるようにという配慮なのか、 uploadify.php なんかも含めて適当にWebサーバに置いておくと即座に使えるようになっているみたいです。が、今回は Rails なので、必要最低限のものだけ然るべき場所に配置します。

必要なものは cancel.png, jquery.uploadify.v2.1.4.min.js, swfobject.js, uploadify.css, uploadify.swf の5つ。他（特に com/ 以下）は何のためにあるのかわかりませんでした。swf を改造したい人のため？

cancel.png は public/images/ へ、各種 JavaScript は public/javascripts/ へ、uploadify.css は public/stylesheets/ へ、uploadify.swf は public/ へそれぞれ配置。って当たり前ですよねごめんなさい。

それから app/views/layouts/application.html.erb にでも JavaScript と CSS を読み込むように指示しまして、次に Gemfile に

gem "flash_cookie_session"

と書いて

$ bundle

もしくは

$ sudo gem install flash_cookie_session

とします。

次は実際の html です。

<%= form_tag({:action => :upload}, {:multipart => true}) do %>
  <%= file_field_tag :file, :id => :file %>
<% end %>
<div id="fileQueue"></div>

<script type="text/javascript">
  <% key = Rails.application.config.session_options[:key] -%>
  $(function() {
   $("#file").uploadify({
   uploader: "/uploadify.swf",
   script: "#{url_for upload}",
   cancelImg: "/images/cancel.png",
   folder: "/tmp",
   auto: true,
   scriptData:{
   ~~"<%= request_forgery_protection_token -%>": "<%= form_authenticity_token -%>",~~
   "<%= request_forgery_protection_token -%>": encodeURIComponent("<%= u form_authenticity_token -%>"),
   "<%= key -%>": "<%= cookies[key] -%>"
   }
   });
  });
</script>

2011/02/26追記:
encodeURIComponentを呼び出さないとcsrf_tokenがうまく届かないことが判明しました。

:multipart => true が必要なのかどうかは知りませぬ。そもそも form_tag で囲む必要さえあるのかどうか…。でも個人的に他のオプションをくっつけたいので、ご都合主義的にとりあえずこのまま。

$("#file").uploadify(); の時点でフォームがFlashのボタンに置き換えられます。<div>タグは見た目空っぽですが、ファイルのアップロードを開始した時点で進捗バーに切り替わります。多分。

uploadify関数に渡す引数についてはドキュメントを参照してもらうとして、重要なのは scriptData 以下です。request_forgery_protection_token は "authenticity_token" に置き換わって、form_authenticity_token は csrf_meta_tag で生成されたトークンに置き換わります。これが無いと、前回の記事でも述べたようにセッションが空になるので注意のこと。

key には Rails.application.config.session_options[:key] が入ってます。これはアプリケーションが使うセッションのキー、が格納されている Cookie のキー、です。多分。わかりづらいのはボクも理解してないからです。これは Rails3 以降でのみ有効なので、 Rails2 系のキーの取り出し方については他の人の記事を参照してくだし。

で、これを {Cookie のキー:セッションのキー} という形で（幾分ややこしく）送るわけですが、 authenticity_token と違って、こちらは ActionDispatch が透過的に処理してくれるわけではありません。「Flash経由だから」という理由しかボクにはわかりません。

そこで冒頭で述べたように、 ActionDispatch::Session::CookieStore が呼び出される前に、自分で作成した Rack レベルのミドルウェアを呼び出すようにするのが一般的のようですが、今回は【flash_cookie_session】という gem を使っているのでその必要はありません。Gemfile にロードするよう指示しておけば透過的に作用してくれるみたいです。

…ってあれ、解説終わっちゃった。

えーと、あとはサーバを再起動するなり何なりして動作を確かめてください。以上！

と思ったらうまく動かなかったので
2011/02/24 追記→http://ruler-sandmark.blogspot.com/2011/02/actiondispatchsessioncookiestore.html

Rails 3.0.4 と csrf

2011-02-20T12:15:00.000+09:00

Rails がセキュリティアップデートされてました。最新版は 3.0.4 です。詳しいことは「こちら」へ。

元記事にもある通り CSRF や SQL Injection など非常にヤバい単語が並べられているので則アップデートしたものの、Ajax系の動作がうまく動かなくなり（link_to :remote でGET以外のリクエストをAjax経由で送るとセッションがクリアされてしまう）、頭を抱えていたところ、はたと rails.js に原因があるのではないかと思い立って jquery-rails をアップデートしてみたところ、ビンゴだったので詳細を記録。

ちなみに CSRF はクロスサイトリクエストフォージェリ（Cross site request forgeries）の略記で、外部からの意図しないリクエストによってWebサービスの動作を改竄する攻撃手段のひとつ。らしいです、Wikipediaによると。

SQL Injection は、フォームの内容に SQL 文を埋め込むことでサーバのデータを改竄する、これも攻撃手段のひとつですね。

Railsでは app/views/layouts/application.html.erb の <head> タグ内に <%= csrf_meta_tag -%> を埋め込むことでワンタイムトークンを生成し、フォームの送信時に透過的にこれを hidden パラメータとして送信することで外部からの無作為なデータの送信を防ぐ（ことを自動的にやってくれる）わけで、トークンが合致しない場合は InvalidAuthenticityToken 例外が投げられていたのですが、今回は Java や Flash などのリクエストで同じことをやろうとしたときに、なぜだか忘れましたがとにかく例外を投げるだけではよくないらしいです。ので、セッションをクリアすることにしたんだそうで。

SQL Injection については、ActiveRecord の limit に脆弱性があったらしいです。「limitなんて数字だけじゃん」とついつい思ってしまいますが、攻撃する側も防御する側もよく気付くなぁ…と感心してしまいます。そんな悠長な事態じゃないんですけど。

で、肝心の対策。

ボクは jquery-rails を使っているので、

$ sudo gem update jquery-rails
$ rails generate jquery:install

こうして jquery.js, jquery.min.js, rails.js を上書きして事無きを得ました。 rails.js だけでいいのかなと思ったけれど、それでまた動かなかったら嫌なので jquery ライブラリも上書きしてしまいますた。多分バージョンが違うだけだと思うけど（「だけ」ってレベルじゃねーですけど）、jQueryで本格的に開発してる人にはオススメしません。あでも、jsUnitとか使ってるのかしら。いいのかしら。

そんなわけでした。

--

[Rails3] [will_paginate] Array インスタンスを WillPaginate::Collection に変換

2011-02-14T04:06:00.000+09:00

SomeKindOfActiveRecordModel.paginate からではなくて、何らかの読み出しで Array オブジェクトになってしまった SomeKindOfActiveRecordModel を動的に WillPaginate::Collection 型（ActiveRecord::Base.paginateで返ってくるやつ）に変換するには、Array#paginateを単に呼び出してやればいいらしい。

ちゃんとスーパークラスをRailsプラグインらしくバリバリ拡張してくれているのは大助かりですね。
--

デザイン変えてみたのだよ

2011-02-13T19:51:00.001+09:00

もう随分長いこと更新してなかったので、ということが理由になるのかどうかは知らんけど、ブログのデザインを変更してみた。

CSS3も本腰入れて勉強してるけど、結局（正式にサポートすると発表された）IE9が出るまでは冒険的に実装する気にはなれないんだな。そんな言い訳をしつつBloggerのテンプレートはAwesomeより拝借。

自作曲の設置がHTML5だけで出来たら楽しいっていうか楽そうだなー。

最近はコーディングが楽しいけれど、コーディング === 言葉を書き下すことだと本気で考えている文系脳なので、そっちが忙しいときはどうしてもこっちの更新をしなくなってしまうのではないかという考察。あと、はてなに移行したい。かも。

ただ、そういったスピンサイクルに慣れてきたので今後は読書録でもしていこうかな、と。

自分で翻訳した本を完全に理解してないのはおかしい。絶対におかしい。

--

本日の将棋Part2・BonanzaGAKOI！

2011-01-18T20:37:00.000+09:00

Bonanzaってやたら大駒切るよね。あの棋風はほんと独特だと思う。

やぽー。今回は二本だて。「U549」新メンバーのふゆさんとの対局になりました。徐々に体を慣らしていきたい…。

この棋譜へのコメントは「こちら」までどうぞ。

押してねっ→BlogPeople「趣味の世界」ブログランキング

本日の将棋・悪役

2011-01-18T20:33:00.000+09:00

ごめんなさい！

と、わかる人にだけわかる「ごめんなさい」を書いておいてやっふー。そんなに久方ぶりでもない将棋の時間だよ。

一人暮らしも順調に面倒くさくなってきて、洗い物？なにそれおいしいの状態。おいしくないよネー。食べたら致死だよネー。

将棋そのものは久しぶりではないとはいえ、所属しているサークル「U549」のメンバーとはものすごい久しぶりの対局になりました。コトの顛末は以下からどうぞ…。

この棋譜へのコメントは「こちら」までどうぞ。

押してねっ→BlogPeople「趣味の世界」ブログランキング

meta_where を使った検索

2011-01-16T15:45:00.001+09:00

検索というかなんというか。

u1 = User.new :name => "user1"
u1.comments << Comment.create :message => "hoge hoge"
u1.comments << Comment.create :message => "hoge moge"
u1.save

u2 = User.new :name => "user2"
u2.comments << Comment.create :message => "hoge fuga"
u2.save

u3 = User.create :name => "user3"

こんな感じのデータがあったとして、

User.search("user") # => [u1, u2, u3]
User.search("hoge") # => [u1, u2]

というような結果を求めるとき、 User.search の実装は以下のようになる。

scope :search, lambda {|query|
includes(:comments).group("users.id").where(:name.like => "%#{query}%" | :comments => {:message.like => "%#{query}%"})
}

Comment に複数の属性があるときは :comments => [{:message.like => "%#{query}%"} | {:updated_at.lt => Date.today}] のように渡せばいい。ゴチャゴチャするけど。

ちなみに includes ではなく joins を使うと、検索結果にコメントの設定されていない u3 がヒットせず、 group を付けないと、 "hoge" の検索結果が [u1, u1, u2] になってしまうので、 users.id でグループ化する必要がある。らしい。

押してねっ→BlogPeople「趣味の世界」ブログランキング

本日の将棋・ひさびさに

2011-01-16T15:06:00.000+09:00

「相振り中飛車で攻め潰す本」買ったんですけど、全然読めてないです。

棋譜こめったーも中途半端な出来栄えのような、サーバが不安定というか、落ち着いたら誰でも使えるようにしていきたいですねぇ。

この棋譜へのコメントは「こちら」までどうぞ。

[Rails3] meta_whereのコンディションとdelayed_jobのハマりどころ

2011-01-12T17:41:00.000+09:00

都合上「何にでもヒットする meta_where のコンディション」が必要になったので、作りかた。

MetaWhere::Condition.new :id, nil, :like

これでおｋ。

catch_all = MetaWhere::Condition.new :id, nil, :like
Books.where(catch_all | :title.matches % "相振り中飛車で攻")

こんな感じで使える。場合によっては便利…？

それからdelayed_job、これはいろいろと fork されているみたいだけど、今回は有名な https://github.com/collectiveidea/delayed_job こちらを採用させてもらいました。

Mail.delay.deliver

とメソッドチェインするだけで遅延してくれるという優れ物ですが、実用までのメモと自分用のメモ。

$ vi Gemfile
gem "delayed_job"

$ vi config/initializers/delayed_job_config.rb

Delayed::Worker.destroy_failed_jobs = false

$ bundle
$ rails generate delayed_job
$ rake db:migrate
$ ./script/delayed_job start

これで使えるようになる。なお production 環境で使う場合は

$ rake db:migrate RAILS_ENV=production
$ RAILS_ENV=production ./script/delayed_job start

こんな感じ。

で、ハマりどころは、

コントローラやProcインスタンスに対しては使えない。適宜 SomethingHelper::should_be_delayed などを定義して使う。
delay を呼び出すコードの周り（どの辺までなのかは知らん）が変わったら delayed_job デーモンを再起動すること。

このふたつ。見事にハマりました。

ま、リソースが足りなきゃいくら遅延しても意味ないけどね。

お名前.comのサーバがまた落ちている…。

押してねっ→BlogPeople「趣味の世界」ブログランキング

[Rails3] ActiveRelation

2011-01-12T00:12:00.000+09:00

やたら忘れるのでメモ。

RailsCastsの http://media.railscasts.com/videos/239_active_record_relation_walkthrough.mov この動画がとても参考になった。それにしてもRails使いはMacの人が多いなー。やっぱり故郷がMacだと必然的にそうなるのかしら。

えーそれで、リレーションを作成するには

ActiveRecord::Relation.new User, User.arel_table

とかするみたい。引数はモデルと Arel テーブル。この Arel テーブルには事前に定義した条件があってもいいような悪いような。

で、メソッドチェインできるのは

where
having
select
group
order
limit
offset
joins
includes
lock
readonly
from

の12個。

チェインを繋げるとデフォルトで（というか普通に） AND になるようだけど、 OR にする方法ないのかな…。Arel使えってことか。

押してねっ→BlogPeople「趣味の世界」ブログランキング

[Rails3] link_to do

2011-01-11T15:00:00.000+09:00

link_to にブロックが渡せるなんてどこに書いてあったんだ…知らなかった。

例えば Rails で

   画像
リンク文字列

のようなレイアウトにしたい場合にブロックが使える。例えばHaml:

= link_to @user do
  = image_tag "#{@user.name}.png"
  %br
  = @user.name

マクロとレキシカルスコープがあればRuby最強なのになと思う信者でした。

押してねっ→BlogPeople「趣味の世界」ブログランキング

[Rails3] prototype_legacy_helper

2011-01-11T14:30:00.000+09:00

Rails3になってUJS(UnobtrusiveJavaScript)が推奨されるようになり、 rails.js がコアとして動作するようになったのは時代に乗ってる感じでいいのだけれど、いかんせんドキュメントもサンプルも少ないのが現状なので、以前のヘルパも使いたくなってくるのが人情というもの。

例えば「link_toヘルパに :remote をつけて特定のtext_fieldの内容を送信」という動作をさせるにはどうすればいいのか、いくら検索してもさっぱりわからなかった。Creative Commonsにオライリーから出ているRails3本の中身が載っているらしいけれど、やっぱり英語…ということで腰が引けてしまう。

そこで、過去の遺産を使うには prototype_legacy_helper が便利らしい。

$ rails plugin install https://github.com/rails/prototype_legacy_helper

これで link_to_remote などといった旧来のヘルパを扱うことができるようになる。上記「特定の text_field の中身を送信」は link_to_remote の :with オプションでばっちり。

...
<%= text_field_tag :address_zipcode %>
<%= link_to_remote "AutoComplete", :url => find_zipcode_path, :with => "'zipcode='+$('address_zipcode').value" %>
...

:with オプションについてはネットにいろいろと情報があるけど、個人的に今回初めて使ったので解説を載っけておく。

ようするに "" で括られたJavaScriptらしい。で、JavaScriptの文字列でなければならず、 :with => "'key1=value1&key2=value2'" と指定すると、 params[:key1] == value1 などになる。 & で区切ってハッシュにしてくれるので、いちいちデータをシリアライズしなくてもいいみたい。

DOMオブジェクトを選択して中身を取り出すのはお馴染 $ 関数に value メソッドだけど、あくまで「JavaScriptの文字列」として渡す = '' で括る必要があるので、少し面倒くさい。そのサンプルは上のコードにある通りで、 "'zipcode='+..." とクォーテーションがいかにも読み辛いけど、Emacsの正規表現に比べたらマシと思えばマシ…かも知れない。

押してねっ→BlogPeople「趣味の世界」ブログランキング

Rails3 で大量の一括Insert

2011-01-10T21:04:00.000+09:00

ができるらしい。

https://github.com/zdennis/activerecord-import

プラグインではないようなので v0.2.4 をダウンロードしてコピー。Wikiに載っているような使い方もできるけれど、個人的には

columns = [:first_name, :family_name]
values = [["John", "Smith"], ["Jane", "Due"], ["Gonbe", "Nanashi"]]
Person.import columns, values

のような使い方のほうがメモリ効率がよさげかなと。

押してねっ→BlogPeople「趣味の世界」ブログランキング

[Ruby][Rails] CamelCase と snake_case

2011-01-10T14:13:00.000+09:00

結構どこを探してもなかったんよね。
ヘルパーのAPIドキュメントにも無かったっぽいし。

つまりリフレクションしたいときとかにクラス名（CamelCase）をメソッド名（snake_case）に変換して __send__ したい場合があるじゃないのよさ。そんなときに一発変換できないかなと思って探してみたら、こんなメソッドが出てきました。

"CamelCase".underscore # -> "camel_case"
"snake_case".camelize # -> "SnakeCase"
"snake_case".pluralize # -> "snake_cases"
"snake_cases".singularlize # -> "snake_case"
"snake_cases".classify # = "snake_cases".singularlize.camelize

classify メソッドなんてものもあった。で、こういうことがわかると検索したときに「あ、こんなに情報あるんじゃん」という事態になってしまう何かの法則。

あると便利だと思うので、Rails3からバラして使うのも良しですね。

押してねっ→BlogPeople「趣味の世界」ブログランキング

Ubuntuで動画を携帯向けにエンコードする

2011-01-04T15:43:00.000+09:00

まず、Ubuntuに入っているffmpegのバージョンは古い、というより本家ffmpegが1日に1コミット以上という凄まじい早さで開発が進んでいるので、とりあえずSVNリポジトリからチェックアウトして、コーデックもろもろもインストールし、ffmpegのビルド＆インストールも済んでいるものとします。

参考URLはこちら: http://ubuntu.futene.net/

変換は make で行おうと思ったのですが、ファイル名にスペースがあると面倒なことになりそうなので、Rakeを使うことにしました。といっても、ルールの定義をするだけな上に基本的なことも理解していないので、特に clean タスクの定義はぞんざいです。まぁ自分用なので、気に入らない方はスルーでおｋ。

さて、ffmpegへ渡すコマンドラインですが、ffmpegの取る引数はもう現代の魔法ですね。ボクも意味はほとんどわかりませんが、ネットの海から持ってきた情報をかき集めただけのものです。こんな感じ。

$ ffmpeg -i infile.avi -qmin 1 -qmax 51 -pix_fmt yuv420p -vcodec libx264 -coder 0 -vpre medium -bufsize 1000 -g 60 -vlevel 12 -qns -qpel -mbd 2 -s 320x240 -r 29.97 -b 512k -maxrate 5000 -acodec libfaac -ac 2 -ar 44100 -ab 96k -f 3g2 outfile.3g2

コーデックには一応フリーのものを使っています。で、これを2パスエンコードしようということで、Rakefileの登場なわけですね。

SRC = FileList["*mp4"]
DST = SRC.ext("3g2")
INSTALL_DIR = "/media/********************/Video/"

FFMPEG = "ffmpeg"
UNRECOGNIZED_OPTIONS = "-hq -bitexact -vprofile baseline -4mv -trell -aic -me full -fixaspect -muxvb 192 -muxab 64"
OPTIONS = "-qmin 1 -qmax 51 -pix_fmt yuv420p -vcodec libx264 -coder 0 -vpre medium -bufsize 1000 -g 60 -vlevel 12 -qns -qpel -mbd 2 -s 320x240 -r 29.97 -b 512k -maxrate 5000 -acodec libfaac -ac 2 -ar 44100 -ab 96k -f 3g2 -threads 8 -y"

task :default => DST

task :clean do
  DST.each do |file|
   if File.exists? file
   sh "rm '#{file}'"
   end
  end
  sh "rm -f *log"
  sh "rm -f *mbtree"
end

task :install => :default do
  raise RuntimeError, "マウントされてませんよ" if not File.exists? INSTALL_DIR
  DST.each{ |file| sh "cp '#{file}' #{INSTALL_DIR}" }
end

rule ".3g2" => ".mp4" do |t|
  sh "#{FFMPEG} -i '#{t.source}' -pass 1 #{OPTIONS} '#{t.name}'"
  sh "#{FFMPEG} -i '#{t.source}' -pass 2 #{OPTIONS} '#{t.name}'"
end

ほんとシンプルですが、 rake install とすると特定のディレクトリへコピーするようにしました。携帯への転送がWindowsじゃないと行えないので、NTFSパーティションに書き込むための措置です。それが見えなかったら RuntimeError 投げます。

というわけで自分用でした。

※転送しても見れなかったらごめんなさい。

押してねっ→BlogPeople「趣味の世界」ブログランキング

Windowsで再生できるのにUbuntuで再生できないDVD

2011-01-02T18:13:00.000+09:00

知り合いの家に「ニャーン」じゃなくて「ニャァア（↑）〜（↓）ン」となく不思議な猫ちゃんがいるんだけど、しかも2匹いるんだけど、なんであんな色っぽいというか、（いや色っぽくはないな、雄だし）変な、というか、ツッコミたくなる鳴き声になっちゃったのでしょうね。甘え上手…？ 違うと思う！

あいむふぁいんあんじゅー？今日はDVD関連のお話ですよ。

レンタル屋さんで「おおかみかくし」を借りてきたら、「動画プレイヤーで開く」を選択しても再生できないでやんすよ。ちなみにUbuntu 10.10のお話。これは結局CSSという方式で暗号化されているからで、再生もろもろには辿り着けたのだけれども、それを忘れて何度も同じことをGoogle先生に尋ねてしまいそうなのでメモメモ。

まず「Ubuntu Tweak」をインスコしまする。そして medibuntu をどうにかして有効にして、ついでに HandBrake も有効化しておきます（※HandBrakeはDVD→MP4動画な変換ソフトちゃんです）。

すると Synaptics から libdvdcss2 と handbrake-gtk が見えるようになっているはずなので、そのふたつをインスコローリング。結論から言うと libdvdcss2 だけあれば Totem だろうが mplayer だろうが再生できるようにはなるんですが（もちろん各種コーデックのインストールも忘れずに）、HandBrakeも libdvdcss2 を自動的に参照して読めるようになってくれるようなので、お察しください。

それでは~~簡単リッピング作業~~じゃないじゃないじゃない、動画鑑賞をお楽しみくださいNE☆

押してねっ→BlogPeople「趣味の世界」ブログランキング

本日の将棋・桂馬に追われる夢を見た

2010-12-31T14:53:00.001+09:00

やぷー。

最近はプログラムのことばっかりで、すっかり将棋から離れてしまったのかと思いきや、実は携帯を実に7年ぶりに機種変更しまして、アプリやら通信やら、いろいろとハマっていた部分もありまして、ハイ。もちろん将棋もやりましたよ。やりましたけど、切断が多い印象でまともに対局できないような気が…。まだ数局しか指してないので本当のところがどうだかはわかりませぬ。

えーさて、今回は久々の将棋更新です。が、いつものJava盤ではありません、フラ盤です。

みなさんボクが「棋譜こめったー」なるものをシコシコ書いていたのをご存知でしょうか。あれがちょっとできあがってきて、「ブログに貼る」機能なんかもできちゃったんですね、流れで。で、それをテストしてみようと思いまして、そういう理由で今回はフラ盤なのでございます。

リンク先では「○○手目にコメントする」なんてこともできて、棋譜にも反映されるので、バグが怖くない人はぜひ活用してみてくだし。

この棋譜へのコメントは「こちら」までどうぞ。

なんともひどい将棋…。いや、テストにはもってこいかも知れない。

「ここはこう指すだろ！？」とお思いのあなたこそはぜひ「棋譜こめったー」にてツッコミを入れてくださいね！

なんか宣伝みたいになっちゃった…っていうかめちゃめちゃ宣伝ですよね…まいっか。

押してねっ→BlogPeople「趣味の世界」ブログランキング

Rubyで棋譜ファイルをうんたらかんたらその2

2010-12-30T21:37:00.000+09:00

ちょっと長いので追記にしますが、Rubyで柿木形式の棋譜をやりくりするライブラリ作ってみました。前回のものがひどい出来だったので、今回はやや気合成分を多めに取り入れてあります。

ソースが読み辛いのでドキュメントが整備してあるべきなんですが、そんなに使う人いないだろうという理由と、簡易READMEとRSpecファイルが用意してあるので、そういうところを参照してもらえればいいかな、という勝手な立ち位置であります。ちなみにカレントディレクトリで rake するとテストが発動します。

GitHubの「こちら」にてメンテされてますが、Rubyライセンスですよということと、 fork などはご自由に、というお知らせでした。

# -*- coding: utf-8 -*-

$KCODE='u'
require 'nkf'
require 'date'
require "enumerator"

module Kifu
  class Kifu
    attr_accessor :name
    attr_reader :footer
    ValidKifuPattern = "手数----指手---------消費時間--"
    HeaderPattern    = /^#/
    SplitPattern     = ValidKifuPattern # ここから指し手
    KifuHeaders      = {"棋戦" => :kisen, "手合割" => :teai,
                        "先手" => :sente, "後手"  => :gote}

    # 柿木形式棋譜の判定を行う（適当）
    def self.valid? kifu
      if NKF.nkf('-w', kifu).match(ValidKifuPattern)
        true
      else
        false
      end
    end

    def initialize kifu, name='', headers=[], attributes={}, body=[], footer=nil
      # merge 判定
      if (not headers.empty? or not attributes.empty? or
          not body.empty? or not footer.nil?)
        @name   = name
        @headers = headers
        @attributes = attributes
        @body   = body.dup
        @footer = footer

      elsif not Kifu.valid? kifu
        raise RuntimeError, "正式な柿木形式棋譜ファイルではありません"

      else
        @name = name
        parse NKF.nkf('-w', kifu) # 新たに解析する
      end
    end

    def merge_comment! sashite
      raise RuntimeError, "指し手オブジェクトではありません" if sashite.class != Sashite
      @body[sashite.tesuu-1] = @body[sashite.tesuu-1].merge sashite
    end

    def merge another
      if not another.class == self.class
        raise RuntimeError, "棋譜オブジェクトではありません"
      elsif not same? another
        raise RuntimeError, "同じ棋譜ではありません"
      end

      # ヘッダは呼び出し元を保持
      headers = @headers.dup
      attributes = @attributes.dup
      body   = @body.enum_with_index.map{|sashite, index|
        sashite.merge another[index]}
      footer = @footer.merge another.footer

      Kifu.new nil, self.name, headers, attributes, body, footer
    end

    def & another
      merge another
    end

    def started_at
      @attributes[:started_at]
    end

    def same? another
      each_with_index do |sashite, index|
        return false if not sashite.te == another[index].te
      end
      return true
    end

    def strict_same? another
      if (header     != another.header     or
          started_at != another.started_at or
          kisen      != another.kisen      or
          teai       != another.teai       or
          sente      != another.sente      or
          gote       != another.gote)
        return false
      end

      each_with_index do |sashite, index|
        if (sashite.te      != another[index].te or
            sashite.comment != another[index].comment)
          return false
        end
      end
    end

    def header
      @attributes[:header]
    end

    def teai
      @attributes[:teai]
    end

    def sente
      @attributes[:sente]
    end

    def gote
      @attributes[:gote]
    end

    def kisen
      @attributes[:kisen]
    end
  
    def at pos
      @body[pos]
    end

    def [] pos
      at pos
    end

    def each &block
      @body.each do |sashite|
        block.call sashite
      end
    end

    def each_with_index &block
      @body.each_with_index do |sashite, index|
        block.call sashite, index
      end
    end

    def to_s
      _to_s :to_s
    end

    def to_s_with_names
      _to_s :to_s_with_names_and_comments
    end

    def _to_s method # private
      buffer = []
      buffer.push @headers.join("\n")
      buffer.push ValidKifuPattern
      buffer += @body.map{|sashite| sashite.__send__ method}
      buffer.push @footer.__send__ method

      # to_s するときは改行コードを CRLF に固定
      buffer.join("\n").gsub(/\r/m, "").gsub(/\n/m, "\r\n") + "\r\n"
    end

    def kifu
      to_s
    end

    def parse kifu
      @headers = []
      @attributes = {}
      @body = []
      @footer = []
      queue = ""

      sashite_mode = false
      kifu.each_line do |line|
        if not sashite_mode and line.match HeaderPattern
          @headers << line.chomp
          @attributes[:header] = line.strip

        elsif not sashite_mode and not line.match SplitPattern # まだヘッダ部分
          @headers << line.chomp
          key, value = line.split(/：/)
          if key == "開始日時"
            @attributes[:started_at] = DateTime.parse value
          else
            @attributes[KifuHeaders[key]] = zenkaku_strip(value.to_s)
          end

        else # 指し手突入
          if not sashite_mode
            sashite_mode = true
            next # 最初の行はスキップ
          end

          if Sashite.comment? line
            queue += line
          elsif Sashite.sashite? line
            queue += line
            @body << Sashite.new(queue, @name)
            queue = ""
          elsif Sashite.footer?(line)
            queue += line
            @footer = Sashite.new(queue, @name)
          end
        end
      end
    end

    def zenkaku_strip string
      string.strip.gsub(/　+$/, '')
    end

    private :parse, :zenkaku_strip, :_to_s
  end

  class Sashite
    attr_reader :tesuu, :te, :prev_te, :time_considered, :clock
    SashitePattern = /^\s+?(\d+?)\s(.+?)(\(\d\d\))?\s+?\(\s(.*?)\)/
    CommentPattern = /^\*(.*)/
    ToryoPattern   = /^まで.*/

    def self.sashite? line
      line.to_s.match SashitePattern
    end

    def self.comment? line
      line.to_s.match CommentPattern
    end

    def self.comment_or_sashite? line
      comment?(line) or sashite?(line)
    end

    def self.footer? line
      line.to_s.match ToryoPattern
    end

    def initialize text, name="no name", args={}
      if args.empty?
        @names = []
        @comments = []
        @names.push name
        @comment = []
        text.each_line do |line|
          if match = Sashite.comment?(line)
            @comment << match[1].to_s.chomp
          elsif match = Sashite.footer?(line)
            @footer = match[0]
          elsif match = Sashite.sashite?(line)
            @tesuu = match[1].to_i
            @te    = match[2].chomp
            @prev_te = match[3].match(/\d\d/)[0].chomp if match[3]
            @time_considered, @clock = match[4].chomp.split(/\//)
          end
        end
        @comment = @comment.join("\n")
        @comments.push @comment
      else # args 処理
        if args[:merge] # マージ用の一時オブジェクトの場合
          @tesuu = args[:tesuu]
          @names = [args[:name]]
          @comments = [args[:comment]]
        else
          @names           = args[:names]
          @comments        = args[:comments].map{|c| c.gsub(/\r/, "")}
          @tesuu           = args[:tesuu]
          @te              = args[:te]
          @prev_te         = args[:prev_te]
          @time_considered = args[:time_considered]
          @clock           = args[:clock]
          @footer          = args[:footer]
        end
      end
    end

    def footer?
      true if @footer
    end

    def names
      @names.dup.freeze
    end

    def name
      @names.first
    end

    def merge another
      if not another.class == self.class
        raise RuntimeError, "指し手オブジェクトではありません"
      end

      Sashite.new(nil, nil, {
                    :names   => @names + another.names,
                    :comments => @comments + another.comments,
                    :tesuu   => @tesuu,   :te       => @te,
                    :prev_te => @prev_te,
                    :time_considered => @time_considered,
                    :clock   => @clock, :footer => @footer})
    end

    def & another
      merge another
    end

    def comments_with_names
      comments_with_names_within(0..-1)
    end

    def comments
      @comments.map{|c| crlfize c}
    end

    def comment_with_name
      comments_with_names_within(0..0).first
    end

    def comments_with_names_within range
      result = []
      queue = ""
      @comments[range].each_with_index do |comment, index|
        comment.each_line do |line|
          queue += "#{@names[index]}: #{line}"
        end
        result.push queue
        queue = ""
      end
      result.map{|c| crlfize c}
    end

    def comment
      crlfize @comments.first
    end

    def crlfize string
      string.gsub(/\n/m, "\r\n")
    end

    # to_s は最初のコメントを名前無し + 指し手で返す
    def to_s
      return crlfize(comments_to_s(0, false)) + @footer if footer?

      result = comments_to_s 0, false
      result += te_to_s
      crlfize result
    end

    def to_s_with_names_and_comments
      return crlfize(comments_to_s((0..-1), true)) + @footer if footer?

      result = comments_to_s((0..-1), true)
      result += te_to_s
      crlfize result
    end

    def to_s_without_comments
      return crlfize(@footer) if footer?
      te_to_s
    end

    def comment_to_s pos, with_name # private
      @comments[pos].split("\n").map{ |comment|
        if with_name
          "*#{@names[pos]}: #{comment}"
        else
          "*#{comment}"
        end
      }.join("\n")
    end

    def comments_to_s range, with_name # private
      result = ""
      if range.class == Range
        result = 
          @comments[range].enum_with_index.map{ |c, pos|
            comment_to_s pos, with_name
          }.select{|v| not v.empty?}.join("\n")
      else
        result = comment_to_s range, with_name
      end
      result += "\n" if not result.empty?
      return result
    end

    def commented?
      not count_of_comment.zero?
    end

    def count_of_comment
      @comments.inject(0){|count, comment| comment.empty? ? count+0 : count+1}
    end

    def te_to_s
      result = sprintf("%4d", @tesuu) + " "

      te  = @te.to_s
      te += "(#{@prev_te})" if @prev_te
      te += "    " if not @prev_te
      sprintf_length  = 13
      sprintf_length += (te.length - NKF.nkf("-s", te).length)
      result += sprintf("%-*s", sprintf_length, te)

      time = "( " + @time_considered.to_s + "/" + @clock.to_s + ")"
      result += time
      return crlfize result
    end

    private :te_to_s, :crlfize, :comments_with_names_within,
            :comment_to_s, :comments_to_s
  end
end

if $0 == __FILE__
  k = Kifu::Kifu.new NKF.nkf("-w", File.read("sandmark.kif"))
  puts NKF.nkf("-s", k.to_s)
end

押してねっ→BlogPeople「趣味の世界」ブログランキング

require 'enumrator'

2010-12-30T10:11:00.000+09:00

require 'enumerator' しておくといろいろ便利らしい。
特に map_with_index とか定義しなくても使えていい感じ。

require 'enumerator'

$array1 = [1,2,3,4,5]
$array2 = [6,7,8,9,10]

$array1.enum_with_index.map{ |n, i| n + $array2[i] } # => [7, 9, 11, 13, 15]

Rails3 で Exception Notification

2010-12-21T14:42:00.000+09:00

Rails 0.9.x のときに Exception Notifier （エラーをメールで通知するやつ）が便利だなーと思っていて、最近の事情はどうなのかしらと思っていたら、やっぱり例によってプラグインになっていたのね。プラグイン形式は便利かも知れないけど、メンテナが…フォーク数が…という事態になりがちで、活発なのはいいことなんだけれど、Rails3がリリースされた今「デファクトスタンダード」が無いのも辛いなと思う今日この頃。

今回のプラグインには https://github.com/michallo/exception_notification こちらを採用させてもらいました。とりあえず rails の master から fork を辿って行って、一番新しいところにいたので、という安直な理由。でもしっかり動いてくれました。

ただ、いくつか躓くところがあったので付記。

いつものようにプラグインをインストールしたら、 config/application.rb に次のようなことを書かなければなりません。

config/application.rb:
   # Configure ActionMailer
   config.action_mailer.delivery_method = :sendmail

   # Configure ExceptionNotifier
   config.middleware.use "::ExceptionNotifier",
   :email_prefix => "[KifuCometter] ",
   :sender_address => %{"notifier" <notifier@kifu.hamanako-jp.com>},
   :exception_recipients => %w{sandmark.m@gmail.com}

まず ActionMailer の delivery_method を :sendmail にしてやる必要があります。ボクが置かせてもらっている「お名前.com」の設定ではTLS接続は無理ぽっていうか公開リポジトリにユーザ名とパスワード書けるかボケェってなところで、そうでないにしろ OpenSSL::SSLError だか何だかが出て難しそうなご様子。

なので、 /usr/sbin/sendmail (-> /usr/sbin/sendmail.postfix) を直接叩くように。でも config.action_mailer の雛形が application.rb のどこを見渡してもなかったんだよねぇ…。 rails g mailer としなければ生成してくれないのかしら。

それから、 ExceptionNotifier は Rack のミドルウェアになっているそうなので、middleware.use としなければならないらしい。しかも、 ExceptionNotifier とリテラルで書くと「そんなん無いわー」と怒られてしまうので、文字列で "::ExceptionNotifier" としてやらなければならないらしい。なんだこのダーティハック。

ともあれこれで、無事サーバの production 環境からエラー通知が届くようになりました。ちょうど手頃なバグがあって助か…ったとか言ってる場合じゃないですよね。ちゃんとテスト書いて、テストしてからコミットしろって話で。さーせん。

そんなわけでした。

押してねっ→BlogPeople「趣味の世界」ブログランキング

auto completion for rails3 using prototype.js as backend 訂正！

2010-12-21T12:28:00.001+09:00

前回の記事「auto completion for rails3 using prototype.js as backend」であまりにもアホなミスをやらかしていたので改訂版です…。

まず、前回の記事ではせっかくダウンロードしたライブラリを有効にしていませんでした。別の部分のデバッグをしようと思ってFirefoxのFireBugを起動したところ「Autocomplete？なにそれ？」と言われて初めて気が付いたという生き恥です…。

真のAutocompleteはこちら！＞＜

layout:
<%= javascript_include_tag "autocomplete" %>

まずこれをやってなかった。 :defaults じゃダメだよね。当たり前だよね。

show.html.erb:
<script type="text/javascript">
  new Autocomplete('form_name', {
   serviceUrl:'<%= forms_autocomplete_path %>',
   width:200,
   });
</script>

form_name を対象に forms_autocomplete_path （今回は /forms_autocomplete(?query=:query) => FormsController#autocomplete）を張ってやるのは前回と一緒。width属性は追加してます。ただ、ルーティングするときにちょっとハマって、 /forms/autocomplete にするとうまく動いてくれなかった。もうちょっと頑張れば動かせたのかも知れないけどもう無理。

FormsController:

def autocomplete

@forms = Form.all

respond_to do |format|

format.json {

render :text => {:query => params[:query], :suggestions => @forms.map{|form| form.name}}.to_json

}

end

最後はこちら。推察を返す部分。ここでも酷いことに Form.all を Forms.all と前回は書いていて、そのまま運用していてもまったく気が付かなかった（実行されないのでエラーさえ吐かれない）というあんまりな状況になってました。泣きたいです。

でも今度こそやったからいいや。なんか別の機能のコミットとダブっちゃったけど許してくれ。人間なんだミスもするさ。

コーディングの才能ないかもって思ったら負けだと思ってる。

押してねっ→BlogPeople「趣味の世界」ブログランキング

auto completion for rails3 using prototype.js as backend

2010-12-21T05:23:00.000+09:00

戦型を追加するときにオートコンプリートを有効にしようとして、 auto_complete_for なんてマクロがあるのか！とググって感動していたら、かなり前にプラグインとして分離されていたみたいで、しかもDHHさん（Railsの作者）によるメンテナンスが2007年止まり…。

代替策はないのかとGoogle先生を酷使するも、 rails3-autocomplete-jquery とかそんなんばっか。

時代はjQueryなのか…Rails3という（~~地雷かもしれない~~）最新版を使っておきながらJavaScriptのバックエンドはprototype.jsのほうがいいという保守的な考えのボクには道はないのか…そう思っていたところが！

あまりにも検索トップで荒ぶっているので見逃していた「このサイト」で配布されている autocomplete という、一見Railsとは何の関係も無さそうなライブラリが大活躍。まずは配置。

$ wget http://www.devbridge.com/projects/autocomplete/local/downloads/autocomplete-1.0.4.zip
$ unzip autocomplete-1.0.4.zip
$ rm prototype-6*
$ mv shadow.png public/images
$ mv styles.css public/stylesheets

で、 application.html.erb に <%= javascript_include_tag :defaults %> と書く。っていうか普通は書かれてる。

ほいで、

forms_controller.rb:
  # GET /forms/autocomplete
  def autocomplete
   @forms = Forms.all
   respond_to do |format|
   format.json {
   render :text => {:query => params[:query], :suggestions => @forms}.to_json
   }
   end
  end

次にコントローラにこんな感じのことを書く。

クエリは params[:query] に入ってくるみたいだけど、今回は「戦型」という限定されたものを推察してくれればいいので、 Form.all にしてます。

戻り値のフォーマットに JSON （よくわからんけどYAMLっぽいもの）を要求しているので、 suggestions には配列を渡してやります。っていうか、ソースからコピペしてるんだけど、これ @forms.map{|form| form.name} とかになってないとやばいんじゃね？なんで動いてるんだ？まぁいいや。

で、 query 属性には（なぜか）渡ってきたクエリワードを入れてやる必要があるみたいです。他にも返せるものがあったけど、後から確認しよう。

Railsは Hash#to_json という超便利すぎる代物をあらかじめ用意してくれているので、いざというときに頼りになりまくりますね。ついさっき存在を知ったのだけれど。っていうかJSONってなんですか状態ですけれど。

えーそんで、肝心のビューのほうには、

render 'kifu_documents/autocomplete'

HAMLを使っているのでパーシャル化してやって、古くからの慣習に従い末尾から render で呼び出して、

_autocomplete.html.erb:
<script type="text/javascript">
  new Autocomplete('form_name', { serviceUrl:'<%= forms_autocomplete_path %>' });
</script>

中身にはこんな感じのことを書きます。
new Autocomplete の第一引数がオートコンプリートの対象となるフォームで、 serviceUrl にはさきほどコントローラに書いた JSON （いっつもJASONとtypoする…）を返すアクションを指定してやります。今回は意味もなくルーティングしたので forms_autocomplete_path です。

たったこれだけでオートコンプリートできました！
たまにはgemやプラグイン以外にも目を向けなきゃダメってことですね。

おしまい。

押してねっ→BlogPeople「趣味の世界」ブログランキング