def RenaX64(diary):

redmineをnginxで扱う

2011-10-05T23:43:00.001+09:00

教授から成果を見える形で出せと言われたのでとりあえず備忘録。。

Redmineの設定とか
sudo apt-get install ruby ruby1.8-dev rubygems sendmail imagemagick libmagick9-dev
sudo gem update --system 1.6.2
sudo gem install sqlite3-ruby
sudo gem install -v=2.3.11 rails
sudo gem install -v=0.4.2 i18n
sudo gem install rake
sudo mkdir -p /var/www/redmine_test
cd /var/www/redmine_test
sudo git clone git://github.com/edavis10/redmine.git
cd redmine

sudo vim config/database.yml
production:
adapter: sqlite3
database: db/redmine.db
timeout: 5000

sudo rake generate_session_store
sudo rake db:migrate RAILS_ENV="production"
sudo rake redmine:load_default_data RAILS_ENV=production
>ja

メールの設定がいまいちわからない。
~~使わないしテキトーでいいよね。~~
sudo vim config/email.yml
delivery_method: :async_smtp
smtp_settings:
address: localhost
port: 25
domain: host.example.jp

sudo ruby script/server webrick -e production
http://serverip:3000にアクセスして動くかチェック
Ctrl-Cで中断

redmineをnginxで動かすときのもろもろ
sudo gem install passenger
sudo gem install rmagick

sudo passenger-install-nginx-module
自ビルドnginxだったので、そのときのソースとcofigureオプションで通す形に。

passenger-config --root
/usr/lib/ruby/gems/1.8/gems/passenger-3.0.9
which ruby
/usr/bin/ruby
上記2つのコマンドの値を覚えておく

cd /opt/nginx/conf
sudo vim nginx.conf
とかそのへんで
http {
...
passenger_root /usr/lib/ruby/gems/1.8/gems/passenger-3.0.9;
passenger_ruby /usr/bin/ruby;
passenger_max_pool_size 8;
passenger_max_instances_per_app 1;
passenger_pool_idle_time 3600;
...
}

server {
listen 80;
client_max_body_size 250M;
server_name redmine.example.com;
root /var/www/redmine_test/public;
passenger_enabled on;
rails_env production;
}
を適宜追加

nginx -t -c "nginx.confのpath"
でエラーでないなら
nginx -s reload
でおｋ

あとは
/var/www/redmine_test
以下のアクセス権等の調整でいいかな？
多分だけどnginxのworkerと同じ権限を与えてやればいいと思う
上のとおりだと多分権限の関係でうまく動かなくなると思うのでそのへんはよろしく

参考:
http://redmine.jp/tech_note/install/
http://www.redmine.org/issues/8325
http://doruby.kbmj.com/8y/20100628/Redmine_nginx_Passenger_
http://redmine.jp/tech_note/apache-passenger/

mongodbの認証について

2011-10-05T12:33:00.003+09:00

mongodbで認証
configに
auth=true
とかく
bind_ip=0.0.0.0
を指定するとそこからのみ接続を受け付ける。
次にデータベースへ接続する
mongo --shell
use admin
db.addUser('username','passwd')
で管理者を追加
使用しているデータベースにユーザを追加する場合は
db.auth('username','passwd')
で管理者権限でログイン後
db.addUser('username2','passwd2')
で追加可能
{"$err" : "unauthorized db:admin lock type:-1 client:127.0.0.1",
"code" : 10057}
上記のようなエラーは管理者権限を持っていないとなるので注意

詳しい設定方法は
File Based Configuration

Windows8をWinPE3を使ったネットワーク経由でインストール

2011-09-21T13:47:00.000+09:00

たまたま4GBのUSBメモリ無く、それとネットワーク経由でのOSのインストールってどんなものなのか知りたくなったので試してみた。
使用したPCはdynabook S30。こいつにRAM4GB+SSD64GBでアップグレードしてるのでWin7でもそれなり頑張ってくれていた。そんで今度はWin8で犠牲になってもらおうという魂胆である。

手順
1, USBから起動できるWindows PE 3の作成
1-1, Windows PEのイメージ作成
とりあえずここからWindows AIKをDLしてインスコ
インスコ終わったら管理者権限でWindows AIKの「Deployment ツールのコマンドプロンプト」を起動します。
そして以下のコマンドを実行するとWinPE起動イメージが出来上がります。
copype x86 D:\WinPE3
imagex /apply D:\WinPE3\winpe.wim 1 D:\WinPE3\mount
imagex /capture D:\WinPE3\mount D:\WinPE3\ISO\SOURCES\BOOT.WIM "WinPE for recovery" /boot /compress maximum
oscdimg -n -bD:\WinPE3\etfsboot.com D:\WinPE3\ISO D:\WinPE3\recovery.iso

1-2, USBメモリにイメージを書き込む
USBメモリの初期化を行わなければなりません。
それ自体はこちらの記事を参照すると良いでしょう。
さて初期化が終わった所で1-1で作ったイメージをUSBメモリに書き込みます。と言ってもコピーだけなんですが。
D:\WinPE3以下のISOフォルダ内をすべてUSBメモリにコピーすれば完了です。
あとはUSBメモリにドライバー類をおいて起動します。

2, WindowsPE上からネットワークインストール
2-1, ドライバの読み込み
うまく起動できたらコマンドプロンプトが表示されているかと思います。
そこで
drvload "読み込みたいドライバのINFパス"
を実行すると良いと思う。
S30の場合RAIDドライバが無いといけないので
例) drvload C:\drivers\KR10.INF
としてドライバを読み込ませた。

2-2, ネットワークドライブのマウント
※ネットワーク越しからインストールするということでWin8のISOをマウントし、共有してあることを前提にします。
net use "任意のドライブレター" "共有先のパス" "ログインパスワード" /user:"ユーザ名"
という感じに実行します。
例) net use n: \\test-user\h password /user:test-user
こうすることでネットワークからOSインストールに必要なファイルへアクセスすることができます。

2-3, Windows8のインストール
ここからは結構すんなりとしています。
コマンドプロンプトからマウントした先が「n:」ドライバの時は
n:
setup.exe
と実行すればOSインストール画面が出てきます。
あとは普段のインストールと同じようにすればいいと思います。

以上。

Python向けTumblr APIライブラリ更新

2011-08-15T08:25:00.000+09:00

v1からv2に新しくAPIが更新されたのでライブラリもそれに従いました。

使い方はtest.py見てください。これまでどおりv1で良い方はリポジトリ変更して持って行ってください。

PyYoshi/Pytumb

実装していく中でわけわからないものとかあったし、そのうちDocなり書くかなぁ～。

まだまだv2の修正来るだろうし、新しく追加されるであろうapiを楽しみにしますかねぇ。 like/unlikeは早く実装して欲しいところｗ

JavaScriptでOAuth認証するときの注意点

2011-06-30T19:18:00.001+09:00

JavaScript単体でOAuth認証する場合ConsumerKey/SecretKeyが見えてしまう。

難読化（base64など）ですぐにはバレないようにはできてもいずれ見つかってしますのだけれど、どのように他のJSなアプリは隠しているのだろうか？

単体ではなくサーバプロキシを通せばそんな意識しなくてもいいのだろうけど気になるところではある。

思いつく限りだと、JS本体には置かずバイナリをJSでパースしてキーを使うというものもある。

xhrでバイナリ取得
var xhr = new XMLHttpRequest();
xhr.open('GET', path, false);
xhr.overrideMimeType('text/plain; charset=x-user-defined');
xhr.send(null);
binary_string = xhr.responseText;

binary_stringをbinaryに変換する
bytes = []
for(var i=0, t; i < binary_string.length; i++){
bytes[i] = binary_string.charCodeAt(i) & 0xff;
}

こんなかんじでJS内でバイナリ化して、各自パース処理を書けばいいのではないでしょうか？

隠し方は人それぞれだと想いますが＾＾；

他の方法としてはyqlを使う方法もあるようですね。

How-to: Secure OAuth in JavaScript

nginxでfastcgiを使うとき

2011-06-29T18:23:00.002+09:00

Pythonでweb app作ったので動かそうとサーバ周りをいろいろやってみたのだがfastcgiでの動作方法がいまいちよくわからなかった。

apacheのようにhoge.fcgiを指定してやれば動く、というものではないらしくどうすればいいのか結構時間を費やしてしまった。

１つのやり方としてspawn-fcgiを使ってプロセスを生成してやればいいらしい。それをnginx.confのfastcgi_passに指定してやることでいいみたいだ。

試しにspawn-fcgiを単体起動して動かしてみた。

sudo spawn-fcgi -f test.fcgi -a 127.0.0.1 -p 9001 -u www-data -P /var/run/spawn-fcgi-moin.pid

こんな感じで起動してやればいい。

指定したipとportをnginx.confのfastcgi_passに指定して動けばおｋ

そんなかんじで。

起動スクリプト書いてみたので参考としてどうぞ

自動起動する場合はUbuntuはchkconfigではなくsysv-rc-confを使うこと。

sudo sysv-rc-conf test_app on

またはupdate-rc.d

Python向けtumblr APIライブラリ公開した。

2011-06-06T00:38:00.000+09:00

OAuthにしか対応してないtumblr APIライブラリ公開した。
test.pyとかapi.pyとか見ればいいと思うよ。

各API毎のパラメータは公式API DOC見てください。
まぁtumblr api叩いたことある人なら大丈夫だと思うけど。

ということでほい

PyYoshi/Pytumb at master - GitHub

libwebpのビルド

2011-06-03T19:00:00.001+09:00

Ubuntu 10.04に用意されていないようで自前で用意したときのメモ

$ cd tmp
$ wget http://webp.googlecode.com/files/libwebp-0.1.2.tar.gz
$ tar zxvf libwebp-0.1.2.tar.gz
$ cd libwebp-0.1.2
$ sudo apt-get install automake libtool
$ aclocal && autoconf && automake -a -c;
$ ./autogen.sh
$ ./.configure
$ make
$ sudo make install
$ ls -la /usr/local/lib/libwebp*
$ ls -la /usr/local/include/webp/*
$ ls -la /usr/local/bin/*webp

以上

VS2010でboostを扱う準備

2011-04-18T18:12:00.000+09:00

研究室配属されて、スクリプト言語ばかり使っていた生活も変わるだろうとDreamSparkからVS2010を拝借した。
で、巷で話題のboostをVS2010で使えるようにした。（boostすげぇーってしか分かってないｗ
それとVSがうまくインスコされていないのか各PATHを手動で通している。

準備:
C:\Program Files\Microsoft Visual Studio 10.0\VC\bin\vcvars32.batの修正
最初の行に
@SET VSINSTALLDIR=C:\Program Files\Microsoft Visual Studio 10.0
@SET VCINSTALLDIR=C:\Program Files\Microsoft Visual Studio 10.0\VC
@SET FrameworkDir32=C:\Windows\Microsoft.NET\Framework
@SET FrameworkVersion32=v4.0.30319
@SET Framework35Version=v3.5
を追加

:: @call :GetVSCommonToolsDir
:: @if "%VS100COMNTOOLS%"=="" goto error_no_VS100COMNTOOLSDIR
:: @call "%VS100COMNTOOLS%VCVarsQueryRegistry.bat" 32bit No64bit
該当部分をコメントにする。
※当環境ではこのようになったが各自インスコ場所とVer.は確認しておくこと。

PATHに
C:\Program Files\Microsoft Visual Studio 10.0\VC\bin
C:\Program Files\Microsoft Visual Studio 10.0\Common7\IDE
C:\Program Files\Microsoft Visual Studio 10.0\VC\include
を追加

INCLUDEに
C:\Program Files\Microsoft SDKs\Windows\v7.0A\Include
C:\Program Files\Microsoft Visual Studio 10.0\VC\include
を追加

LIBに
C:\Program Files\Microsoft SDKs\Windows\v7.0A\Lib
C:\Program Files\Microsoft Visual Studio 10.0\VC\lib
を追加

ビルド:
Visual Studio コマンドプロンプトからboostrap.batのあるディレクトリに移動して
bootstrapを実行。

>bootstrap

bjam.exeが生成されると思う。
できなかったら、「boost\tools\build\bjam.log」あたりをチェックしてみるといいかもしれない。

bjamからboostのコンパイル

>bjam toolset=msvc-10.0 variant=debug,release threading=multi link=static

スペックが糞なせいかだいぶビルドに時間かかった。

VS2010の設定:
プロジェクトを読み込んだら
「Microsoft.Cpp.Win32.user」をダブルクリック、Includeディレクトリをクリックしboostディレクトリを追加。
Libraryディレクトリをクリックし、ビルドされた「stage/lib」を追加。

以上で終了です。
VS側の設定はまだビルドが終わってないので試してないけど、たぶん大丈夫でしょうｗ

参考:
VS2010 command prompt gives error : Cannot determine the location of the VS Common Tools folder.
MS C++ 2010 and mspdb100.dll
Compiling and configuring Boost C++ libraries for Visual Studio 2010

PythonモジュールをSL4A向けにビルドしてみた

2011-04-06T22:49:00.004+09:00

SL4AのVer.が上がってAPIも結構数サポートされて驚いていたのだが、それよりうれしいとおもったのがPythonのCモジュールのビルド方法が確立されたこと。

以前まではソースにそのようなツールは用意されていなくクロスコンパイラでとりあえずビルドって感じだった。

ということでPythonモジュールのビルド方法を。

ツールのソースコード追ってないので正しいかどうか分からないけどAndroidソースが必要みたい。

Androidのソースは各自準備してください。

/home/hoge/android/mydroid ← Androidのソース置き場

/home/hoge/android/sl4a ← SL4Aのソース置き場

とします。

今回はPyLZMAをビルドする例を紹介します。

SL4Aのソースをとってくる。

$pwd

/home/hoge/android/

$cd sl4a

$hg clone https://android-scripting.googlecode.com/hg/ android-scripting

ビルドツールの一部を修正する。

$cd android-scripting/tools/agcc
$vim agcc

126行目以降のものを以下のように1行追加

# Also need: -Wl,-soname,libXXXX.so

my @shared_args = (

"-nostdlib",

"-Wl,-T,$DROID/build/core/armelf.xsc",

"-Wl,--gc-sections",

"-Wl,-shared,-Bsymbolic",

"-L$ALIB",

"-Wl,--no-whole-archive",

"-L/home/hoge/android/mydroid/prebuilt/ndk/android-ndk-r4/platforms/android-3/arch-arm/usr/lib ",

"-lc",

"-lm",

"-ldl",

#"-Wl,--no-undefined",

"$TOOLCHAIN/lib/gcc/arm-eabi/4.4.0/interwork/libgcc.a",

"-Wl,--whole-archive"); # .a, .o input files go *after* here

PyLZMAをとってくる。

$pwd

/home/hoge/android/sl4a

$mkdir Modules

$cd Modules

$wget http://pypi.python.org/packages/source/p/pylzma/pylzma-0.4.4.tar.gz

$tar zxvf pylzma-0.4.4.tar.gz

Moduleをビルド

$cd pylzma*
$export SL4A_TRUNC=/home/hoge/android/sl4a/android-scripting

$export ANDROID_SRC=/home/hoge/android

$export PATH=$PATH:$ANDROID_SRC/prebuilt/linux-x86/toolchain/arm-eabi-4.3.1/bin

$export PATH=$PATH:$SL4A_TRUNC/tools/agcc

$export AR=arm-eabi-ar

$export PYBASE=$SL4A_TRUNC/python/src

$export INCLUDES="-I$PYBASE -I$PYBASE/Include"

$export OPT="-DNDEBUG -g -fwrapv -O3 -Wall -Wstrict-prototypes -fno-short-enums $INCLUDES"

$export CXX=agcc

$export LDSHARED="agcc -shared"

$export RANLIB=arm-eabi-ranlib

$export CC=agcc

$python -E setup.py build

これで問題なくビルド出来ると思う。

$cd build/lib*

$zip pylzma.zip *

でパッケージングしたらPython for Androidでそのzipファイルをインポートすれば使えると思う。

またlib*の他にscripts*ってのが出来てたらそれも必要。

それを/sdcard/downloadに置く。

で、これだとなんかうまくいかない…

root取れれば

*.soを

/data/data/com.googlecode.pythonforandroid/files/python/lib/python2.6

に

*.pyを

/sdcard/com.googlecode.pythonforandroid/extras

に置けばいいと思う。

なんか説明が足らないな…
ソース見ろってことかねｗ
その部分のソース: PythonMain.java

x11vncをUbuntu10.04にインストールする

2011-03-21T19:57:00.001+09:00

以前はVNCクライアント上でD&D出来た記憶があったけど10.04ではなんかうまくいかなかった。

仕様なのかなと思ったけど違うみたい。いろいろなサイト（海外のフォーラム）でvnc4server以外でもどうやら起きている見たいで、x11vncだけはそうでもないってことでそれを入れた。

いろいろなサイトを参考にx11vncをxinetdで動かそうとしたんだけどうまくいかねぇ…
自ビルドしたり、gdmに登録してみたり、半日くらい潰した。無能すぎる

ってなわけで

$sudo apt-get install x11vnc
$sudo mkdir /etc/x11vnc
$sudo x11vnc -storepasswd /etc/x11vnc/passwd
$sudo chmod 644 /etc/x11vnc/passwd

$sudo vim /etc/xinetd.d/x11vnc

service x11vnc

{

type = UNLISTED

protocol = tcp

disable = 0

user = root

server = /usr/bin/x11vnc

server_args = -inetd -o /var/log/x11vnc.log -forever -auth /var/lib/gdm/:0.Xauth　-display :0 -xkb -rfbauth /etc/x11vnc/passwd

port = ポート適宜

}

$sudo vim /etc/services

x11vnc ポート番号適宜/tcp #X11VNC Server

これでいちよ動くようになった。

-xkbオプション追加でshiftキーが使えるようになる。

てかx11vncなんかきびきび動いてくれませんね(Color depthが指定できないからかな？) vnc4serverの方が個人的には好きかもｗ

で、さらに問題が。
X11VNCはX11自体にアクセスして処理を行っているため、クライアントで操作しているとサーバ側の画面もそれと同じように動くのである・・・困った。。
いろいろ調べていたらXvfbというX11仮想プログラムを使えば良いみたい。

$sudo apt-get install xvfb

このあとよく分からない

$Xvfb :20 -screen 0 800x600x16 &
とかして
x11vncの-displayオプションに:20を指定してやれば良いみたい？
なので、
端末で実際試してみたんだけど、ログインまではできるものの画面が白っぽいままセッション画面が出ない。
何が問題なのかも分からない。

参考
x11vnc: Shift key does not work

Win7でScalaとScalaAndroid環境構築とか

2011-03-18T02:31:00.003+09:00

ただの備忘ログ
構築とかわかりにくかったのでまとめただけ。転んだら泣いてください。

サイト
Scala
Index of /gnu/windows/emacs か NTemacs
Apache Ant
ProGuard
simple-build-tool
object版create_project

準備
1:
ScalaのサイトからIzPack Installerをダウンロードして指示通りインスコ。インストーラ版だとPATHも勝手に追加してくれるので楽。

2:
最新のemacsを持ってくる。
「scala/misc/scala-tool-support/emacs」のファイルを「.emacs.d/scala-mode」に置く
C:\Users\***\AppData\Roaming\.emacs.dにinit.elを作成
以下内容

;; Set default fonts and fonts for Japaense
(cond
  (window-system
    (set-default-font "Courier New-10")
    ;; Japanese(japanese-jisx0208)font
    (set-fontset-font
      (frame-parameter nil 'font)
      'japanese-jisx0208
      (font-spec :family "Meiryo" :size 12)
      ;;'("Meiryo" . "unicode-bmp")
    )
  )
)
;; Set scala-mode
(add-to-list 'load-path "~/.emacs.d/scala-mode")
(require 'scala-mode-auto)

起動はbin以下の「runemacs.exe」でおｋみたい。
cuiでは「emacs -nw」みたい。
使い方とかよく分からないので追々。

3:
Apache AntからWindowsバイナリをダウンロード解凍後、適宜場所へ。そのあと環境変数のPATHに「apache-ant/bin」がある場所を追加。
端末から「ant -version」でPATH通っているか確認。

4:
ProGuardをダウンロード解凍後適宜場所へ。そのあと環境変数に
PROGUARD_HOMEを新規追加。
PATHに「%PROGUARD_HOME%\bin」を追加
「proguard」を端末内で実行確認。

5:
端末内で「sbaz install scala-android」を実行しscala-androidをインスコ。
このままではscala自体がエラーで起動しないので。
こちらで2.8.1用にビルドした物を用意したので、自己責任でscala-android.7zをダウンロード解凍後
「scala/lib」以下に置けばおｋ
※いつダウンロードリンクが切れるか分かりません（笑

6:
simple-build-toolをダウンロード解凍後適宜場所へ。
「sbt-launch-*」を「sbt-launch.jar」へリネーム

@echo off
java -Xmx512M -jar "%~dp0/sbt-launch.jar" %*

そのあと環境変数のPATHにsimple-build-toolがある場所を追加。
ANDROID_SDK_HOMEという名前でandroid-sdkのある場所を追加。

端末内で「sbt」でPATHが通っているか確認。

7:
simple-build-toolと同じところにcreate_project.scalaを保存
create_project.scalaを修正

create_project.scala:13
-- val e = args.elements
++ /**val e = args.elements**/
++ val e = args.iterator

修正版：create_project.7z

※こっちもいつダウンロードリンクが切れるか分かりません（笑
あとScala触ったことないのでちゃんと動くかすら分かりません（汗

実際に使ってみる
1: プロジェクトの作成
任意のフォルダにsimple-build-toolディレクトリにある「create_project.scala」をコピーする。
PS> scalac create_project.scala
PS> scala -cp . CreateProject HelloProject scalatohoku.example.hello --platform android-8 --scala-version 2.8.1 --activity HelloActivity
PS> cd HelloProject
PS> sbt update package-debug

2: コンパイル(apk化) → ぶち当たった壁を参照
HelloProject下で
PS> sbt
sbt> compile
sbt> install-emulator
または
sbt> install-device
インストール出来ません

ぶち当たった壁
1:Issue 150: sbt.Process apply splits path to command having spaces
android-sdkのpathにスペースが入るとだめな見たい。なので別位置に置きましょう。
結構これに時間とられた（汗

2: sbt> install-emulator(install-device)しても動かない
device名が文字化けしているのか端末へのインストールがうまくいかない。
「target/scala_2.8.1」にapkできてるのでそれをインストールして対処。

参考
Android SDK for Scala | ブログ.武田ソフト.jp
Scala + Androidをsbt(Simple Build Tool) とEclipseを併用して開発
EmacsでつくるScala開発環境前編(scala-mode)

Androidのライブラリの依存関係を調べる。

2011-03-08T16:47:00.002+09:00

バイナリ開けるのめんどくさかったので書いた。
やってることが分かる人のみで。
スクリプトと同じフォルダにbin, lib作って適宜ファイル入れること。
また、arm-eabi-objdumpも入れておくこと。

# -*- coding: utf-8 -*-
#!/usr/bin/env python
from os import getcwd, listdir
from popen2 import popen3

cdir = getcwd()

lib_flist = listdir(cdir+'/lib/')
bin_flist = listdir(cdir+'/bin/')
for file in lib_flist:
    cmd = './arm-eabi-objdump -x ./lib/'+ file + ' |grep -e NEEDED'
    stdout, stdin, stderr = popen3(cmd)
    print file
    print stdout.read()
    print stderr.read()

for file in bin_flist:
    cmd = './arm-eabi-objdump -x ./bin/'+ file + ' |grep -e NEEDED'
    stdout, stdin, stderr = popen3(cmd)
    print file
    print stdout.read()
    print stderr.read()

cd hoge; ls-aと打つのがめんどくさくて、、

2011-02-09T17:00:00.001+09:00

最近リナックスを使う機会が多くなってきて、どうもcd コマンドの後にls -aと打つのが面倒になってきた。

最初はまぁそーいうものだろうと思ってたんだけど我慢の限界だったので、bashrcにcd hoge; ls -aをcdコマンドだけで出来るようにした。

$vim .bashrc
function cd() {
builtin cd $@
ls -a
}
$source .bashrc

を追加して終了。

動くか心配だったけど無事動きましたｗ

暗号化したHomeで注意すること SSH編

2011-01-15T19:20:00.002+09:00

普段はHomeなんて暗号化しない設定でOSを構築するのでが、正月中に作ったとある鯖では暗号化したHomeを採用していた。

そのときは、まぁ何も影響ないだろうと思っていたのだが、SSHなどの公開鍵認証でそれにぶち当たった。

基本的に公開鍵はHome以下の".ssh"に置くのだが、暗号化Homeの場合はそのデフォルトの状態だと公開鍵を読みに行くことが出来ないのだ。

/home以下がマウントされることはないので。

なので、公開鍵は/home以外の場所に置く必要が出てくる。

で、実際やることは

/homeが見える環境で公開鍵を別の場所にコピーすればおｋってことで作業開始。

$sudo mkdir /etc/

$sudo cp $HOME/.ssh/authorized_keys /etc//authorized_keys

$sudo chmod 700 /etc/

$sudo chown /etc/

$sudo chmod 600 /etc//authorized_keys

$sudo chown /etc//authorized_keys

$sudo vim /etc/ssh/sshd_config

「AuthorizedKeysFile /etc//authorized_keys」部分を編集

$sudo /etc/init.d/ssh restart

問題は$HOME以下にこのままではアクセス出来ないこと。

どうすればいいんだろうか？

参考: Encrypted Home Directory

githubにプッシュ

2010-12-24T00:46:00.002+09:00

git init
git add .
git commit -m 'first commit'
git remote add origin git@github.com:hoge/fuga.git
git push origin master

IS01 rooterでうまーくモジュールが呼び出せないとおもったらの巻き

2010-12-12T14:00:00.001+09:00

※文鎮化する可能性が高い操作を行っていますので注意してください。

いやはや便利な者が出来てしまうとそれに頼ってしまうのですが、それが盲点となってしまった。

たぶん僕だけの環境で起こったことだと思うので気にせずに＾＾；

MIRO氏作成のIS01 rooter_002ですが、こちらを使用した際にmsm_nand_exをinsmodすることが出来なかった。

なぜ出来なかったのか？

まずは、/sqlite_journals/is01root/以下にあるautoexecに実行権限が付与されていなかった。
#chmod 755 /sqlite_journals/is01root/autoexec.sh

それと。autoexec.shに書かれている２行に「/sqlite_journals/is01root/_su ...」とあるが、is01root以下に「_su」が入っていない。
ファイルをDL解凍したら
adb push _su /sqlite_journals/is01root/
#chown root.root _su
#chmod 6755 _su
で再起動を行う。
これでlsmodしてモジュールがロードされていればおｋです。
あと*.koは基本的に644で。

で、ここまで書いたが。
MIRO氏はたぶんsystemを書き込めないように上記手順を行わなかったのかなと思います。

IS01のkernelをビルドしちゃおう！ ※修正: 20101213

2010-12-04T20:08:00.001+09:00

※このビルドはNANDロック解除などのセキュリティ部分の解除はしていません。

nandロックが解除出きるようになって、recovery等の書き変えも可能になりいろいろと旬になってきたIS01ですが、まだまだスタートしたばかりです。

で、まぁカスタムロム作りたくてandroidのソースをぼちぼち読んでいるのですが云々。

さてさて、今回はSH Developers Squareに公開されているIS01のkernelソースをビルドしていきます。

ソースは前記事のスクリプトから取得しておきましょう。

STEP1: android.git.kernel.orgからコンパイル用ソースをとってきましょう。(既にやっている人はSTEP2へ)
#mkdir mydroid
#wget http://android.git.kernel.org/repo
#chmod 755 repo
#./repo init -u git://android.git.kernel.org/platform/manifest.git -b froyo
#./repo sync
ここのSTEPは取得に時間がかかりますので気長に待ちましょう。

STEP2: IS01のソースをビルドするための準備1
IS01のkernelソースに移動
#vim ./arch/arm/mach-msm/sh_sleepcheck.c
最初の行にある#include <smd_private.h>を#include "smd_private.h"
に書き換える。diffはよーわからないのでそのうち勉強する。

STEP3: IS01のソースをビルドするための準備2
IS01での操作です。
rootとった状態でTerminal Emulatorから
#busybox cp /proc/config.gz /sdcard/config.gz ←この操作はbusyboxとそのpathが必要です。
config.gzをPCに持ってきて展開する。
それをIS01のkernelフォルダに「.config」という名前で保存してください。
「.config」はmakeするときに使用します。

STEP4: kernelのビルド
#make ARCH=arm CROSS_COMPILE=../../mydroid/prebuilt/linux-x86/toolchain/arm-eabi-4.2.1/bin/arm-eabi-
を実行すると、
arch/arm/boot/にImageというファイルが出来上がります。これがkernelです。
お疲れ様でした。

と記事書いてたら仙石さんが仕事早いｗ
「Android 端末 IS01 のカーネルを入れ替えてみた ? さよならデッカード LSM」
とりあえず僕はnandプロテクト外したものを作っています。
froyoベースになるにはもうちょいお勉強。。

STEP 番外編1: android.kernel.orgとcode auroraからのkernelソース取得
・純粋なandroid向けkernelの取得
mkdir android_kernel ←適宜名前変更してください
git clone git://android.git.kernel.org/kernel/msm.git -b android-msm-2.6.35
2.6.29の場合は「android-msm-2.6.29」です。なお各ブランチはこちらを参考にしてください。

・IS01のベースとなったとされるcodeauroraのkernelの取得
mkdir aurora
git clone git://codeaurora.org/kernel/msm.git msm-kernel
cd msm-kernel
git checkout origin/android-msm-2.6.29b
git checkout dcdb890bc3e49ba5091230e73e976d9f6860fffe
wiki参考

どうでもいいこと：なんでSTEP2で書き換えたのかは…
カーネルソースを修正せずにmakeしたらエラーが出た。これはひどい、、
arch/arm/mach-msm/sh_sleepcheck.c:27:25: error: smd_private.h: No such file or directory
arch/arm/mach-msm/sh_sleepcheck.c: In function 'sh_sleepcheck_name_m_show':
arch/arm/mach-msm/sh_sleepcheck.c:625: error: implicit declaration of function 'smem_get_entry'
arch/arm/mach-msm/sh_sleepcheck.c:625: error: 'SMEM_SLEEP_STATIC' undeclared (first use in this function)
arch/arm/mach-msm/sh_sleepcheck.c:625: error: (Each undeclared identifier is reported only once
arch/arm/mach-msm/sh_sleepcheck.c:625: error: for each function it appears in.)
cc1: warnings being treated as errors
arch/arm/mach-msm/sh_sleepcheck.c:625: warning: assignment makes pointer from integer without a cast
make[1]: *** [arch/arm/mach-msm/sh_sleepcheck.o] エラー 1
make: *** [arch/arm/mach-msm] エラー 2
てなかんじのエラーが。まさか素の状態でこんなもんでるとは思わなかったw
で、まぁ上のSTEPで修正していたわけですね。

repoつかったりgit clone使ったりしてるのは、途中でエラーが発生したりしなかったり謎なため。

SH DevelopersSquareからIS01等のAndroid向けソースをDLするスクリプト作ったよ！

2010-12-03T16:43:00.005+09:00

SH DevelopersSquareがgitとかsvnとか用意してくれていないのでソースのDLがまんどくさいことこの上ないのでPythonでスクリプトを作成しました。

このスクリプトを利用することにより、is01, sh-10b, jn-dk01のソースを取得・展開してくれます。

使い方（Ubuntu環境）は以下の通りです。

まず、easy_install等で必要なモジュールをインストールします。
#sudo apt-get install setup_tools ←インストールしていない場合
#sudo easy_install -U MultipartPostHandler
#sudo easy_install -U BeautifulSoup

スクリプトの実行例は以下の通りです。
#python ./sdasg.py is01 ←is01のソースを取得・展開したい場合
#python ./sdasg.py sh-10b ←sh-10bのソースを取得・展開したい場合
#python ./sdasg.py jn-dk01 ←jn-dk01のソースを取得・展開したい場合

以下がスクリプトです。

# -*- coding: utf-8 -*-
#-------------------------------------------------------------------------------
# Name:        SH Dev Android Source Getter(特に名前決めてない)
# Purpose:     (https://sh-dev.sharp.co.jp/android/modules/oss/)がsvnやgitでの
#              ソース公開してなかったので自動でダウンロードしてきて展開するスク
#              リプト作った。
#              使用する際は、GPL(http://www.gnu.org/licenses/)と各々のソフトウェ
#              ア使用許諾契約書に同意すること。
#
# Usage:       引数にis01, sh-10b, jn-dk01のどれかを与えてください。
#              スクリプト直下にディレクトリを作られ保存されます。
#              例)is01のソースを取得・展開します。
#                 #python ./sdasg.py is01
#
# Require      MultipartPostHandler, BeautifulSoupをeasy_installなどでインストー
#              ルしてください。
#
# Author:      renax64.blogspot.com
#
# Created:     02/12/2010, ver. 0.3
# Copyright:   (c) renax64.blogspot.com 2010
#-------------------------------------------------------------------------------
#!/usr/bin/env python

import os
import sys
from BeautifulSoup import BeautifulSoup
#import datetime
import urllib2
import MultipartPostHandler
import cookielib
import tarfile

#初期値: 対策されたときここを書き換える
init_vals ={
    "main_url":"https://sh-dev.sharp.co.jp/android/modules/oss/index.php?/",
    "is01":"is01",
    "sh-10b":"sh10b",
    "jn-dk01":"jndk01",
    "dl_form_class":"dl2_center",
    "dl_tr_class":"dl2_data",
    "td_date_class":"dl2_center",
    "td_filename_style":"padding-left:1em",
    "form_post_class":"dl2_center",
    "input_name":"ticket",
    "accept":"同意する ( ダウンロード )",
    "User-Agent":"Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/534.12 (KHTML, like Gecko) Chrome/9.0.587.0 Safari/534.12",
    "Content-Type":"multipart/form-data"
    }

#ファイルの取得・展開
def getFile(link, filename, device):
    try:
        html = urllib2.urlopen(link)
        soup = BeautifulSoup(html)
        form = soup.find("form", {"class":init_vals["form_post_class"]})
        ticket = form.find("input", {"name":init_vals["input_name"]}).get("value")
        params = {"ticket":ticket, "accept":init_vals["accept"]}
        cookies = cookielib.CookieJar()
        opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cookies),MultipartPostHandler.MultipartPostHandler)
        opener.addheaders = [("User-agent",init_vals["User-Agent"]),
                            ("Content-Type",init_vals["Content-Type"]),
                            ("Referer",link)]
        f = opener.open(link, params)
        #device_sourceディレクトリ作成
        dir_name = device + "_sources"
        os.chdir(os.path.dirname(os.path.abspath(__file__)))
        current_dir = os.getcwd()
        if os.path.isdir(dir_name) != True:
            os.mkdir(dir_name)
        #device_sourceディレクトリへ移動
        os.chdir(dir_name)
        #ファイル書き込み
        fw = open(filename,'wb')
        print u"現在 %s をダウンロード中..." % filename
        fw.write(f.read())
        fw.close()
        #ファイル展開
        ft = tarfile.open(filename,"r")
        print u"現在 %s を展開中..." % filename
        ft.extractall("./")
        ft.close()
        #元のディレクトリへ移動
        os.chdir(current_dir)
    except urllib2.HTTPError, e:
        e.code, e.msg
        pass

def getInf(device):
    #オープンソースソフトウェアのファイル一覧ページの解析
    curl = init_vals["main_url"] + init_vals[device]
    try:
        html = urllib2.urlopen(curl).read()
        soup = BeautifulSoup(html)
        tr_data = soup.findAll("tr", {"class":init_vals["dl_tr_class"]})
        trs = []
        for i in tr_data:
            link = init_vals["main_url"] + i.a.get("href").replace("./index.php?/", "")
            #dateは差分処理を実装しようとして取得したが、そこまでする必要もないと思い放置
            dates = i.findAll("td", {"class":init_vals["td_date_class"]})
            for ix in dates:
                date = ix.renderContents().split("/")
            files = i.findAll("td", {"style":init_vals["td_filename_style"]})
            for iy in files:
                filename = iy.a.renderContents()
            array = dict([["link", link], ["date", date], ["filename", filename]])
            trs.append(array)
            #ファイルの取得
            getFile(link, filename, device)
        return trs
    except urllib2.HTTPError, e:
        e.code, e.msg
        pass

def main():
    #引数の取得
    argvs = sys.argv
    argc = len(argvs)
    #実行
    #現在のディレクトリパスを取得
    c_dir = os.getcwd()
    if argc == 2:
        device = argvs[1]
        if device == "is01":
            getInf(device)
        elif device == "sh-10b":
            getInf(device)
        elif device == "jn-dk01":
            getInf(device)
        else:
            print "usage: #python ./sdasg.py (is01|sh-10b|jn-dk01)\n"
    else:
        print "usage: #python ./sdasg.py (is01|sh-10b|jn-dk01)\n"
    print u"すべてのファイルの取得・展開が終了しました。"

if __name__ == '__main__':
    main()

こちらからもスクリプトをDLすることができます。

更新履歴:
Ver. 0.3: 気づいた部分のスペルミス修正
Ver. 0.2: UbuntuなどのLinuxで動作しないバグを修正
Ver. 0.1: とりあえずリリース

beautifulsoupが3.0.1から3.2.0に変わったらHTMLParseErrorなくなってた！

2010-12-03T01:13:00.003+09:00

beautifulsoupが3.0.1から3.2.0に変わったらHTMLParseErrorなくなっていました。

そういえばアップデートしてないなーとか思いながらeasy_installから実行したら、そうなっちまった。

良いことなのか悪いのか、

間違いなく例外とかfrom importとか書き換えないと行けない場所が出てしまった。

しかし、パースエラーあった部分が問題なくパースされるようになったりどっこいどっこいなのかな。

で、まぁアップデートによって

from html5lib import HTMLParser
from html5lib import treebuilders
from BeautifulSoup import HTMLParseError

try:
 soup = BeautifulSoup(html)
except HTMLParseError, e:
 parser = HTMLParser(tree=treebuilders.getTreeBuilder("beautifulsoup"))
 soup = parser.parse(html)

とかやって別なパーサーでエラー部分を除去って貰う形をとっていたことが必要なくなったのかな？

ということで前回書いた記事「BeautifulSoupでHTMLParseErrorが起きた時の対処」もこんなことやれば良かったのかな？

まぁまとめるとアップデートしとけ(ﾟДﾟ)ｺﾞﾙｧ!! ですね・・・ｗ

UnicodeEncodeError: 'ascii' codec...が出てしまった。

2010-11-05T22:29:00.000+09:00

UnicodeEncodeError: 'ascii' codec can't encode characters in position 3-4: ordinal not in range(128)

Pyscripterの環境で弄くり回していたのだが、↑のようなエラーが吐かれました。

よく分からないことにPythonインタプリタに直接投げた場合はそのようなエラーは吐かれないんですよね。

で、

問題解決しました。

凡ミスというか、恥ずかしいミス。

Pathにマルチバイトコードが入っていたんですね。

ディレクトリ名やファイル名に日本語等の名前をつけちゃうと起こるみたいです。

で、

なんでなったのかというと。

普段からファイル名やディレクトリ名にはマルチバイト使わないようにしてるのですが、

ちょっとしたことからいつも保存している場所から別の場所に保存していて、それに気づかなかったという落ちでした。

気づくまでに時間掛かりましたよ。

ええ。

うん、こーいう問題は俺だけじゃなくて他の人もやってしまってる見たいですよ。

こちらにその指摘があります。(ソース)

~~でもさ、Pyscripterさんもそのへん放置しないでさ。何とかしてくださいよ…~~

BeautifulSoupでHTMLParseErrorが起きた時の対処

2010-11-04T21:16:00.005+09:00

BeautifulSoupでスクレイピングしていたとき、「bad end tag: u""」というHTMLParseErrorが起きてしまった。

これから研究でぶち当たっていきそうなのでとりあえずメモ。

結果から言うと単純に例外処理で該当部分を書き換えてしまえばいいのだ。

#!/usr/bin/env python
# -*- coding: utf-8 -*-

import urllib2
from BeautifulSoup import BeautifulSoup
from HTMLParser import HTMLParseError

def fix_html(html):
    #UTF8に強制変換
    html = html.encode("utf-8")
    try:
        soup = BeautifulSoup(html)
        return soup
    except HTMLParseError,e:
        emsg = e.msg
        #無理矢理、問題の該当箇所を抽出し空文字列に置換
        emsg_start = emsg.find('u"')
        rpl_str = eval(emsg[emsg_start:]).encode("utf-8")
        html = html.replace(rpl_str,u"")
        #再帰的処理
        return fix_html(html)
    except e:
        raise e

def main():
    try:
     set_url = "#適宜URLを"
     html = urllib2.urlopen(set_url).read()
        print fix_html(html)
    except urllib2.HTTPError, e:
     e.code, e.msg
     print "%s is not existed." % set_url

if __name__ == '__main__':
    main()

こんな感じだろうか。
やってはいけないことをしています。それは問題箇所を無理矢理抽出して置換していることです。
なにか良い方法あると思いますが、考えつかなかったのでこんなかんじにしちゃいました＾＾；

arm-Ubuntuのビルド（qemu用

2010-10-27T21:18:00.001+09:00

ちょっとarm触る必要あったのでUbuntuでいくかと。

ビルドはいつも通りUbuntuで行います。はい。

ちなみに10.10です。もしかしたら、それ以前ではうまくいかないかもしれません。

んでは。

あ、今回QEMU上で動かすVer.は9.04です＾＾；

QEMU用のimg作成
#sudo mkdir arm-ubuntu
#cd arm-ubuntu
#sudo wget http://people.ubuntu.com/~ogra/arm/build-arm-rootfs
#sudo wget http://ports.ubuntu.com/ubuntu-ports/dists/lucid/main/installer-armel/current/images/versatile/netboot/vmlinuz
#sudo chmod 744 build-arm-rootfs
#sudo ./build-arm-rootfs --fqdn ubuntu --login ubuntuuser --password hogefuga --notarball --imagesize 1G
※fdqn、login、passwordは任意のものに変えること。imagesizeも任意に変えるといいと思います。

QEMU上でUbuntuを起動
#cp qemu-armel-<タイムスタンプ>.img qemu-armel.img
※cpで元残すのも良いし、mvで名前変えるのもよし。
#sudo qemu-system-arm -M versatilepb -cpu cortex-a8 -kernel vmlinuz -hda qemu-armel.img -m 256 -append "root=/dev/sda rootwait"

起動後にやること
#LANG=C
#sudo vi /etc/network/interfaces
auto eth0
iface eth0 inet dhcp
#sudo ifconfig eth0 up
#sudo dhclient eth0
#sudo apt-get update

これで一通り使える状態になりました。

お疲れ様でした。

番外編というか、ぶち当たった壁。

本当は最新のUbuntuをビルドして使いたかったのですが、うまく行かなかったわけです。
というのも、このページにある「If development machine is running Lucid or Karmic」を一通りやってみたのですが、2nd stageでエラーでてうまーくいかないんですよね。

2時間近くうにゃうにゃ悩んだあげく上の手段を執ったわけです。

なんとかならないのかなーｗ

document.getElementsByClassNameがChromeで実装されていた。

2010-10-24T11:29:00.000+09:00

いつに実装されたかは知らないがなんか使えた。(ソース)

AndroidでSkypeAppが復活したのでさっそく

2010-10-05T19:33:00.004+09:00

やっと来ました！！

今年初めに一部のキャリアでしかSkypeを使用することが出来ないようになってしまいましたが、いよいよ復活です！

ただし、日本のプロバイダー(ストア固有ID)情報だとマーケットで表示することが出来ませんのでちょっとしたてこ入れをしてあげないといけません。

ということで、手順です。（root権限が必要です。）

用意するものはMarketEnablerです。こちらからDLしてインスコしてしまいましょう。

あとは、MarketEnablerを起動して「Setting List -> T-Mobile」のところで長押しすればプロバイダー情報を偽装することが出来ます。（プロバイダー情報のバックアップは行っておいてください。）

そしたら、こちらのQRコードからアクセスを行いSkypeのインストールを行っちゃいましょう！！

以上で終了です！お疲れ様でした！！

あ、DoCoMo回線だと使えないからね。