suka4's memo

Python実践データ分析100本ノックを読んでみてメモ

2020-09-25T22:25:00.002+09:00

Python実践データ分析100本ノックを読んでいて、そのまま写経してるとwarningが出てくので、その対応メモ。

warningが出るコードは、下記のコード

customer_clustering['cluster'] = clusters.labels_

で、waringの内容は、

SettingWithCopyWarning: 
A value is trying to be set on a copy of a slice from a DataFrame.
Try using .loc[row_indexer,col_indexer] = value instead

See the caveats in the documentation: https://pandas.pydata.org/pandas-docs/stable/user_guide/indexing.html#returning-a-view-versus-a-copy

正直、あんまりDataFrameわかってないけど、どうやら値のセットの仕方が悪いよう。

concatするようにしたらwarningは出なくなった。

customer_clustering = pd.concat([customer_clustering, pd.DataFrame({'cluster': clusters.labels_})], axis=1)

↓のパターンでも同様のwaringが出た。これは、一ヶ月前の日付を入れていくのをforで回している処理。

for i in range(len(exit_customer)):
    exit_customer['exit_date'].iloc[i] = exit_customer['end_date'].iloc[i] - relativedelta(months=1)

これはmapを使う。

exit_customer['exit_date'] = exit_customer['end_date'].map(lambda x: x - relativedelta(months=1))

warningがでて困ったりはしてるけれど、内容としては面白く手を動かしながら理解を進めている。

SeversMan VPSにCentOS 7にした

2020-08-04T15:23:00.003+09:00

VPS借りたままでほぼ活用してないのがあったので、CentOS 7をセットアップしなおした。

前にやったときの設定を見つつ、sshの設定を行う。

Localeの設定は、　 /etc/sysconfig/i18n ではなく、　 /etc/locale.conf に変わっていた。

管理画面用に↓が動くようになっているのでそれを止める。

python /usr/local/share/ajaxterm/ajaxterm.py --port=8022 --uid=nobody

systemd disableで止められなかったのでファイルを削除する。

rm /etc/systemd/system/multi-user.target.wants/ajaxterm.service

rebootしてajaxterm.pyがうごかなくなったことを確認。

httpdもいらないので止めておく

 systemd disable httpd
rm '/etc/systemd/system/multi-user.target.wants/httpd.service'

まずはそんな感じで。

QuantXをやってみて6ヶ月経った

2020-06-02T23:31:00.003+09:00

QuantXを始めてから、6ヶ月たったので振り返ってみる。
何が言いたいかっていうと、あれの影響でかなりのマイナスになってるってこと。

マイナスなのは良いのだけれど、2ヶ月くらいシグナルがなかったので、面白みもなかった。
道楽でやっているので、損があってももっと売買をしたかったという感じ。
まぁそれは購入したアルゴリズム次第なのだろうが。

そもそも自分でアルゴリズムを作ってみたいというのもあったのだけれど、全く手を着けられていない。
ボリンジャーとかゴレンジャーとか知識も足りないというところからは抜け出せず興味が他にいってしまった感じ。
いつか興味を取り戻しリベンジしてアルゴリズムを開発してみたいという所存。

で、実際は適当に株を買っていたので今もマイナス20%なんてことになってはいない。
スプレッドシートで管理してるのだと今はなんとかプラスになったあたり。

一時期はQantXよりも30%と損失を出してしまっているのは、機械と違って損切りの下手さがわかって面白い。
従っていたら益を得られることもなかったが、もしかしたら損失を増やしてしまっていたかもしれない。
玉々、自分で判断して売買したものが良い結果に繋がっているだけなので。

AIの判断と人間の感覚の両軸を大事だなと。
淘汰じゃなくて共存の道を探して生きたいと思いました。

バカとマスクとランニング

2020-05-04T23:59:00.000+09:00

皇居ランナーはマスクを着けてと呼びかけがあったので、実際にマスク着用してランニングしてみて得た知見をメモしておく。

ランニングは不要不急の外出なのか？

「散歩やジョギングも許される」とも語った。
施設・イベント制限、知事が要請　「都市封鎖」はできず―緊急事態宣言・新型コロナ

お一人での散歩やジョギングなど、人との距離が離れた屋外での活動は、問題ありません。運動不足にならないように注意して下さい。
全地域の皆さまへ　緊急事態宣言で変わること・変わらないこと（4/16更新版）

緊急事態宣言が出されたときには、こうした情報をみて私としては、ランニングは自身の健康のために行っても良いと認識している。（ランニングとジョギングのペースは人によって違うが、他人からみてジョガーとランナーを見分けることもできないし、この記事内では同じものとして扱う。）マスクの着用については言及がなかったし、密集を避ける時間帯を選んで走っていたので、マスクは着用せずに皇居を走っていた。もちろん一緒に走る仲間もいるわけではないので、一人である。ペースは4:30/1km前後で走ってるので、他の人と密接して並走することもないし、抜くときは距離を空けてスピード上げて、抜かれるときはスピード落としてと距離をとるようにもしている。

密を避けているということで下げているリスクを、マスクをつけて走ることでさらにどれだけ下げられるかというと、微々たるものではないかと考えている(※)ので、これまではマスクは着用せずに走っていた。
(※)科学的裏付けもなく、個人的な主観に基づくものである。

皇居ランナーはマスク着けて！

区はマスク着用のほか、ランニング時は周りのランナーや歩行者と十分な間隔を空けること、区外から来ることの自粛などを求めている。
皇居ランナー、マスク着けて　東京・千代田区が呼びかけ

「マスクをしていないランナーがいて、感染が怖い」といった意見が相次いで寄せられたことから、
...（略）...
「マスクを着けて走ると息苦しいかもしれませんが、無理のないペースで走っていただき、健康づくりと感染拡大防止を両立してほしい」と話していました。
“皇居ランナー” マスク着用と十分な間隔を新型コロナ対策

これらの報道をみて思ったことは、主語がデカいので、密を避けている私も含まれてるなというやるせない気持ち。リスクをゼロにするために自粛しようという人たちの力が自分のところにも来てしまったなと。

でも、みんなが大変なときなのでそういった人たちがいることも理解してるし、そういう人たちと争いたいわけでもないし、ただ走りたいだけなのでマスクを着けて走ることにした。

使い捨てマスクを着けて走ってみた

マジで死んだ。汗かいてくると、マスクが顔にへばりついて呼吸がめちゃくちゃ苦しいし、酸素が足りない感じがしてヤバい。

マスクを着用してのランニングで注意が必要なのが脱水症状だ。
マスクを着用してのランニング　どんなリスクがある？

やっぱり、マスクを着けて走ることであがるリスクもあるんだよね。脱水症状になりそうとは思わなかったけれど、酸欠で思考がボーッとする感覚はあった。マスク着用との因果関係はないかもしれないが、帰り道に自転車とぶつかりそうになったりもした。普段はそんなことないのに。

そして、いつもは息切れしないようなペースで走っても、マスクをしてるとゼェハァゼェハァと息が切れてしまう。

マスクもしてないランナーがハァハァいいながら駆け抜けていく！アホランナーええ加減にせぇーよ！
たむけん　マスク無しランナーから反論浴びバトル「悪ですよ」「誰かを死の危険に」

マスクしてハァハァいいながら駆け抜けてくのと、マスクしないで息も切らさずに駆け抜けてくのどっちが良いのだろうかと思ったりもするけれど、これは多分前者なんだろうな。何かを撒き散らしてる感があるのは、個人的には前者であった。マスクして息も切らさないのが良いのはわかるが、マスクしたら息は切れるのは仕方ないと感じた。じゃあ、走るなと言われるかもしれないが、双方が納得行く落とし所を見つけたいところ。

布マスクを着けて走ってみた

使い捨てマスクを走ってみた結果はとても苦しくて、マジで死んだし、使い捨てマスクの消費を早め、マスク購入の行列の密を作る一員にならないといけないのも本意ではないので、どうしたら良いものかと考えた。布のバフが良いというのも目にしたが、効果があるのか科学的な根拠は示されてないし、マスクしろと言ってる人がそれで納得してくれるかわからないし、布のバフはやめた。そこで、家を見回したら送っていただいたマスクがあることに気づいた。これだ！これなら、洗ってまた使えるので、購入の行列に並ぶリスクを早めることもない。家の隅で無駄にしてしまっていたことが恥ずかしい。

で、布マスクを着けて走ってみた結果としては、使い捨てマスクよりは苦しくなかった。

「空気を吸うことがなかなか難しいので、マスクを替えました」と、皮肉まじりに説明した。
安倍首相が不快感「アベノマスク」装着の議員質問に

こんなことを言われていることもある布マスクであるが、特に問題は感じなかった。顔にべったり張り付く感じもないし、なかなか良いのではないかと思う。息苦しくないということはマスクとしての効果が薄いのではないかと思う人もいるかもしれないが、私はマスクの効果については専門家ではないのでわからない。ランニング中に着けて息苦しいと感じたか否かというただの感想である。感覚なので個人差もあるであろう。

咳やくしゃみと同じく、ジョギングの時も周囲への配慮、ジョギングエチケットを心がけましょう
【注意喚起】外出自粛後でもジョギングする人に医学者・山中伸弥がコメント / 息でウイルスまきちらす可能性を危惧

私として大事なのは、ジョギングエチケットというものを守って、周りの人を不快にさせないことであって、マスクを使ってリスクをゼロにすることではない。なので、これからは布マスクを使ってランニングしようと思う。

まとめ

ランニングバカには布マスク
周囲への配慮はとても大事
糖質とリスクはゼロが良い

[Ruby] 負の数の商と余り

2020-03-15T20:59:00.003+09:00

同僚もすなるatcorderといふものを、私もしてみむとてするなり。
ということで、同僚が勧めてるので、atcorderをやってみることにした。
Rubyを使って解いてみたけど、言語によって計算の違いがあるのを知らなかった。

C++の下記のコード

#include 
using namespace std;

int main() {
  cout << -1 / 3 << endl;
  cout << -1 % 3 << endl;
}

出力は、

0
-1

Rubyの下記のコード

print "#{-1 / 3}\n"
print "#{-1 % 3}\n"

出力は、

-1
2

借金一万円を３人で割ると、
C++だと、一人あたり０円返して、借金１万円が残る。
Rubyだと、一人あたり1万円返して、２万円が残る。

普段使ってても意外とちゃんと理解してないことあるなという気づき。

[Go] squirrelのRunWithに*sql.Connを渡したい

2020-02-29T15:14:00.000+09:00

QueryBuilderとしてsquirrelを使ってみたけど、*sql.ConnをRunWithに渡せなかった。
普通にToSql()して、conn.QueryContextに渡してやれば良いんだけど、どうしても渡したい。そんな気分。

渡せない理由が、下記エラー。

*sql.Conn does not implement squirrel.BaseRunner (missing Exec method)

私は、SelectBuilderのQueryContextを使いたいだけで、QueryもExecも使わないのだけれど。

なので、おかしなものを定義してみる。

type connWrapper struct {
 *sql.Conn
}

func (c *connWrapper) Exec(query string, args ...interface{}) (sql.Result, error) {
 return nil, nil
}

func (c *connWrapper) Query(query string, args ...interface{}) (*sql.Rows, error) {
 return nil, nil
}

で、前に書いたsql_calc_found_rowsのコードはこんな感じになると。

rows, err := sq.
  Select("*").
  Options("sql_calc_found_rows").
  From("users").
  RunWith(&connWrapper{conn}).QueryContext(ctx)

動いたけど、これじゃない感はあるな…

[Go] sql_calc_found_rowsでハマる

2020-02-09T09:54:00.001+09:00

sql_calc_found_rowsを使って件数を取る処理を書いてハマった件について。
localで動かしてる分には問題なく動いてるように見えたんだけど、
server上で動かすとちゃんと返したり、0件になったりする。

原因としては別のconneｃtionが使われて、　select found_rows()　が0を返していた。
同じconnectionが使わないといけないので、Connを使う必要があった。

 ctx := context.Background()
 conn, _ := db.Conn(ctx)
 defer conn.Close()

 rows, _ := conn.QueryContext(ctx, "select sql_calc_found_rows * from users")
 defer rows.Close()

 var rows uint32
 _ := conn.QueryRowContext(ctx, "select found_rows()").Scan(&rows)

エラー処理は省略してるけど、だいたいこんな感じにすることで、問題は解決。

[Go] mysql threadが増え過ぎてしんだ

2020-01-05T13:16:00.000+09:00

以前、PHPで書いたものを勉強がてらにGo言語で書いてるのだが、そこで失敗した件について。
失敗内容は掲題の通り。監視もしてないのでなかなか気付かなかったが、数時間はサーバーが死んでいた。
グラフ見たらすごいことになっていたのがわかる。再起動後も順調にあがるのでロールバックしたのだった。

で、原因は単純なことなのだけれど、rollaback処理が漏れていた。

バグを含んだコードはこんな感じの存在確認してからinsertするような処理だった。
簡易化したので、不要な処理に見える、unique制約使えというツッコミをしたくなるな…


func (d *db) CreateUser(id, name string) error {
 var err error
 tx, err := d.Begin()
 if err != nil {
  return err
 }
 defer func() {
  if err != nil {
   tx.Rollback()
  }
 }()

 var existID string
 err = tx.QueryRow("select id from user where id = ?", id).Scan(&existID)
 if existID != "" {
  return xerrors.New("The id is already exist")
 }
 if err != nil && !xerrors.Is(err, sql.ErrNoRows) {
  return err
 }

 if _, err = tx.Exec("insert user (id, name) values(?, ?)", id, name); err != nil {
  return err
 }

 tx.Commit()
 return nil
}

deferでerrがnilじゃないときはrollbackするようにしていた。
で、存在する場合にreturnすると、rollbackされないバグだった。
errに代入して、返すようにしてバグは解消。

 if existID != "" {
  err = xerrors.New("The id is already exist")
  return err
 }

tx.Rollback()をreturn errの前に書いてたのをdeferに移して起きたバグ。
Goでのerror処理周りになかなか慣れないという言い訳。

スプレッドシートとGASで株取引の管理が捗る

2019-12-05T21:58:00.000+09:00

QuantXで株売買を始めたので、日々の資産や損益率の推移を見たくなった。
スプレッドシートとGoogle Apps Scriptを使って管理したら、中々に捗ったというお話。

取引の内容は自分で手入力するのを前提とする。

まずは、その日の資産の評価額を出せるようにする。
IMPORTXML　を使って、Yahooファイナンスから取ってくる。

=IMPORTXML("https://stocks.finance.yahoo.co.jp/stocks/detail/?code="&A1,"//td[@class='stoksPrice']")

A1 に証券コードを入れておくと、その時の価格が取れる。
価格が取れれば、手入力した株数と掛けて評価額を計算できる。

次にその日の評価額を別のシートに追記できるようにする。
それには、Google Apps Script（GAS）を使う。
評価額シートの2行目に投資額, 評価額, 損益, 損益比率が記入されていて、
それを日毎推移シートに追記していくスクリプトはこんな感じ。

function myFunction() {
  var input = SpreadsheetApp.getActive().getSheetByName('評価額');
  var total = input.getRange('A2').getValue();
  var ammount = input.getRange('B2').getValue();
  var diff = input.getRange('C2').getValue();
  var per = input.getRange('D2').getValue();
  
  var output = SpreadsheetApp.getActive().getSheetByName('日毎推移');
  output.appendRow([Utilities.formatDate(new Date(), 'Asia/Tokyo', 'yyyy/M/d'), total, ammount, diff, per]);
}

これをトリガーで毎日起動するようにする。

で、実際にグラフにしてみるとこんな感じ。

QuantX のシグナル以外の取引もしてるので昨日晒したシミュレーションとは違う。
税金も考慮してるので、売りのあとのマイナスがシミュレーションよりも大きいのもある。

10年くらい前に株始めたときにエクセルで上手くやれなくて諦めたけど、
スプレッドシートとGASがあればかなり捗り、良い時代になったものだ。

QuantX をやってみた

2019-12-04T22:47:00.000+09:00

再開してからは投資ブログみたいな様相を呈しているが、今回も投資ネタ。
QuantXを始めてみたので、その実績シミュレーションと感想を。

QuantXはアルゴリズムで売買のシグナルを送ってくれる君。
株取引自体は、シグナルを参考にして、自分自身で証券口座から行う。
アルゴリズムは自身で開発することもできるし、買うこともできる。
アルゴリズムは買い切りで、シグナルを送るのにはコストはかからない。

始めたのは、2019年10月下旬頃。
ロボアドバイザーを運用してみて、任せっぱなしは面白みに欠けたから。
なので、投資というよりは、趣味として始めてみたといった感じだ。

アルゴリズムは、クーポン対象の[公式] 2019秋 SC BEST50銘柄小資金版を購入してみた。

で、損益シミュレーションはこちら。初めは好調でアルゴリズム代がペイしたと思ったのだが…

QuantXでみるものと、実際の取引の単価は違うのだが、大体マイナス1.5％程度。
ついでに言うと、損益シミュレーションの方でも、税金を考慮して欲しいところ。

感想としては、ロボアドバイザーと違って、遊んでる感があって良い。
アルゴリズムを自分で書くこともできるので、それもまた楽しい。
始めたばかりなので、投資として良い結果を出していけるかはまだわからない。
でも、エンジニアの道楽としてはQuantXは面白いかなと。

WealthNavi 運用実績

2019-12-03T21:50:00.000+09:00

今日はWealthNaviの運用実績を晒していく。

WealthNaviは簡単にいうと、AIに資産運用をおまかせする君。
THEOとの違いはアルゴリズムが違ったり、手数料が違ったり。
ググった方がすぐに正確な情報見つかるし、説明はしない。

始めたのはTHEOと同じく2017年11月頃。
THEOと同様の損益の比率の推移がわかる表がない。

始めて数ヶ月で倍プッシュしたのがわかる図なのはご愛嬌。
ちなみに、この時期にTHEOも同様に倍プッシュしています。

悪いときにはコツコツ積立た額が吹っ飛んでいたのがわかる。
また、そこから持ち直して、現在は6%程度のプラス。

WealthNaviとTHEOを比べた感想としては…
THEO Color Palette始まってからTHEOの方が手数料安くて良い感じ。
運用プランの変更回数もTHEOの方が多く気持ち的に変えやすくて良い感じ。
今、THEOの方が成績が良いので、良く感じているだけというのは否めない。

これから始める方は、ご自身の責任で良く考えてください。
何かの参考になれば、幸いです。

THEO 運用実績

2019-12-02T20:34:00.002+09:00

更新を再開することにしたけど、何を書くかも決めていない。
まずは更新していなかったときに始めてみたTHEOの運用実績を晒してみる。

THEOは簡単にいうと、AIに資産運用をおまかせする君。ググった方が早いし説明はしない。
手数料がそれなりにするが、思考停止しておまかせできるのでコストには見合ってるというのが私の判断。
始めるにあたって、誰かの運用実績を参考にしたので、今回晒す実績も誰かの役に立てば幸いだ。

始めたの2017年11月頃なので、運用は約2年間。
毎月、定額で積立も行っている。その運用実績がこちら！！

悪いときはマイナス10%程度だったけど、今はプラス10%程度に持ち直している状態。

これを良いとみるか、悪いとみるかは各自のご判断にお任せします。

同時にWealthNaviも始めていたので、そちらの運用実績は後日。

更新を再開

2019-12-01T13:14:00.003+09:00

12月1日、世間の一部ではadvent calendarで賑わい始めたように見える。

ふと、このブログのことを思い出してしまった。
みてみると3年更新してない状態が続いている。

書くことがなくなって書かなくなったのか
余裕がない時期があって書かなくなったのか
正直なところ更新しなくなった理由は覚えていない。
このブログのことを考えることもほとんどなかった。

せっかく思い出しので、また何か書いていこうと思う。
とりあえず今日は宣言だけ。

以上。

[Raspberry Pi 3] 赤外線を送信できず

2016-12-13T18:53:00.001+09:00

lircを使って赤外線の受信をしてたけれど、記録が上手くできなくてググッてみた。
LIRCを諦めようとのことだったので、WiringPiをトライしてみた。

参考にあるプログラムを拝借してscanirで受信を記録すると、何やらそれっぽいファイルができる。
それを使ってsendirで送信しようとするのだけれど、反応してくれないので送れていないのだろう。
慣れないことで行き詰まるとノウハウがないので、どこがいけないのかあたりをつけることができないな。

いったん諦めよう。

参考
・赤外線学習リモコン―赤外線信号送信・受信（改）～ラズベリーパイ研究室
・赤外線リモコン信号受信・送信ラズベリーパイ研究室
・Raspberry Pi 3 model B でエアコンをコントロールした話

[Raspberry Pi 3] gcc6を入れる

2016-12-04T13:22:00.002+09:00

なんだかコンパイルが失敗することが多いのでgcc6をインストールすることにした。

今入ってるバージョンは↓

gcc version 4.9.2 (Raspbian 4.9.2-10)

Raspberry Pi - Install GCC 6 and compile C++14 and C++17 programsを参考にした。

/etc/apt/sources.listのjessieをstretchに置き換えてから、

$ sudo apt-get update
$ sudo apt-get install gcc-6 g++-6

あとは、4.9へのリンクになっているので6へのリンクにしてやった。

$ cd /usr/bin
$ sudo rm gcc g++
$ sudo ln -s gcc-6 gcc
$ sudo ln -s g++-6 g++

バージョンは↓になって、エラーでビルドできなかったことは解消された。

gcc version 6.2.0 20161109 (Raspbian 6.2.0-13+rpi1)

[Raspberry Pi 3] 赤外線を受信する

2016-11-27T14:31:00.000+09:00

Raspberry PIでエアコンをつけてみようと思ったので、まずは赤外線を受信するところから始めてみる。
受信にはさっき秋月電子で買って来た赤外線リモコン受信モジュール　ＰＬ－ＩＲＭ０１０１（３８ｋＨｚ）シールド付を使う。
なんだか他にも色々と赤外線受信モジュールはあった中から、これを選んだ理由は特にない。

まずは、lircをインストールする。

# apt-get install lirc

/boot/condig.txtに下記を設定を追加する

dtoverlay=lirc-rpi,gpio_in_pin=21

設定したらラズパイの再起動。
したら、受信させる。

$ mode2 -d /dev/lirc0

モジュールにむかってリモコンから赤外線を飛ばして↓のようにpulseとspaceが流れていけば、受信は成功している。

space 441
pulse 416
space 1300
pulse 416
space 442
pulse 416
space 1300
pulse 416
space 1300
pulse 416

次にリモコンの信号を記録する。

# irrecord -n -d /dev/lirc0 aircon.conf

・・・
Please send the finished config files to  so that I
can make them available to others. Don't forget to put all information
that you can get about the remote control in the header of the file.

Press RETURN to continue.


Now start pressing buttons on your remote control.

It is very important that you press many different buttons and hold them
down for approximately one second. Each button should generate at least one
dot but in no case more than ten dots of output.
Don't stop pressing buttons until two lines of dots (2x80) have been
generated.

Press RETURN now to start recording.
..irrecord: no data for 10 secs, aborting
irrecord: gap not found, can't continue

あれ、上手く行かないな。

[Raspberry Pi 3] Lチカってみた

2016-05-06T14:27:00.000+09:00

先日注文していた電子部品(抵抗/ポテンショメーター/LED他)キットが届いていた。今日届く予定だったけれど、すでに2日前にポスト投函済みだったのに気づいてなかった。届いたのはいいけど、抵抗値がわからなかった。なんかマジックで色がついてるので見る人が見ればわかるのかもしれないけれど。

Lチカはググれば色々と出てくるので、それを見ればサンプルコードはわかるけどcodezineの記事が割とわかりやすかった。RPi.GPIOを使うのでインストール。ドキュメントはsourceforgeのが公式かな？情報はあんまりないけど。

$ sudo pip install rpi.gpio

コードは参考にしたのとほぼ同じだけど、後述したwiringpiとの比較のため載せておく。

#!/usr/bin/env python
# -*- coding:utf-8 -*-

import RPi.GPIO as GPIO
import time

LED = 11
GPIO.setmode(GPIO.BOARD)
GPIO.setup(LED, GPIO.OUT)

for i in range(3):
    GPIO.output(LED, GPIO.HIGH)
    time.sleep(1.0)
    GPIO.output(LED, GPIO.LOW)
    time.sleep(0.1)

GPIO.cleanup()

無事にLEDを光らせることができました。

で、WiringPi-Pythonを使って同様に光らせてみる。wiringpi2というのもあるけどdeprecatedのようだ。

まずはインストール。

$ sudo pip install wiringpi

で、RPi.GPIOと同様のことをやったのが下記コード。

#!/usr/bin/env python
# -*- coding:utf-8 -*-

import wiringpi
import time

LED = 0
wiringpi.wiringPiSetup()
wiringpi.pinMode(LED, wiringpi.OUTPUT)

for i in range(3):
    wiringpi.digitalWrite(LED, wiringpi.HIGH)
    time.sleep(1.0)
    wiringpi.digitalWrite(LED, wiringpi.LOW)
    time.sleep(0.1)

WiringPiの例を見ながらやったけど、pinModeで指定するのが0になるのがよく分かっていない。

次は何をしようかな。

[Raspberry Pi 3] DHT11で温度と湿度を取得

2016-05-02T13:08:00.000+09:00

まずはLチカしてみようと何となく秋月電子に行って適当に買ってきたけど、抵抗を買わなかったのでできなそう。とりあえず、Amazonで電子部品(抵抗/ポテンショメーター/LED他)キットポチる。ちょっと量が多いけど、我慢する。やっぱり、事前に調べることは重要だ。

Lチカができないので、一緒に買った温湿度センサのDHT11を使ってみる。
ジャンパーコード（オス－メス）
まずは、I2Cを有効にする。Advanced OptionsからI2Cを有効にしてreboot。

$ sudo raspi-config

そして、ブレッドボードとジャンパーコード（オス－メス）を使ってRaspberry Pi 3とDHT11センサを接続する。

「温湿度センサDHT11をRaspberryPiに接続しグラフ表示」を参考にさせてもらったので、まねしてadafruit/Adafruit_Python_DHTを利用してみる。adafruitはECサイトっぽい。ソースコードを公開してくれているのはありがたい。

pi_version()あたりのコード見た感じだと、raspberry pi 3の場合はないけど大丈夫かな？？判定に使っている/proc/cpuinfoを見るとPi 2と判定されるっぽい。

$ grep Hardware /proc/cpuinfo 
Hardware : BCM2709

とりあえずgit cloneして、exampleを実行してみる。

pi@raspberrypi:~/Adafruit_Python_DHT/examples $ sudo python AdafruitDHT.py 11 4
Temp=11.0*  Humidity=147.0%

なんか値はとれているけど、間違っていそうだ。そんなにジメジメしていないと思う。

Raspberry Pi 3を買ってみた

2016-04-17T14:00:00.001+09:00

なんとなくRaspberry Pi 3が欲しくなったのでAmazonでRaspberry Pi 3 Model B 本体+ヒートシンク+専用ケース 3in1キット (透明ケース)を購入。MicroSDが必要なのに、調べてなかったので準備してなかった。カード自体は余っているけど、書き込めるものがないので、ヨドバシに行ってELECOM カードリーダライタ超高速USB3.0対応 SD系専用レッド MR3-C004RDをGET。2年以上利用してなくポイントがなくなってた。。

MicroSDの準備

まずは、RaspbianのダウンロードページからRASPBIAN JESSIE LITEをダウンロードした。手順に従ってMicroSDにイメージをインストール。

あとは、Raspberry Pi 3にMicroSDカードを挿入して起動。
$ sudo raspi-config
で、SSH接続できるようにして接続の確認。

とりあえず、何ができるかもよくわかってないのに購入しちゃったので、もうちょっと色々調べてみよう。

Nexus 5X買ったのでdocomoのメールをgmailに設定してみた

2016-01-31T23:22:00.000+09:00

Nexus 5Xではspモードメールアプリが使えないということなので、gmailアプリで見れるように設定してみたけれど、かなり時間かかった。docomoショップでもらった紙に書いてあった手順に従ってみたが、まぁ色々とわからないことも多く大変だった。

手順にはdocomo IDのパスワードを入力とあるけど、dアカウントに名称が変わっているらしいので、とりあえずdアカウント発行する。そのIDとパスワードを入れてgmailのアカウント設定をするが接続できない。時間的な問題か？と思いとりあえず放置して、翌日またトライすることにした。

で、翌日になっても状況変わらないので、時間の問題じゃないようだ。gmailじゃない別のメールアプリもいくつか試してみたが同様に接続できない。

どうやらドコモメールの利用を設定するが必要そうなので、設定してみる。

またエラーが出る…orz

ドコモクラウド設定の方でドコモメールを利用に変えたら、

メール設定の方でドコモメールを利用にできた！そして、Gmailでメールも受信できた。ドコモクラウドは本当に関係あったかは不明だが。

docomoの設定周りは難しい。何より管理画面が分かりにくい。とりあえず疲れた。頑張って設定したけど、あんまり必要ないんだよな・・・

[Rails] 遅延評価とか、any?で発行されるSQLとかでハマった件

2015-09-06T15:28:00.001+09:00

コントローラーがファットでダサいから、ヘルパー作って処理をまとめようとしたら、勉強になったのでメモ。

コントローラーでeachして色々と処理をしている処理がいくつかのコントローラにあったので、リファクタしてみることに。

まず、とあるページでヘルパーに移してみて特に問題なかったので、全ページ対応してみた。するとエラーがでるページもでてきた。

同じように対応したのに、なぜ？って思って調べてたら、遅延評価とany?で発行されるSQLが原因だった。リファクタ前のコードではコントローラーで、load済みになっていたから、any?してもSQLが発行されてなかったけど、ヘルパーに移したせいでloadされていなくてカウントのSQLが発行されるようになってしまったのだ。で、元々のSQLがGROUP BYしてて、ORDER BYで集約関数使った存在しないカラムを指定していたものだから、any?で発行されたカウントのSQLでエラーが発生した。だいたい下記のような感じ。

[1] pry(main)> Tag.select("tags.id,tags.name,count(feeds.id) as count").joins(:feeds).group("tags.id").order("count desc").limit(3)
  Tag Load (2.1ms)  SELECT  tags.id,tags.name,count(feeds.id) as count FROM "tags" INNER JOIN "feed_tags" ON "feed_tags"."tag_id" = "tags"."id" INNER JOIN "feeds" ON "feeds"."id" = "feed_tags"."feed_id" GROUP BY tags.id  ORDER BY count desc LIMIT 3
=> [#<Tag id: 11, name: "監獄">,
 #<Tag id: 24, name: "がっこう">,
 #<Tag id: 3, name: "城下町">]

[2] pry(main)> Tag.select("tags.id,tags.name,count(feeds.id) as count").joins(:feeds).group("tags.id").order("count desc").limit(3).any?
   (0.6ms)  SELECT  COUNT(*) AS count_all, tags.id AS tags_id FROM "tags" INNER JOIN "feed_tags" ON "feed_tags"."tag_id" = "tags"."id" INNER JOIN "feeds" ON "feeds"."id" = "feed_tags"."feed_id" GROUP BY tags.id  ORDER BY count desc LIMIT 3
SQLite3::SQLException: no such column: count: SELECT  COUNT(*) AS count_all, tags.id AS tags_id FROM "tags" INNER JOIN "feed_tags" ON "feed_tags"."tag_id" = "tags"."id" INNER JOIN "feeds" ON "feeds"."id" = "feed_tags"."feed_id" GROUP BY tags.id  ORDER BY count desc LIMIT 3
ActiveRecord::StatementInvalid: SQLite3::SQLException: no such column: count: SELECT  COUNT(*) AS count_all, tags.id AS tags_id FROM "tags" INNER JOIN "feed_tags" ON "feed_tags"."tag_id" = "tags"."id" INNER JOIN "feeds" ON "feeds"."id" = "feed_tags"."feed_id" GROUP BY tags.id  ORDER BY count desc LIMIT 3

で、対応。loadしなくなってSQLが発行されるようになってしまったので、一旦配列にloadすることでムダなカウントSQLを発行させなくて済むようになりました。

[3] pry(main)> Tag.select("tags.id,tags.name,count(feeds.id) as count").joins(:feeds).group("tags.id").order("count desc").limit(3).to_a.any?
  Tag Load (2.0ms)  SELECT  tags.id,tags.name,count(feeds.id) as count FROM "tags" INNER JOIN "feed_tags" ON "feed_tags"."tag_id" = "tags"."id" INNER JOIN "feeds" ON "feeds"."id" = "feed_tags"."feed_id" GROUP BY tags.id  ORDER BY count desc LIMIT 3
=> true

[Rails] C3.jsを使ってグラフを表示する

2015-09-05T17:03:00.000+09:00

以前、勉強で作ったRSSリーダーのRailsアプリにデータが溜まってきたのでグラフで何か可視化したくなってきた。
そんなわけで、C3.jsを使ってチャート表示してみた。

C3.jsはD3.jsをベースにしたライブラリで、簡単にチャートが書けて、カスタマイズもできるし、APIやコールバックも豊富でチャートの更新もできる優れもの。今回はc3-railsというgemを利用した。サンプルもリファレンスもちゃんとあるので、特に使い方を紹介として書く必要もないくらい。折れ線グラフと棒グラフを使ってみたけど、どちらも簡単にできた。

ツールなどに使うと視覚的で喜ばれそうな印象。導入も簡単なのでちょっとした手間で済むので、工数対効果は良さげ。

ビジネスマネジャー検定試験結果来た

2015-08-29T20:19:00.001+09:00

85点で合格してた。合格率が72.6%だったので、落ちなくてよかったなというくらいの感想。

一応、模範解答があったので、ざっと間違った部分を見直した。

機密情報が電子媒体に記録されている場合、秘密管理の要件を充足するための秘密管理措置として、例えば、電子ファイル名やフォルダ名へのマル秘マークを付記すること、・・・パスワードを設定することなどが挙げられる。

この問題、誤りかと思ったら正しいんだね。パスワードは設定するけど、ファイル名に㊙なんてつけたことなかったわ。なんかバカっぽいし機種依存文字だし。わざわざ気になるような名前にして、秘密情報にアクセスさせなくてもいいじゃんと思った。

営業秘密管理指針ってのは知らなかったのでざっと読んでみた。

秘密管理措置の対象者たる従業員において当該情報が秘密であって、一般情報とは取扱いが異なるべきという規範意識が生じる程度の取組であることがポイントとなる。

なるほど、従業員が秘密情報取り扱っているという意識を持たせるためにやるのね。たまには使ってみよう。

とりあえず試験は合格できたので、これまでマネージャーとしてやってきた経験や習得してきた知識が、ある程度は力になったと思うことにする。

[MySQL] ORDER BY FIELD (col_name, val1, val2) 知らなかった・・・

2015-08-02T19:36:00.000+09:00

長年MySQL使ってきたけれど、ORDER BY FIELD (col_name, val1, val2) 知らなかったのですぅ。
まぁ、知らなくても普通にやってこれたけど、最近railsを使っている影響のせいもあってか知ることになった。

railsやっていると先にpluckでidだけ取ってきて配列を加工してその後にデータを取ってくるということあったりする。多分。で、そのときに配列の順番そのままにデータ取りたいなーなんてときもあるけど、そのままfindすると、

mysql> SELECT * FROM students WHERE id IN (4, 5, 2);
+----+--------------+-----------------------------------+
| id | name         | skill                             |
+----+--------------+-----------------------------------+
|  2 | 友利奈緒     | 自分の姿を視界から消す            |
|  4 | 西森柚咲     | 口寄せ                            |
|  5 | 黒羽美砂     | 発火能力                          |
+----+--------------+-----------------------------------+

順番は保持されないので、アプリケーション側でなんとかしないとけないのかーって思ってたら、order by fieldなんてのがあるのね。

mysql> SELECT * FROM students WHERE id IN (4, 5, 2) ORDER BY FIELD (id, 4, 5, 2);
+----+--------------+-----------------------------------+
| id | name         | skill                             |
+----+--------------+-----------------------------------+
|  4 | 西森柚咲     | 口寄せ                            |
|  5 | 黒羽美砂     | 発火能力                          |
|  2 | 友利奈緒     | 自分の姿を視界から消す            |
+----+--------------+-----------------------------------+

ちょっと便利なのでござる。

ちなみに、指定してないものがあるとこんな感じで指定した順番に関してはその通りにはなる。

mysql> SELECT * FROM students ORDER BY FIELD (id, 4, 5, 2);
+----+-----------------------+--------------------------------------+
| id | name                  | skill                                |
+----+-----------------------+--------------------------------------+
|  1 | 乙坂有宇              | 任意の対象の体を乗っ取る             |
|  3 | 高城丈士朗            | 瞬間移動(高速移動)                   |
|  6 | 福山有史              | 念動力                               |
|  7 | スカイハイ斉藤        | 空中浮遊能力                         |
|  4 | 西森柚咲              | 口寄せ                               |
|  5 | 黒羽美砂              | 発火能力                             |
|  2 | 友利奈緒              | 自分の姿を視界から消す               |
+----+-----------------------+--------------------------------------+

ビジネスマネジャー検定試験受けてきた

2015-07-20T13:51:00.002+09:00

昨日、ビジネスマネジャー検定試験を受けてきた。
受験者1600だか2600だかくらいいた。（記憶力がないので曖昧
久しぶりの試験だったので雰囲気とか緊張感とか中々楽しめたな。
時計を忘れてしまったけれど、時間気にせず解いても十分終わる感じ。
公式テキストを2月に一通り読み終えて以降は特に勉強してなくて、
試験前日と当日におさらいしていたくらいだけれど、
7割くらいは解けているんじゃないかなという感触はあり。

まぁ、仮に落ちていても、もう受けないかなと思う。
資格よりは実力をつけないといけないと感じた次第。
でも、合格していたらちょっとだけ燥いでみる。