やめるブログ

Linux timer

2011-12-03T16:34:00.001+09:00

Linux timerについてちょっと調べたので、リンクを貼付け。

Timekeeping in VMware Virtual Machines

http://www.vmware.com/files/pdf/Timekeeping-In-VirtualMachines.pdf

これが一番情報量が多い。VMWareについてのことはもちろん、Timer hardware の話と種類、OS毎のtimerの扱いの概要など。

Linux timers
http://the-b.org/Linux_timers

/sys/devices/system/clocksource/clocksource0/[current_clocksource|available_clocksource] に出てくる名前についての説明。

Timekeeping best practices for Linux guests
http://kb.vmware.com/selfservice/microsites/search.do?language=en_US&cmd=displayKC&externalId=1006427

VMWareのKBから。Linux distributionとそのバージョンごとにGuest用のtimer設定が羅列されている。しかも、継続的に新しいリリースについても追記が進んでるみたい。すごい。

KVM日記: HPET: High Precision Event Timer
http://d.hatena.ne.jp/kvm/20080313/1205429432

qemuのdrive indexとPCI address

2011-11-26T09:03:00.001+09:00

vl.c　DriveInfo *drive_init(QemuOpts *opts, void *opaque, int *fatal_error)から。qemuのPCI addressingPCIのaddressは、"[[:]:]"の形式で表現される。表記上の細かいことは、hw/pci.cのstatic int pci_parse_devaddr(const char *addr, int *domp, int *busp, unsigned *slotp)辺りに書いてある。PCIの規格上、それぞれの上限値は、 if (dom > 0xffff || bus > 0xff || val > 0x1f) となっている。qemuにおいては、domainは常に0のみとなるようになっている。Host bridgeがひとつしか作れないようなので、PCI busを追加することができない。そのため、0x1f(=31)個のPCI slot addressをやりくりしてdeviceの割り当てを行うことになる。幾つかのdeviceは、自動的に作られる。-nodefconfig, -nodefaultsを加えることで、存在するデバイスを減らしPCI addressを節約することが出来る。-drivesnapshotを指定すると、cache=writeback に変更される。index値を指定すると、 unit_id = index % max_devs; bus_id = index / max_devs;の式で、unit_id, bus_id へ変換される。これは、IDEとSCSIに置いて適用され、virtioでは適用されない。IF_IDE1 IDE busのunit数: MAX_IDE_DEVS=2readonlyを指定不可。hotplug不可。bus_idは、IDE busを示し、unitがIDE channelを表す。IDE bus x 2個分のdriveを追加することが可能になる。Bus Driver: ich9-ahci (SATA controller), piix3-ideich9-ahci は、IDE busを5つ持っている。 dev: ich9-ahci, id "" bus-prop: addr = 05.0 bus-prop: romfile = bus-prop: rombar = 1 bus-prop: multifunction = off bus-prop: command_serr_enable = on class SATA controller, addr 00:05.0, pci id 8086:2922 (sub 1af4:1100) bar 5: mem at 0xe2028000 [0xe2028fff] bus: ide.5 type IDE bus: ide.4 type IDE bus: ide.3 type IDE bus: ide.2 type IDE bus: ide.1 type IDE bus: ide.0 type IDEpiix3-ideは、IDE busを2つ持っている。 dev: piix3-ide, id "" bus-prop: addr = 01.1 bus-prop: romfile = bus-prop: rombar = 1 bus-prop: multifunction = off bus-prop: command_serr_enable = on class IDE controller, addr 00:01.1, pci id 8086:7010 (sub 1af4:1100) bar 4: i/o at 0xc000 [0xc00f] bus: ide.1 type IDE dev: ide-drive, id "" dev-prop: unit = 0 dev-prop: drive = ide1-cd0 dev-prop: logical_block_size = 512 dev-prop: physical_block_size = 512 dev-prop: min_io_size = 0 dev-prop: opt_io_size = 0 dev-prop: bootindex = -1 dev-prop: discard_granularity = 0 dev-prop: ver = "0.14.1" dev-prop: serial = "QM00003" bus: ide.0 type IDEIF_SCSI1 SCSI busのunit数: MAX_SCSI_DEVS=7readonly指定可。hotplug可。bus_idは、SCSI controllerを示し、unitがそれにぶら下がるmediaを示す。SCSI controller x 7個分のdriveを追加することが可能になる。Bus Driver: lsi53c895a dev: lsi53c895a, id "" bus-prop: addr = 03.0 bus-prop: romfile = bus-prop: rombar = 1 bus-prop: multifunction = off bus-prop: command_serr_enable = on class SCSI controller, addr 00:03.0, pci id 1000:0012 (sub 1af4:1000) bar 0: i/o at 0xc100 [0xc1ff] bar 1: mem at 0xe2020000 [0xe20203ff] bar 2: mem at 0xe2022000 [0xe2023fff] bus: scsi.0 type SCSI dev: scsi-disk, id "" dev-prop: drive = scsi0-hd0 dev-prop: logical_block_size = 512 dev-prop: physical_block_size = 512 dev-prop: min_io_size = 0 dev-prop: opt_io_size = 0 dev-prop: bootindex = -1 dev-prop: discard_granularity = 0 dev-prop: ver = "0.14.1" dev-prop: serial = "0" dev-prop: removable = off bus-prop: scsi-id = 0IF_VIRTIOunit_idを指定する形ではなく、PCI addressの形で指定する。addr option。driveがPCI slot addressと1対応するため、slot address個数分までしか作ることができない。0.14.0だとなぜかaddr=20 で固まり、addr=21-22ではエラーを出してくる。addr=23以上では起動してくるがdriveが存在しないためbootに失敗する。readonly指定可。hotplug可。Bus driver: virtio-blk-pci dev: virtio-blk-pci, id "" dev-prop: class = 0x100 dev-prop: drive = virtio0 dev-prop: logical_block_size = 512 dev-prop: physical_block_size = 512 dev-prop: min_io_size = 0 dev-prop: opt_io_size = 0 dev-prop: bootindex = -1 dev-prop: discard_granularity = 0 dev-prop: ioeventfd = off dev-prop: vectors = 2 dev-prop: indirect_desc = off dev-prop: scsi = on bus-prop: addr = 04.0 bus-prop: romfile = bus-prop: rombar = 1 bus-prop: multifunction = off bus-prop: command_serr_enable = on class SCSI controller, addr 00:04.0, pci id 1af4:1001 (sub 1af4:0002) bar 0: i/o at 0xc040 [0xc07f] bar 1: mem at 0xe2021000 [0xe2021fff]addrとindexの関係indexとそれと関連するbus_idとunit_idは、virtioでは関係がなさそう。addrを00-1fの間で指定した場合には、その位置へdeviceが割り当てられる。addrと/dev/addr=0x8 と addr=0x4 のdriveをつけたVMを起動すると、/dev/vda(=0x4) /dev/vdb(0x8) となった。PCI addressの順番がそのままdevice nameになっている様子。飛び順のdevice nameを付けさせるのは、udevをいじったりする必要があるなど骨が折れそう。

qemu ゆるふわリスト

2011-10-25T06:37:00.002+09:00

qemu-kvmがいまだにゆるふわな作りなので、遭遇した問題を書いておく。

pci_delの入力値

v0.12.3 で遭遇。

qemu monitor shell(qemu shell)で、pci_add によるPCI device hotplugを行う。成功時には、以下のような内容になる。


(qemu) pci_add xxx .....
OK domain 0, bus 0, slot 4, function 0

戻り値として表示されているPCIのdevice addressはdecimal。例えば、17番目のslotにdeviceが挿入されるとすると、


(qemu) pci_add xxx .....
OK domain 0, bus 0, slot 17, function 0

になる。

問題は、pci表示系の出力は全部decimalになっているのに、pci_add/pci_delの変更系のコマンドに対してはhexで入力しないといけないこと。

-no-shutdown 問題(UNIX signal問題含む)

v0.14.0で確認。

-no-shutdown を入れると、guestからshutdownしてもqemuプロセスが死なないとmanには書いてあるが、2度目にqemuプロセスが死んでしまう。または、UNIX signalを送っても終了しなくなる。

guestからshtudown/poweroff等のコマンドを実行。
qemu-kvmのstatusがrunning -> paused へ変化。
qemu shellから "cont" コマンドで再始動させる。resetされ再起動開始。
2度目 guestからshutdown操作を実行。
qemuプロセスがお亡くなりになる。

原因は、no_shutdownグローバル変数一個だけで制御を行おうとしていること。v0.15.0かそれを超えた辺りで、この問題の修正を見つけたので、v0.16.0が出れば修正されているはず。

パッチを当てたdebパッケージを作る。

2011-10-14T03:56:00.002+09:00

既存のdebを書き換えて自分用のパッケージを作ってみたかったのでやってみた。

まず、source packageを取ってくる必要がある。この他ににもpackage.ubuntu.comなどの一覧ページから手動で取ってくるとかもできる。というか、いつもだいたいそんな感じ。

% apt-get source qemu-kvm
% ls
qemu-kvm_0.14.1+noroms-0ubuntu6.diff.gz
qemu-kvm_0.14.1+noroms-0ubuntu6.dsc
qemu-kvm_0.14.1+noroms.orig.tar.gz

% dpkg-source -x qemu-kvm_0.14.1+noroms-0ubuntu6.dsc
% ls
qemu-kvm-0.14.1+noroms/
% cd qemu-kvm-0.14.1+noroms
% quilt new new-patch.patch
% quilt add vl.c
% vi vl.c

% quilt refresh
% quilt -e header

ここまでやると、debian/patches/new-patch.patch というファイルができて修正内容がpatchファイルとして保存される。

debian/changes へ変更内容の記録とパッケージ名の指定を行う。dch コマンドを使うと、エディタが起動する。


# -i (increment)で、新しいエントリとして追記。-a で既存の先頭のエントリへ追記する。
% dch -i

qemu-kvm (0.14.1+noroms-0ubuntu6backport1) lucid; urgency=low

  * new change

 --  Dev   Thu, 13 Oct 2011 13:38:05 +0900

この作業する前に、環境変数をきちんと指定しておくと、メールアドレス等がきちんと自動で入力される様子。めんどくさいので手で入力した。

先頭行の () の中が結構重要で、この文字列がそのままパッケージファイル名の一部となる。表記の仕方が細かく決まっている様子だったけれど、細かいことは無視してすすめる。注意が必要なのは、"-"をこれ以上増やしてはいけないとか、最後は数字にしておくとか。この場合だと、元の内容が "0.14.1+noroms-0ubuntu6" だったものを "0.14.1+noroms-0ubuntu6backport1"に変更した。

debuild使ってみたけれど、signをしない設定がわからなかったので結局dpkg-buildpackageした。


% dpkg-buildpackage -us -uc -rfakeroot

問題なく進むと、


% ls ../
kvm_84+dfsg-0ubuntu16+0.14.1+noroms+0ubuntu6backport1_amd64.deb
qemu_0.14.1+noroms-0ubuntu6backport1_amd64.deb
qemu-common_0.14.1+noroms-0ubuntu6backport1_all.deb
qemu-kvm_0.14.1+noroms-0ubuntu6backport1_amd64.deb
qemu-kvm_0.14.1+noroms-0ubuntu6backport1.dsc
qemu-kvm_0.14.1+noroms-0ubuntu6backport1.diff.gz

の様なファイル群が増えているはず。

これらの.debをdpkg -i してやるとインストールできる。


qemu-kvm_0.14.1+noroms.orig.tar.gz
qemu-kvm_0.14.1+noroms-0ubuntu6backport1.diff.gz
qemu-kvm_0.14.1+noroms-0ubuntu6backport1.dsc

の組み合わせで、変更後のsource packageとしての配布も出来るはず。

他によく有りそうなケースとしては、debug symbol付きのバイナリが欲しいので自分でpackageをbuildするとかいうのがありそう。普通にdpkg-buildpackage してしまうと、dh_stripという処理が走るせいでdebug symbolが失われてしまう。

dpkg-buildpackageするまえに、debian/rulesからdh_stripコマンドが走るところをコメントにする必要がある。


% vi debian/rules
       #dh_strip -s

この後buildpackageすると、debug symbol付きのバイナリが入ったpackageが出来上がる。release版を作るときにコメントを外すのを忘れそうなのが問題だけど。環境変数の指定で、dh_stripを一時的に動かなくする方法とかあるのかなぁ。

DEB_BUILD_OPTIONSを適切に設定すると、目的が達成できるそうだ。


DEB_BUILD_OPTIONS=nostrip,debug

http://www.netfort.gr.jp/~yabuki/diary/20040601.html

参考

Debian 新メンテナーガイド: http://www.debian.org/doc/manuals/maint-guide/index.ja.html
quilt 使い方 on debian パッケージ: http://blogs.yahoo.co.jp/mindrefugee307/44876488.html

Rubyのメモリ利用

2011-08-19T13:10:00.009+09:00

GCとcompactionについて色々理解が進んだのでメモ的に書いてみる。

Garbage collectionとは、参照されていないオブジェクトを解放する操作のことである。ここでいう解放とは、必ずしもCで言う所のfree()的な操作とは一致していない。まず、ここをよく理解していなかった。理解してないとどういうことになるかというと、例えばメモリリークについて調べようとしたときに、OSサイドから見える情報で問題が起きているだとかないだとか言ってしまう。

というか、そもそもGCとは逆の確保という操作についてもmalloc（）的な操作が絡むとも言えない。これらは、GCがどういう実装になっているかによって、定義が変わってくる。

今回は、Rubyで長時間走るプロセスについてメモリの増加をできるだけ抑えたいという目的があった。ので、ここに書いてあることはRubyはこんな感じにメモリを使うものですよというだけのことである。ややこしいのは、Rubyにはいくつも異なる実装があり、それぞれが異なるGCを持っているということだ。同じ系統の実装でも、バージョンが変われば実装も変わっていることも考えられる。なので、この関係の話をするときはは、どの実装について話をしているのかはっきりさせてすすめるのが良さそうだ。

CRuby 1.8.7 と1.9.2で幾つかテストプログラムを書いて試したところ、こんな流れで動くことがわかった。

a=[]

99999.times { a << {} }

などどすると、Rubyのプロセスが膨れ上がる。

a.clear

とすると、Arrayオブジェクトがimmutableだったとしても、99999個分のHashオブジェクトは解放の対象となるはず。そこで

GC.start

として明示的にGCを走らせる。しかし、psなどから見えるOSプロセスとしてのメモリの利用量の変化はほとんどない。次に同じように、

99999.times { a << {} }

ともう一度やる。今度はOSプロセスとしてメモリの利用量はあまり増えない。

同じように、a.clearしても特に目立った変化はない。ここまでやってみてわかったことは、

CRubyは、必要なメモリがないときはmalloc()的な動作を行いメモリの確保を行う。
オブジェクトへの参照をなくして、明示的にGC.startして解放の処理を行っても、free()的な処理を行ってOSへメモリを返却しているわけではない。
一度確保されたメモリ領域を超えない範囲で新規オブジェクトの生成を行うと、確保済みの領域を再利用するようだ。

こんな状態なので、CRuby VMの外側からは細かくは何が起きているのかうかがい知ることはできない。

これ以上のことを知るためには、CRuby VMから必要な情報を取得するメモリプロファイラを使うしかない。1.9.2には、GC::Profilerという簡易プロファイラが内蔵されており、それを使っていろんな内容を試すことができる。1.8.7にはmemprof gemがあり、機能的にはこちらのほうが充実しているようだがx86_64環境でしか動かないという事が書いてあった。

もう眠たいので簡単に書くと、GC::Profilerを使うとGC.startする前と後とで大きく変化する値があることが分かる。結果、プロファイラを使うことで分かったことは、「3」で内部的に何が起きていたのかということだけであった。あとは、Rubyのプログラムとしてメモリリークが起こっていそうという時は、これらのツールを積極的に使わないと分からないということもある。

そろそろまとめに入ると、CRubyにとってのGCとは、参照のなくなったオブジェクトを解放することではあるが、確保したメモリの解放を行うという操作ではないということだ。このGCの目的は、メモリをOSに返すことではなく、確保済みのメモリをできるだけ他の新しいオブジェクトで再利用したい、という所にあるようだ。まぁ、こんなことはRubyの本などにはしっかり書いてありそうだけど、ようやく意味が理解できるところまで来たということで。

以上のことから、OSからみたCRubyのメモリ利用の傾向は、

メモリをある程度のサイズずつ必要となるタイミングでmallocしていく。
mallocした範囲はfreeしない。

であることがわかった。デーモンプロセスのような常時起動型のプログラムをRubyで書いているのに、なんて厳しい。

でも、よくよく考えてみると本当に厳しい内容なのかというと実はそうでもないかもしれない。という話を次回やってみたい。

http://www.theirishpenguin.com/2009/10/29/understanding-how-ruby-stores-objects-in-memory-the-ruby-heap/

ATX/EPS 12V 電源

2011-08-19T02:20:00.003+09:00

PC自作の話。

自作はもうやらないと決めて早幾年。しかし、にわか自作好きに、訳もわからず買われた機械たちを何とか動かすため色々情報集めをした。

買われたマザーボードは、Supermicroの X7DAL-Eというモデル。対応しているCPUは、Xeonの5300-5400系列。2011年半ばにもなって、なんでこんな数年前の型落ちを買ってくるのか甚だセンスに疑問を感じるが、どうしてもDual CPUをやりたかったのが理由なようだ。今時一つのCPUに何個もCoreが入ってるんだから、Dual CPUにこだわるとか意味が分からない。

そして、電源をつないでいるのに電源が入らないとかいうどうしようもない状態に。一緒に買った電源は、RosewillのRG630-S12と言う奴。まず、マザーボード上の電源コネクタが合わない。RG630が持っているコネクタ(マザーボード用)は、24pin+8pin のみ。X7DAL-Eが必要とするコネクタは、24+8+4というタイプ。PCI-E用の別のコネクタを無理やり差してみたりしていたけれど、何も進展なし。

最近のよくわかってない状態で自作をやるのは嫌くさいという理由で放置していたが、やっぱり動かしたほうがいいということになって悪あがきを始めた。昔自作していた時も、電源のコネクタとか気にしたことがないので、こんなこともあるのかという感じ。

ちょっと調べて理解できたのは以下の範囲。

ATX+12V という電源規格がある。
それを拡張する形でEPS+12V っていう規格がある。
両方共24pinの電源コネクタがある。これはCPUの電源供給用ではないということが書いてあるページもあった。
CPUは、別のコネクタ8pin(EPS)/4pin(ATX) から供給を受ける。

RG630はEPS対応電源でもあるので、4pin+4pinの形で8pinを構成できるようになっていた。しかし、マザーボード上には、24pin, 8pinとは別に、4pinの穴が残っている。

他の製品と比べてみたら、「+12V Rails」と書いてある項目に違いがあることに気がついた。Single, 2, 4 などが書いてあり、2と書いてあるタイプの電源を調べると、たしかに4pinの別のコネクタがついている。おそらくDual CPUのマザーボードにしたために8pinとは別に電源が必要で、それに対応した電源を合わせて買う必要があったということらしい。

RG630 はSingle Railの製品なので、間違った電源を買ってきたということになる。2 Rails 以上の製品を買ってきて動くかどうか試してみようと思う。

A virgin shot

2011-08-06T13:36:00.002+09:00

I have bought an entry level SLR camera so they are the first shot from it. Those pictures come from a dinner with friends at the restaurant provides good meal in this area.

coLinuxのカーネルをrecompile

2010-04-01T21:41:00.003+09:00

cn.ko が入ってなくてnetlinkのテストコードが動かんので、coLinuxのカーネルをrecompileした。以下のページを参考にした。

coLinuxのメモ - カーネルのコンパイル

coLinuxのsrcアーカイブを落として、tar zxf したら、coLinux-0.7.6/conf/linux-2.6.22.18-configのようなkconfigファイルが置いてあるので、それを編集して./configure; make kernel するだけであった。

mingw32とか入ってないといけないのかとか心配したけれど、vmlinux とmoduleのバイナリは普通のelfみたいで普通にgccが入っていればいけた。簡単簡単。

wordで段落改行を置換

2010-02-23T23:29:00.003+09:00

Wordの必殺テクニック。

普通のテキストをコピペするとテキストに含まれるすべての改行が段落になってしましまうので、その複数になった段落をひとつの段落にまとめる。

置換を使って「段落改行(^p)」を「段落内改行(^l)」に変換してやるだけのようだ。

「あいまい検索」のチェックを外してやると、「特殊文字」の選択が可能になるので、その状態で、「^p」を「^l」へ置換するようにしてやるといいみたい。

ec2-bundle-volのexclude

2009-10-17T20:21:00.003+09:00

EBSでマウントしているディレクトリを除外してAMIをbundleしたかったので、自作のバッチスクリプトにその処理を追加しているところ。

内部でrsyncを使っているようなので、ec2-bundle-volの-eオプションにもワイルドカードというかglobパターンが渡せるのかと思いきや、ec2-bundle-volの内部で"*"が展開されてしまってどうにもうまくいかない。

やりたかったことは、"/mnt/point1/...."の/mnt/point1はディレクトリとして残しつつ、point1/の中身は含まないというexcludeオプションの実現。

ec2-bundle-volに渡したexclude指定が適切にrsyncに渡っているなら、-e '/mnt/point/*'のような感じで行くはずなのだけれど。

そこでどうしようもなくかっこ悪く、ec2-bundle-volを呼ぶバッチスクリプト側で、"*"を展開して渡してやる羽目に。


"-e '#{Dir.glob('/mnt/point1/*').join(',')}'"

さらに、ec2-bundle-volは複数個の"-e"オプションを受け付けないことが判明。。。これはひどい。

xbox

2009-09-20T02:00:00.000+09:00

xbox を先週買った。
シューティングゲーマーにジョブチェンジしようと思う。

皮

2009-07-26T18:28:00.000+09:00

先週からの日焼けの跡がペロッと剥けた。

[Wakame] 0.4.2 released

2009-07-25T00:01:00.002+09:00

We could increment the third minor version number of Wakame today. This is just one of intermediate release aiming to the stable release but the remarkable point is that the first release includes contributions from couple of people in my company.

I'm very grad to get those talented people involved this project and hope to keep this monthly release pace until the coming stable release.

Following points are planned to work on in next month. I wish all of them to be achieved:

- Persitent state database
- Solid and stable version of Web API
- More resource implementations

海の日

2009-07-21T18:27:00.004+09:00

昨日は潮干狩りへ行き、返す刀でビアガーデンへ行くという充実した休日ライフだった。普段使わない筋肉を使ったからか、食べ終わるころにはみんなぐったりしてた。朝方は曇りで涼しかったけれど、昼から天気がよくなった性もあったのかも。

月一回くらいこういうのがあってもいいね。ただ、しっかり準備して音頭を取る人がいないとここまで充実させづらいんだよね。

ぼやき

2009-07-14T23:44:00.002+09:00

また、知らない間に季節が変わり夏になっておりました。
部屋に戻ると暑いしね。

劣化版ORまっぱを書くことになりそうとか、来週福岡いくことになりそうとかぼちぼちあります。
海草プロジェクトも夏を過ぎれば、一段落してほしいなとか。もう８ヶ月こればっかりやってるからね。楽しいんだけど。

ThinkPadでUSB DVDの認識問題

2009-06-15T13:19:00.002+09:00

ThinkPad X60s で外付けのUSB DVDで接続問題が。1台目でうまくいかなくて、2台目を別メーカーで買ってやってもうまくいかないのでThinkPadの問題かと思ったら、解決のページを見つけた。

CD ドライブまたは DVD ドライブが見つからないか Windows やその他のプログラムにより認識されない

DVDを焼くソフトをアンインストールしたりするとこういう状態になることがあるみたい。

1万円損した。

Copying a whole S3 bucket

2009-05-25T20:19:00.003+09:00

今日はAWSの新アカウントをゲットしたので、古いAWSアカウント上にあるS3の内容を丸々そちらの方へコピーしたかった。だけど、異なるBucketをsyncするツールがなかなか見つからない。S3Foxとかで簡単にできるかと思ったら、ローカル<->S3間のファイルのやりとりしか想定してないみたいだし。

結局RightAwsを使ってコピーするプログラム書いた。


require 'rubygems'
require 'right_aws'

src_bucket='bucket1'
dst_bucket='bucket2'

s3 = RightAws::S3Interface.new('AMAZON_ACCESS_KEY', 'SECRET_KEY')

s3.list_bucket(src_bucket).each { |key|
  puts ("%1$s/%2$s -> %3$s/%2$s" % [src_bucket, key[:key], dst_bucket])
  s3.copy(src_bucket, key[:key], dst_bucket)
}

熱いX60s

2009-05-11T20:34:00.001+09:00

なんか、ThinkPad X60sのアームレスト部分が熱い。やっぱりこのモデルは夏向きじゃないな。
Windows 7が出たら、Lets note買うんだ。多分自腹で。。。。

apparmor

2009-04-24T12:12:00.004+09:00

apparmorにはめられる。

ubuntuでは、いつからか標準でこのセキュリティフレームワークが有効化されてるみたいでmysqldのdatadirを変更するときに問題になった。

現象は、mysql_install_db スクリプトでdatadirを初期化しようとした際、スクリプト内部で呼ばれているmysqldが"Can't create test file /data/my_data/mysql/localhost.lower-test"のようなメッセージを吐いて、初期状態のdatadirを作るまでに至らない。

ここのやりとりでは「SELinuxが原因かも」と書かれていて、ubuntu上で似たようなことをやっているapparmorが問題を引き起こしていたという寸法。


 % sudo /etc/init.d/apparmor stop
 % sudo update-rc.d -f apprmor remove
 % sudo /etc/init.d/apparmor status

で、apparmorをrcSからも削除しておくことにした。

問題のmysqld狙い撃ちの設定。


$ more /etc/apparmor.d/usr.sbin.mysqld
# vim:syntax=apparmor
# Last Modified: Tue Jun 19 17:37:30 2007
#include 

/usr/sbin/mysqld {
  #include 
  #include 
  #include 
  #include 

  capability dac_override,
  capability setgid,
  capability setuid,

  /etc/hosts.allow r,
  /etc/hosts.deny r,

  /etc/group              m,
  /etc/passwd             m,

  /etc/mysql/*.pem r,
  /etc/mysql/conf.d/ r,
  /etc/mysql/conf.d/* r,
  /etc/mysql/my.cnf r,
  /usr/sbin/mysqld mr,
  /usr/share/mysql/** r,
  /var/lib/mysql/ r,
  /var/lib/mysql/** rwk,
  /var/log/mysql/ r,
  /var/log/mysql/* rw,
  /var/run/mysqld/mysqld.pid w,
  /var/run/mysqld/mysqld.sock w,
}

[Wakame]0.3に育った。にょきにょき。

2009-04-22T21:31:00.004+09:00

がなんちゃってリリースされた。まだ全然内部とか不安定だよ。

まとめてドキュメント書こうとしたら案外無理だったりとか。次は皆さんにそっぽ向かれないようにもう少しましな形で見せられたらいいな。英語久しぶりに書いたらぜんぜん書けなくなってる。

ドキュメンテーションは、コツコツゆっくりと。

emdrb

2009-03-24T19:46:00.003+09:00

eventmachineベースのdruby実装が去年くらいに作られてたみたい。

require 'drb'とrequire 'eventmachine'してることから予想するに、drb.rbをeventmachineの仕組みにあうように呼び出すラッパーみたいな感じ。

http://emdrb.rubyforge.org/

UQ WiMAX

2009-02-25T16:13:00.002+09:00

のモニターに申し込んでみたけれど、落選した。

イーモバイルみたいに長い縛りがまだないみたいだから、端末を自前で買ってもお試しをやる価値があるように思うんだけれど、新しいサービスすぎていろいろ踏ん切りがつかない。

引っ越しモードに入ってしまっていて、新居の回線をこの際無線化しようと思っているのでイーモバイルかこのサービスにはなる予定。

Clock synchronization on EC2 instance

2009-02-08T23:08:00.005+09:00

ふとntpdとかいれないと時刻がずれるんじゃないかと心配になって調べてみると、初期設定ではxenのguestはdom0から時刻を取得するようになっている模様。"/proc/sys/xen/independent_wallclock"でその状態を確認できる様子。==0だと、dom0から渡された時刻を使っている。

EC2のdom0では、ntpdか何か使って時刻の同期を取ってる。。。よね？

http://developer.amazonwebservices.com/connect/message.jspa?messageID=54209

EC2 Compatible OSS Project

2009-02-05T12:00:00.000+09:00

Amazon EC2互換の環境を構築するためのEucalyptusっていうOSSプロジェクトがあるみたい。動くコードがすでにある。
http://eucalyptus.cs.ucsb.edu/

Ruby Mutex/thread.rb Imprementation

2009-02-01T14:00:00.005+09:00

Rubyのthread.rbの実装がバージョンによりいろいろ違ってわかりにくいな。

Rubyのバージョン	thread.rb	sync.rb	mutex_m.rb	monitor.rb
1.8.5_254より昔	Pure Rubyだけ	Mutex不使用	Mutex不使用	Mutex不使用
1.8.5_254と1.8.6_x	Pure Ruby版とCで全部版両方。	Mutex不使用	Mutex不使用	Mutex不使用
1.9.x	MutexのみC。QueueとConditionalVariableはRubyでMutex使用。	Mutex使用	Mutex使用	Mutex使用

Cで実装されたMutexを使うのと使わないのでは、どれだけ速度面で違いが出るんだろうか。あんまりでないんだろうか。

あと、1.8に限って言えばfastthreadとかもあるんだよね。1.8.6のいくつか以降から使うなとか。でも、eventmachineとかがまだ使っている様子なんだけどどうなんだろう。

Hashed SSH known_hosts

2009-01-31T21:23:00.002+09:00

最近のsshは、known_hostsのホスト名の部分をハッシュしてどのホスト用のホストキーかをわかりにくくしている様子。


|1|bba7yd3UHfh+jr5uSlkQY7LTfmU=|qRn2KHJy4PyNHGlaKyKX0Z/A/rs= ssh-rsa AAAAB3NzaC1yc2EAAAABIwAAAQEAuFVL...zOP/gnhbrOQ8EfTjcJX==

ちょっと必要だったので、Rubyで同じ処理をする物を作った。


require 'hmac-sha1'

hostname='127.0.0.1'
key = Array.new(20).collect{rand(0xFF).to_i}.pack('c*')
"|1|#{[key].pack('m').chop}|#{[HMAC::SHA1.digest(key, hostname)].pack('m').chop}"

1.9だとhmacのライブラリの構造が1.8とは少し違うみたい。

LOST

2009-01-03T10:57:00.002+09:00

昨年は、Season3まで見終わった。去年の段階では、Season4まで出ているのがわかっていて、そろそろ終わるのかと思いきや、昨日Season5まで出ていることが判明した。

Season4で簡潔だったらがんばって見終えようと思えたけれど、この調子であればいきなりSeason6に突入とかあり得そう。これ以上貢ぎ続けるか悩む。

EventMachine

2009-01-02T22:13:00.002+09:00

必要に迫られてEventMachineを触っているのですが、非同期の考え方にようやく慣れ始めたところか。

まだまだ困ってること。

シーケンシャルに処理をしたい箇所をどう書けばいいのか。

リトライの処理をどう書くか。プロトコルのリクエストの再送とか。

0120611155日記

2008-12-27T13:55:00.002+09:00

今日もこの番号からかかってきた。
女の声で、留守電までいれてきていた。これは、事前に番号をWeb等でチェックをする習慣がないと簡単にだまされるかもしれないと思った。

詐欺をする側は0120フリーダイアルというNTTのサービスを有料で利用しているはずなので、顧客でもある詐欺集団側をNTTはどう料理するつもりなのか気になるところではある。

0120詐欺

2008-12-25T19:41:00.001+09:00

0120611155から2度目のお電話なので、さらしておく。最近流行の0120詐欺の番号みたい。

http://www.google.co.jp/search?hl=ja&q=0120611155

Merb

2008-12-25T02:22:00.003+09:00

いいことですね。これで、同じようなフレームワークを勉強せずに済みます。

Quake on Google's Native Client

2008-12-13T17:14:00.002+09:00

quakeが動いているのにはびっくりしたづら。OpenGLを使っていることで有名なこのゲームは、周りではどうやって画面の描画をやっているのかという話になった。SDL版のQuakeにNative Client対応化させるパッチを当ててて動かしているようだが、ネットワーク周りの書き換えが主で描画に関する部分はあまり書き換えられていない。UpdateAll() 関数が描画に関するところでパッチされている主立った関数だが、やっていることは、8bitで描画された画面バッファを32bitへ変換し、nacl_video_update() へ渡しているだけ。SDL Quakeを読むとGLで描画するglquakeとアセンブラでCPUで描画するasmquakeの両方をコンパイルオプションで切り替えられるようにできており、asmquakeがNative Client上で動いている様子。だから、Native Client上でvideo用APIが4つしか無くてもQuakeが動いていた訳ですな。

やねうらお氏の解説を読むとどうやってSandboxを実現しているのか書いてあるけれど、アセンブラ0年生のおいらには相対ジャンプに工夫を凝らすだけでSandboxができてしまうのものかどうか判断がつかない感じ。

ThinkPad display port problem

2008-12-12T09:45:00.002+09:00

愛用のThinkPadの外部ディスプレイポートがおかしくなった。画面は出力されているけど色が変。修理に出すかどうか悩むな。

最初、ディスプレイがおかしくなったのかと思ったけれど、実は出力側の方がおかしくなっていたという。

Skype 4.0 Beta

2008-12-02T15:02:00.003+09:00

普段知り合いとチャットするときはSkypeを主に使っています。
MSNとかYahooとかメッセージ専用のサービスやクライアントはありますが、Skypeの使い勝手にはかないませんね。グループ・個人問わず会話履歴がかなり昔までさかのぼれるところが一番重宝しています。逆に通話はほとんど使ったことがありませんね。

いまのところ不満点としては、複数のチャットが同時進行しているとその数だけWindowが開くと言う点でした。そしてついに、4.0のβ版でその部分が改善されていました。例のごとく、UIが結構違って見えるので一瞬うろたえますが、すぐ慣れました。おすすめです。

Mac版だとすでにこのような窓構成になっていると噂に聞きました。

PSP

2008-11-29T12:01:00.003+09:00

PSPとモンハンを買ってみた。

でも、メモリカードが別途必要なことを知らなくて買っていない。→セーブが全くできない。やめた。

A bookmarklet for swinging the keyword from google ex-EN to EN

2008-11-23T20:50:00.004+09:00

いまさらながら初ブックマークレット。探せば絶対誰か作ってるはず。

よくgoogle.co.jpで絞り込んでおいて、検索に出てこないときだけgoogle.comで探していたので検索語の再入力をするのがめんどくさかった。

Bookmarklet

"f"っていう名前のformタグと、"gs"っていう名前のformタグの二つがあるのでその辺の対応をしたのが工夫ポイントかな。

Google Chromeを使ってみる

2008-09-04T00:19:00.004+09:00

恒例の新ブラウザの感想など。

Google謹製のJavascriptエンジンがすごい。JITになってる。

WebKitが十分速いのと、変なアンチエイリアスがかかってないせいで体感ですごく速く感じる。

ThinkPadのトラックポイントでスクロールさせられる。(Safariはこれであきらめた。)

みんなが書いてることだけれど、タブが別プロセスで動いてる。ついでにFlashなんかのプラグインも別プロセスで動いている。タブを閉じると、メモリがきちんと解放される。

でもやっぱり、マウスジェスチャーが使えない。。。

RailsでJavascriptのソースが現れる位置をHTMLの最後(の直前)へ持って行く

2008-08-31T23:23:00.006+09:00

HTML内へJavascriptを書くときの位置として、体感読み込み時間を減らす目的で推奨されているのは、HTMLの最後(</body>の直前)へ書くことのようです。静的なHTMLであれば比較的やりやすいのですが、ヘッダやフッタが複数のテンプレートファイルに分かれていることが普通の動的HTMLだと、利用しているテンプレートエンジンやフレームワークによっては難しい場合があります。

Railsでは、capture helperを使えば簡単に実現できたのでメモ書きしておきます。

レイアウトテンプレート


<html>
<body>
<%= @content_for_layout %>

<!-- 共通のJSファイルを読み込む -->
<script type="text/javascript" src="http://other.host/a.js"></script>
<script type="text/javascript" src="http://other.host/b.js"></script>
<% if @content_for_javascript %>
<%= @content_for_javascript %>
<% end %>
</body>
</html>

Action側のテンプレート


<% @content_for_javascript = capture do %>
<script type="text/javascript">
alert("Page specific javascript is executed");
</script>
<% end %>

<div id="main">
ページの内容
</div>

出力内容


<html>
<body>

<div id="main">
ページの内容
</div>

<!-- 共通のJSファイルを読み込む -->
<script type="text/javascript" src="http://other.host/a.js"></script>
<script type="text/javascript" src="http://other.host/b.js"></script>
<script type="text/javascript">
alert("Page specific javascript is executed");
</script>
</body>
</html>

こうすることで、共通のJavascriptソースはlayoutテンプレートへ、そのActionだけで使われるJavascriptソースはaction側のテンプレートへと分けて書き込みながら、最終的なHTMLとしてはすべてのJavascriptソースを</body>の直前へ集約させることができました。

ruby-openid に https　アクセスさせる

2008-08-16T19:38:00.002+09:00

ruby-openid 2.1

でやった。


apt-get install ca-certificates

して、


$ ls -l /etc/ssl/certs/ca-certificates.crt
-rw-r--r-- 1 root root 153268 2008-08-16 17:23 /etc/ssl/certs/ca-certificates.crt

ができたことを確認したら


OpenID.fetcher.ca_file='/etc/ssl/certs/ca-certificates.crt'

をconsumerの機能を実装しているControllerに書いておくと、次回からhttpsのアクセスが必要なところができてもきちんと処理する。

coLinuxを設定してみる

2008-06-29T05:15:00.008+09:00

VMWareを使っていたんだけれど、どうにも時刻がずれて気持ち悪いのでcoLinuxに引っ越ししてみる。

Keymap

/etc/default/console-setup

XKBMODEL="jp106"
XKBLAYOUT="jp,jp"
XKBVARIANT="latin,"
XKBOPTIONS="grp:alt_shift_toggle,lv3:ralt_switch,grp_led:scroll"

Timezone


# vim /etc/localtime
Asia/Tokyo
# dpkg-reconfigure tzdata

rootFS の拡張

2GBだと心許ないので10GBへ拡張する。Google計算機か何かを使って、8GBが何バイトか計算しておく。8 * (1024^3) = 8 589 934 592。

sparseファイルにしておくと、その領域が使われるまではディスクが消費されないのでその設定もしました。
ただ、一時的にファイルサイズが10GBになるので、作業用に10GBのフリースペースは必要。

DOSプロンプトで


C:\>cd C:\Workdir
C:\Workdir>fsutil file createnew new_fs 8589934592
C:\Workdir>fsutil sparse setflag new_fs
C:\Workdir>fsutil sparse setrange new_fs 0 8589934592
C:\Workdir>copy /B root_fs + new_fs newroot_fs
C:\Workdir>fsutil sparse setflag newroot_fs
C:\Workdir>fsutil sparse setrange newroot_fs 2147483649 10737418240

で、coLinuxを起動して


root@ubuntu:~# resize2fs /dev/cobd0
resize2fs 1.40.2 (12-Jul-2007)
Filesystem at /dev/cobd0 is mounted on /; on-line resizing required
old desc_blocks = 1, new_desc_blocks = 1
Performing an on-line resize of /dev/cobd0 to 2621440 (4k) blocks.
The filesystem on /dev/cobd0 is now 2621440 blocks long.

となればOK。

ネットワーク

tuntapモードで、Windows XPについているネットワーク共有の機能を使って外へアクセスできるようにしました。slirpの方が設定自体は簡単ですが、sshやhttpでWindowsからアクセスしようとするとcolinux.confの変更と再起動が必要そうです。

colinux.conf(のNIC設定部分)

eth0=slirp
eth1=tuntap,"coLinux-TAP1"

"ローカルエリア接続2"とかになっていたら、"coLinux-TAP1"へ名前変更

7.10から8.04へ


root@ubuntu:~# apt-get install update-manager-core
root@ubuntu:~# do-release-upgrade

するだけ。

参考

http://iwiwdsmi.blogspot.com/2008/04/install-colinux-and-ubuntu-gutsy-on-win.html

OpenID Tech Night

2008-04-21T21:37:00.003+09:00

仕事が入っていけない予定だったんだけれど、運良く予定がスライドして木曜の夜が開いた。なので、”OpenID Tech Night”へ逝ってみるべくメールしてみた。会場まで歩いて15分くらいだとおもうから、参加したいんだけどなぁ。

Googleを支える技術 ~巨大システムの内側の世界

2008-04-18T14:40:00.002+09:00

を読んだ。公開されている英語の論文を読んだ人には物足りないかもしれないけれど、苦手な人や初めて知る人には効率よく理解できるよう分かりやすく書かれていると思った。

4章くらいまでは、GFS, BigTable,Chubby,Sawzalの各説明に費やされていた。5章は論文を読んだことある人でも、おもしろいかもしれない。データセンターの規模や電力使用量など、Web上の情報などを元に推測されていた。中でも、汎用のPCの電源パーツには最近のPCには必要のない電圧変換が行われているらしく、その無駄な変換をする部分を除くとデータセンター全体の電力利用効率が大きく向上したらしい、という部分には驚いた。ハードウェアには弱いもんで。

グループで1冊まわし読みしておくと、周辺で起きていることを全員で理解する助けになっていいかなと思った。

VMWareとToolsと時刻

2008-04-08T08:25:00.003+09:00

しばらく前に、購入しておいたVMWareの5から6へ引越しした。VMIとかいうのが付いていて、対応するようにコンパイルされたLinuxカーネルだと速度が向上するようなことが書いてあったので期待しながら作業した。ゲストはUbuntuの7.04なので、対応しているはず。

結果は、以前と何が違うのかさっぱりわからない。GUIの見た目の違いもあんまりないので戸惑わなくて済むんだけれど、新機能でサポートされたVNCとか使わないし。バージョン5でかなり完成していたということか。正直、速度の向上とか分かりやすい改良がなければ、次のバージョンの購入を悩む。

さらに面倒なことに、VMWareToolsのバージョンが古いとかでゲストの時刻がずれまくる。ruby-openidが急に動かなくなったのでなぜかと思ったら、ゲストの時刻が前日のおやつの時間頃になっていたのが原因でした。結局VMWareToolsの入れ直しをして解決した。

2008-03-31T22:50:00.002+09:00

かっこつけてを使おうとすると、うまく動かない。これ使いたかったら、xhtmlで書いてないとダメなんだねぇ。html4宣言とかやってらダメなわけか。

mdadm.confのメールアドレス

2008-03-30T22:40:00.005+09:00

mdadm.confの MAILADDR って言う項目は複数指定できないよ。ソースによれば、先頭に書いてあるメールアドレスだけにアラートが送られるだけ。複数書き込んでても何もメッセージが出力されないのは、問題だと思う。

一応、manには、

MAILADDR
The mailaddr line gives an E-mail address that alerts should be sent to when is running in --monitor mode (and was given the --scan option). There should only be one MAILADDR line and it should have only one address.

って書いてあるのは見つけたんだけれど、読み飛ばしてた。

ブラウザで音楽きいてるとあせる

2008-03-30T18:45:00.005+09:00

ニコニコの音楽系を聴いているとブラウザが音楽プレーヤになるわけだけど、タブを開きすぎていたりするとどのウィンドウにあるどのタブで開いていたか分からなくなる。

電話が掛かってくると、タブを探して一時停止ボタンを押すまですごく時間がかかってあせる。時々、相手があきらめるくらい長く掛かってしまう。

何かいい方法はないものか。iTunesがニコニコやYouTubeに対応するとかがよさげだけど、とにかく一箇所にまとめたい。

書くよ後ほど

2008-03-27T23:32:00.002+09:00

やっぱり、ブログで「後で書く」とかタグをつけて、タイトルだけアップするってだめなんだよね。

Solaris パッケージコマンド

2008-03-27T17:33:00.003+09:00

ほんとによく忘れる。

pkgchk -v [PKG Name]
パッケージに入っているファイルをすべてリスト。

pkgchk -lp /usr/bin/ls
ファイルからパッケージ名を逆引き。

Safari 開発ツール

2008-03-26T22:22:00.002+09:00

さて、Safari3.1 on windowsをインストールする際「開発ツール」も一緒にインストールしたわけですが、使い勝手はどんなものなのでしょうか。

付いてたもの。

Web Inspector

Network Time Line

Source Code Viewer

他のブラウザにも付いている機能は付いていますね。FireBugとかまでは望んでないので、これで満足です。Web Inspectorは、CSSの各アトリビュートまで出ててイイ。

ただ唯一、HTTPヘッダの中身を覗く方法が分からなくて困っています。

i-name 取ってみた

2008-03-26T10:24:00.005+09:00

OpenID関連の情報をあさっていると、xri.netっていうのに行き着いた。

おもしろいね。このグローバルサービスカタログっていうコンセプト。=hogeとか、@dokosoko っていう書式のIDを元にhttp://xri.net/=hoge みたいにこのID文字列を渡すと、その人の詳細情報が取り出せるって言うだけのサービス。詳細情報っていっても情報本体がこのサイトにあるわけじゃなくて、住所情報だったらこのサイトを参照しろっていうアドレスが書いてある。だから、ただのカタログサービス。

=hogeは個人のIDをグローバルに示すので、これが流行るとはてダでやってるような「id:hogeが何とかした」っていうのが「=hogeが何とかした」に変えるだけでどのブログでも同じことができるようになるねぇ。こんな例しか思いつかなくてあれだけど。

とりあえずは、お前はどのOpenID IdPを使うんだっていうときに参照できるデータベースとして使う例がWeb上には多い。すでに他の仕様もあってコンタクト先とかいくつか他の情報のサポートもできるみたい。SOAPがどうとか言ってたころに流行ったUDDIをイメージをしてしまう。

DNSみたいに、AレコードみたいなものとCNAMEみたいなものがあって、試しに両方取得してみた。Aレコードのほうには、ユニークIDとなるi-number(フォーマットはMACアドレスのあれに見えなくも無い)っていうのも割り振られて$12。CNAMEのほうは、そのi-numberへ別名をつけるだけの内容で$8。linkshareです。

とってみたものリスト。

=katsuo (Persona)

=unakatsuo (Synonym to =katsuo)

=k2o (Synonym to =katsuo)

i-numberってのは、公開しちゃっていいのかどうかわからん。

Safari3.1 速い

2008-03-23T21:43:00.003+09:00

Safari3.1 on windowsがあまりに速いので、乗り換えてみる。

その前まではOperaが速いと思って使ってたんだけれど、体感でこうも違うと乗り換えたくなってくる。LDRとかjavascript orientedなものも、明らかに違う動きをする。ただ、メモリフットプリントは大きめな感じか。安定性はちょっと低めで、ブラウザ上で同時にごちゃごちゃやってると落ちる。

ただ、Windows版だとGestureが使えなくて辛い。どなたかご存知でしたら教えてください。"次へ"と"戻る"だけ使えればいいんで。

VMWareのピボッ！

2008-03-23T21:08:00.002+09:00

まぁ、ぐぐると解決する話なのですが、ページランク上げる意味でも書いておく。

ThinkPadのX60sをメインに使っているのだけれど、これのビープ音にいつもびっくりさせられる。Windowsでスピーカの音量をミュートにしても、そんなことに関らずに同じ音量で鳴る。これについては、「ThinkPad のビープ音を消す」を参考にBeepデバイスなるものをdisableにすると、解決できた。

しかし、VMWareでキー入力を間違えるとあのびっくりする嫌な音がまた聞こえるのです。もちろん、上の設定は見直したしいろいろやってみたけれど、まだあの音が聞こえる。Windows側で音量をミュートにすると聞こえなく無くなるということは分かったけれど、そうするとiTunesからも音が出なくなってしまうので、あきらめてVMWareからはビープ音が鳴るまま放置。

その後、ついに解決する日がやってきます。「VMWare ビープ音　消す」とか「VMware でビープ音を止める」を見ると、VMWareのiniファイルにVMWare上のビープデバイスに関する設定項目をFalseにすることで、あの嫌な音が出なくなるという。やってみると、ホントに出ない。すごい。

ほかにも、UbuntuのWikiでは、ゲストのLinux側でpcsktrというドライバを読み込まないようにしてゲスト側からすべてのサウンドを鳴らさないようにするという解決も示されてた。そうすると、ゲスト側からすべての音が出てこなくなるのでVMWareの設定をつつく方が思ってる解決に近い気がする。

Googleにも、「vmware ビープ音消す」っていう関連検索が出てくるくらいだから、みんな悩むよね。

VMWareがWindowsのSoundデバイスを使ってThinkPadのビープ音と似たサウンドデータをビープのタイミングで鳴らしていたというのがオチ。あまりにThinkPadのあの音と似ていたのでVMWareがビープデバイスを叩いていたのかと思い込んでいたのでした。

添削添削

2007-10-19T00:16:00.000+09:00

英語でマニュアルを書いて、上司にガンガン直される。直してもらったの読むと、なんかスムーズな感じなんだよね。ほとんど高校レベルの単語だけ使っているのに、組み合わせの妙というか。

後ろで添削風景を眺めていると、ちょっとだけ上達した気になるから不思議だ。実際には上達してないんだろうけど。

Side Burn

2007-07-25T00:02:00.000+09:00

ってモミアゲって意味だって。
ふひょー。

take it offline

2007-06-23T23:25:00.000+09:00

電話会議とかで、こっち側だけの話が盛り上がって「いや、それ後で話そう」みたいに使う。

rails-mode

2007-06-19T08:33:00.000+09:00

emacs22とrails-modeの最新版を半年以上ぶりに入れなおしてみた。

rails.el に

(modify-coding-system-alist 'file "\\.rb$" 'utf-8)

みたいなのがあって、.rbやらが勝手にutfモードで編集されてしまう。。。

emacs-lispはよく分からないのでコメントアウトして使ってるけど、これから新しいバージョンを入れるたびに同じことをやらないといけないと思うと頭が痛い。。

Sun Ultra T1

2007-06-18T21:51:00.000+09:00

いまさら感がかなりあるけど、1つのFloating point unitを4つや8つのコアで共有と知ってビビる。
こいつを導入するような分野で整数演算だけあれば十分って言うところはあるのかすら。Webシステムのフロントエンドととかかな。

次のバージョンからコアの数だけunit積むみたいだけれど、出てくるのは来年の後半らしいからねぇ。高いくせに結構落とし穴があるので、なんともかんとも。。

タケルくん

2007-06-06T20:58:00.000+09:00

会津のタケルくんがTwitterやってるのを見つける。

GIGAZINEのフィードに広告が入りはじめた。

2007-06-06T20:55:00.000+09:00

フィードの広告ってクリックされてるんだろうか。
GoogleもFeedBurner買収したしね。

Rails Wiki

2007-02-01T21:28:00.000+09:00

Wikiスパムにやられてひどいことになってるです。。。。。

Shell scripting with Here document

2006-10-26T00:29:00.000+09:00

shで、ヒアドキュメントを使ってやられた。


% cat <<EOF
line1
line2
EOF

は動くけど、


% echo <<EOF
line1
line2
EOF

は動かない。

理由は、<<はファイルディスクリプタだかららしい。lsofかなにかで、<<の処理をしてるタイミングを覗くと、FDが一つ増えていて<<の正体がわかるみたい。

perlとかだと、文字列として展開されるはずだったから、shellでもそのつもりだった。。

ソフトバンクのプレゼンも高橋化してる件について

2006-10-24T21:34:00.000+09:00

TTでFragment Cache(2)

2006-09-25T22:12:00.000+09:00

やってみると、簡単であった。。。
書式的に直感的じゃないところがあるけれど、今回はこれでいいのではという。。。

Perl:


use Cache::Memcached;

sub partial_cache_filter {
    my($context, $key, $ttl)=@_;

    $key = join("::", __PACKAGE__, 'partial_cache_filter', $context->stash->get('component')->name, $key);
    return sub {
        my $text=shift;
        my $cache = Cache::Memcached->new(...init....);

        my $content;
        unless( $content = $cache->get($key) ){
            $content = $context->stash->get($text);
            $cache->set($key, $content, int($ttl) || 30*60);
            warn "$key was saved.";
        }
        return $content;
    }
}

use Template;
my $tmpl = Template->new;
$tmpl->add_option(
    FILTERS => { partial_cache => [\&partial_cache_filter, 2] },
);

TT:


[% MACRO parts1 BLOCK %]

[% FOREACH i = list1 %]
[% i %]

[% END %]

[% END %]

[% # 1800秒間、parts1の内容をキャッシュ。%]
[% 'parts1' | partial_cache(cache_key1, 1800) %]

これで、部分的にページの一部だけを切り分ける需要には耐えられるはず。PROCESS とか INCLUDE とかのdirectiveを拡張できれば、最後みたいなわけのわからない書き方をせずにすんだのに。もしくは、FILTER が出力時だけじゃなくて、入力時にも割り込めればもっと分かりやすい書き方ができるのに、とかいろいろ不満はありますがこのあたりで妥協しておきます。。

キャッシュしたい部分を、partial_cache() を呼び出す前までにMACROで囲っておかないといけないあたりは、先日説明したとおりの理由からです。

工夫って言えそうな点は、


$context->stash->get('component')->name;

を使って、テンプレートごとに自動的にキャッシュの名前空間を切り分けるようにした所くらいか。。。

TTでFragment Cache(1)

2006-09-23T16:32:00.000+09:00

RoRには、テンプレートの一部をキャッシュに突っ込める機能がある。


Hello <%= @name %>
<% cache do %>
  All the topics in the system:
 <%= render_collection_of_partials "topic", Topic.find_all %>
<% end %>

みたいに書くと、cache do からendまでの間がキャッシュに入り2回目からはexpireするまでキャッシュのものを使う仕組み。

TTにも、Template::Plugin::Cacheみたいなものがあったけれど、これはキャッシュにしたい箇所を別のテンプレートファイルに分けなきゃらなくて、そのページでしか使われないその部分だけをキャッシュするにはちょっと荷が重すぎ。

なんでRailsで上のようなことが簡単にできるかというと、do～end間が遅延評価されるから。
Fragment Cacheの仕組みを実現するには、

まず、<% cache %>に処理が移る

<% cache %>がキャッシュするものを使うか、新たにレンダリングが必要か判別

レンダリングが必要な場合は、do end ブロックの処理を実行

結果をキャッシュした後、表示

そこで、TTで遅延評価されている箇所や構文がないか調べてみると、MACROが近いものそうということに気づけました。


[% MACRO partial BLOCK %]
Text [% variable %]
[% END %]

は、StashというTTの変数を扱うための構造へ変換され、partialとvariableは同列の変数情報として扱われる様子。

コンパイルされると、


$stash->set('partial', sub {
});

という構造へ展開されます。sub{} があるので、このpartial変数は呼び出されるまで実行されないことになります。つまり、MACROは遅延評価ができる構造になってる。

TTでFragment Cacheの仕組みを実現するには、MACRO化されたエリアを呼び出してキャッシュの管理を行うプラグインを書けばよさそうということに。

来週がんばって作れればいいけれど。。。

ブログタイトル変更

2006-09-20T21:49:00.000+09:00

今日「やめるブログ」という名言を聞いてしまったので、ブログの名前をこれにすることにした。

ActionMailerと格闘

2006-09-19T14:17:00.000+09:00

ActionMailerに苦しめられた3日間だった。。。

http://wota.jp/ac/?date=20050731#p05

を参考に、メールを受信してから添付された画像を取り出すというのを作ってみてた。

この辺りで、base64なんかを勝手にほどいて、さらに文字コードの変換を勝手に行っているおかげで、画像データまでutf-8に変換されてたぽい。

実際には、1.1.2でほげってるんだけど、1.1.6でも直ってないぽい。

おかげで、変換に失敗した1バイトの文字列だけが返ってきて謎が深まりまくってた。

TMail::Mail.body_port.string か、TMail::Mail.quoted_body で生のまま直接取って返すだけでいいのにと思って、lib/action_mailer/vendor/tmail/attachments.rb の該当行を否定する感じで

 
content   = part.body_port.string # unquoted automatically by TMail#body

に書き換えると、すんなりうごいた。

他の人たちは、どうやってるんだ？？他の解決策があるのか？？

lib/action_mailer/vendor/tmail/quoting.rbが原因ぽいが、オーバースペックというか面倒見すぎな気がする。

ProxyPass, ProxyPassReverse, RewriteRule [P]

2006-09-14T13:08:00.000+09:00

apache2.2とちょっとばかり格闘中。
すでに2.2化されているのもあるので、その辺を参考にしてやったりしてるんだけど、balancerの設定でいくつかよく分からないところがあった。

ソース読むと、ProxyPassでbalancer:// はつかえるが、ProxyPassReverseは使えないという結論に。

あとは、
RewriteRule ^/(.*) http://balancer/padding/$1 [P,L]
と
ProxyPass / http://balancer/padding/
は、同意だったんだけれど、apache2.2からはProxyPassの方が指定できるProxy関連オプションが多いので、ProxyPassのほうがいいのかなぁとおもったり。

MLとFeed

2006-09-06T11:25:00.000+09:00

MLは大体ROM派なので、特にメーラで読まなくても何とかなりそうなことに今頃気づく。

Feedが流行っているので、お気に入りのreaderでタイトルとサマリだけ読みたいんだけれど、MLのリポジトリであまりRSSやAtomをサポートしているって言う話を聞かない。

と思って見ていると、googleのGroupsでMLやらを運営しているところのはFeedが出てるんですね。これは便利。

他の有名所で、自家製MLマネージャを使ってたりするところとかは、どうやってfeed化すればいいだろうか。

Rails Trac

2006-09-03T16:14:00.000+09:00

ここ数週間なぜか各ページのリンクが消えていたRails Tracだけど、昨日覗いたら普通に戻ってた。いったいなんだったの？？
ソース見ながら作業しているので、やむにやまれずhttp越しの装飾のないリポジトリを覗いてたけど、いまいち。

svnとTrac用のサーバを新しくしたときの影響？？

cometサポート

2006-09-03T15:27:00.000+09:00

Ajaxian » Opera 9 Streaming Support
によると、Operaでも9からapplication/x-dom-event-streamによるストリーミングがサポートされているらしい。
この辺の詳しいことは、WHAT-WGに書いてあるとも書いてあった。WHAT-WGなんて、canvasの事を調べてたとき以来見てねー。

今月のWEB-DB Press vol.34にもCometの事が書いてあったけど、IEまでサポートすることを考えるとまだ混沌としている様子。。

でも、これでGeckoとOperaがapplication/x-dom-event-streamをサポートできてるわけだから、streamingの本命は、application/x-dom-event-streamで決まりか。

XMLの属性のクオート

2006-08-18T13:30:00.000+09:00

<element attr1="value1" attr2="value2">

だけしか受け付けないのかと思っていたら、仕様を読み直すと

<element attr1='value1' attr2='value2'>

でもいけるらしい。

目からうろこ。

apache2.0と2.2

2006-08-16T12:02:00.000+09:00

apacheのモジュールを2.0用に書いているときに、2.2のドキュメントを読みながらやると、ちょくちょく引っかかる。

2.0にあってもしかるべきな感じの基本的なマクロや関数が、2.2からのサポートだったりするから。。
APR_ARRAY_PUSH() とかね。

苦手の会

2006-08-08T22:40:00.000+09:00

が、「情報科学苦手の会」に見えた。。。

年だ。。。。

RoR On OSX

2006-08-08T22:24:00.000+09:00

RoRがMac OS Xに標準搭載されるんだって。
すんばらし。

HDDお化けサーバ

2006-08-04T15:48:00.000+09:00

超欲しい

500GB x 48=24T で、1000万円だって。

MySQLのオンラインバックアップ

2006-07-30T04:01:00.000+09:00

を、こうやりますよ的なドキュメント。

MySQL5.1のレプリケーション

2006-07-28T23:59:00.000+09:00

は、こうなるっていうお話。

OSCONでやってたスライドみたい。
binlogのフォーマットとか新しいのができるみたい。

一カラムのインデックスサイズが255バイトってのは、まだ続ける気満々なのかな。

エスプレッソメーカー

2006-07-28T20:46:00.000+09:00

豆をひくところから、全自動だなんてすごい。

一ランク下の機械を使ってたことがあるけど、豆を装填するのが大変だし散らかるしで大変だった。でも、構造が複雑になってそうで壊れやすそうな気配もある。どうなんだろう。一世代目だから、がんばっても買わない方がいいかなぁ。

ミルクフォーマは、いままで通りなんだね。まぁ、これはこびりつく部分が多いから簡単な仕組みの方が維持しやすいかも。

ワンタイムパスワードが来た。

2006-07-27T22:44:00.000+09:00

ジャパンネットバンクのワンタイムパスワード生成機が来た。

5年は持つ前提で作られているらしかったり、キーの有効期限が目盛りの減り具合で分かったりして面白いのだけれど、他の銀行でも同じ仕組みを使い出すと困ったことになるなぁと思ったり。

キーホルダーにつけて使う前提ぽいのでそうしてみたんだけど、この大きさの生成機を他にも持ち歩かなければならなくなったとき、邪魔だなぁと。

理想的には、こんな感じにカードと一体化するといいのだけれど、こういう風に間違ったお手軽化を追求するとワンタイムパスワードの意味が無いとか。

VBA機能無さ杉

2006-07-21T14:12:00.000+09:00

時代に逆行して、ここ1週間以上ボランティアのためにExcel VBAを触っている。

その前の週はRubyとか触ってみているのに、ここで6年以上も前の言語に触れるのは苦痛すぎる。
どの変が苦痛かというと

オブジェクト指向言語と自称しつつ、継承ができなかったり
VB6だったらある機能（コントロール配列?とか）が同じVBという名前なのに削られていたり
関数とサブルーチンで定義が分かれいたり(引数を返す関数かそうでないかで関数の定義が違う)
GCがランタイムに含まれているような感じはあるけれど、ActiveXの部品を呼び出すと自分でリリースしないといけなかったり

と突っ込みどころが満載なので、やる気をなくす。
機能的な不足のいくつかは、上位製品(VB6とか)だったら解決できる問題であったりするので、変な商売っ気が透けて見えて、さらにやる気ダウン。

6年っていう月日は、やはり言語を進化させるのに十分な時間みたい。と思ったのと、言語とアプリケーションが別だったら問題もある程度緩和されるのにとも思った。

せっかくExcel本体をコンポートネント化して他所から呼び出しやすいように作っているのに、今のアプリケーションと言語を一体化させている形だと、言語だけバージョンアップさせたりとかができない。サポートの問題とか動作保証の問題とかいろいろあると思うけれど、Rubyはどんどん進化しているのに、Excel　2000についているVBAは次のバージョンを買うまで昔のままというのは、最近の流れからすると合っていない気が個人的にはする。

selenium IDEを使ってみた。

2006-07-21T09:06:00.000+09:00

http://www.openqa.org/selenium-ide/にあるfirefoxプラグインなんだけど、いい感じかも。

ブラウザ上でクリックしたものや、ページの移動、フォームへの入力などが履歴として記録されて、再度同じ操作を再生できるツールみたい。
GUIだけで操作をほぼ完結できそうなところや、履歴を保存しておけるところを利用すると、開発者じゃなくてもテストケース作っていろんな機能や操作をテストするのが楽になりそう。

フォームへ入力した後、タブキーなどを押して意識的にフォームからフォーカスを外してやるようにしないと、きちんと記録されていなかったりしたけれど、もうちょっと使い込んでみないとはまりポイントは分からない感じ。

・Javascriptを多用した複雑なDHTMLページでもうまく動くのか？
・良くあるWebUIのテストツールみたいに、コードを書いてテスト内容を追加したりすることができるのか？

とか気になる。
敷居が低そうなのは素人じゃなくてもありがたい。

メイリオ

2006-07-12T19:46:00.000+09:00

http://caramel-tea.com/2006/06/meiryo/ を参考に、メイリオをインストールしてみた。
ちょっと描画がもたつくときもあるけど、おおむね良好。

最初、デスクトップもこのフォントに全部入れ替えたんだけど、字間が広いというか間延びした感じになったので、Webブラウザのときだけこのフォントで楽しむようにした。

Railsでclass data inheritableが使える！

2006-07-09T02:08:00.000+09:00

Railsのactivesupportにinheritable_attributes.rbっていうのがあるのはいつのときか見つけていたんだけど、使い方がいまいち分からなかった。

activesupport/lib/active_support/core_ext/class/inheritable_attributes.rb


class A
  class_inheritable_accessor :data1
  self.data1 = 'constant value1' # なぜかselfがいる。。。
end


class B < A
  self.data1 = 'constant value2'
end

class C < A
end

puts A.data1 # constant value1
puts B.data1 # constant value2
puts C.data1 # constant value1

これからガシガシ使います。

秘密じゃないことはこっちに書いていくことにする。

2006-07-09T02:01:00.000+09:00

えへ。