‡A Case Of Identity‡

頑張ります!

プログラム

Excelを吐くやつ

Excelを生成するRubyライブラリがあったので、使ってみています。グラフとか作ればいいのでしょうが、セルの色とか変えられるのでドット絵を作るプログラムになってしまいました。 もう少し実用的な使い方をするものを作らないと・・・。

RMagick

UbuntuにRMagickをインストールする方法。 http://d.hatena.ne.jp/kaorumori/20100510/1273544324 この方法で行けました。

近接センサ

近接センサのQRE1113を買っていたのでRaspberry Piで読めるか確認。アナログ版とデジタル版があるけど、Raspberry PiはデジタルなIOしかないっぽい。両方買ったけど、調べてから買いにいけば良かったな。まぁまだ1個ずつしか買ってないけど。 GPIOにつないで…

Raspberry Piとサーボモータ

Amazonやスイッチサイエンスでいろいろ買っていたのですが、作業を開始しました。ハンダ付けとか久しぶりですし、ちゃんと習ったことないので上手くできないですが、なんとかかんとかやっています。テスターはやはりもうちょっとまともなものを買えば良かっ…

Python

Raspberry Piをいじっているのですが、GPIO回りなどもPythonのライブラリが提供されていたりするので、Raspberry Pi上で動かすWebアプリもPythonで書こうかなというところです。 WebSocketを使うかもしれないので、Tornadoで行こうかと思っているところです…

Cloudera Search

Cloudera Search: The Newest Hadoop Framework for CDH Users and Developers - Cloudera Engineering Blog 待望のSearchがベータ公開されました。 クローラと検索インデックス作成あたりのために登場したHadoopがSolrを取り込むという形(表現が難しいな)…

XMPP

XMPP | XMPP Main いろいろなもののメールでの通知を止めたいけど、みんなが使っているツールでというと難しい・・・。 ということで、XMPP対応しているものを調べていると、どうやらWindowsMessengerは対応しているらしい。がっSkypeに統合されてしまってい…

YouAreDeadException

HBaseにあるException。 http://hbase.apache.org/apidocs/org/apache/hadoop/hbase/YouAreDeadException.html この名前のクラスを多用していきたいw

CDH4.1

機械学習 | 分析 | クラウド - Cloudera CDH4.1がリリースされたようです。 ・クオラムベースのストレージ – HDFSのクオラムベースストレージにはネームノードの編集ログを保存でき、これにより外部ストレージやカスタムフェンシングの必要なく高可用性ネー…

FlumeとHBase

FlumeのSourceの作り方を教えてもらいました。Interfaceは簡単だけど、そこを実装するのは結構大変だなぁという印象。 MySQLのレプリケーション回りだとtungsten-replicatorがあるので、それを活用するのもありかもしれないですね。 Google Code Archive - L…

MySQL Binlog

MySQL :: MySQL Internals Manual :: 20 The Binary Log かつてTさんがJavaでのバイナリログパーサを作っていたのを思い出して、何か上手いことできないかを考えているところです。 MySQLバイナリログパーサJava実装 | サイバーエージェント 公式エンジニア…

NN HA準備中

CDH4b2から入っているHDFS NameNode HA(Automatic Failover for HDFS High Availability)を試していました。 Fencing Methodが必要ですが、そこは適当に書いてNameNodeのプロセス落としてFailOverするかをやってみました。ひと通りの動作はできましたねぇ…

Commons Exec

ProcessBuilderが微妙に使いづらかったりするのですが、Commons Execというのがあるのですな。 第19回 Javaプログラムから外部プロセスを起動するための「Apache Commons Exec」:本格派エンジニアの工具箱|gihyo.jp … 技術評論社 そもそもProcessBuilder使…

Hiveの処理中にスクリプトかます方法

メモ。 add file test.awk; SELECT TRANSFORM(a, b, c) USING '/bin/awk -f test.awk' AS id, time FROM test_table WHERE a='test' ORDER BY time; https://cwiki.apache.org/Hive/languagemanual-transform.html USING 'mapscript'って書いてあったからそ…

開発合宿4日目@お台場・the SOHO

夕方には天気が悪くなったけど、合宿中はずっと天気が良かったですね。外に出ないからあまり関係ないとはいえ、窓から見える東京湾の景色がキレイに見えるのはなかなか良いものです。 ということでデキは50%というところかな。まぁ顔認識でテキトーにやって5…

開発合宿3日目@お台場・the SOHO

ダメだ。全然書けない。どこかでプログラミングをちゃんと勉強しないと・・・。 今日は土曜だからというのもあってか、近くのレストランが全て夜の営業をしていなかった・・・。お台場は生活していくには不便すぎる。前来たときには土日も営業していたような…

開発合宿2日目@お台場・the SOHO

やはりOpenCVが顔識別でもメインなライブラリですかねぇ。なんでWindowsなんだとDisられながらもVisual C++ 2010 Expressを入れて、ボチボチやってみます。C++よく分からない・・・。というかプログラミング得意じゃない・・・。 こんな調子でやっていても終…

開発合宿1日目@お台場・the SOHO

チームに業務委託の方が来たり、内定者バイトの方が来たりでなかなか自由に(コアメンバー全員が)外に出ることができなかったこともあって、かなり久しぶりの開発合宿です。 今回は業務をやらないようにしようという気持ちで来ていますが、それはそれで難し…

HDFSのfindコマンド

HDFS上の/tmpにログがたまってるので消したいけど、findコマンドとかないかなぁと探したらあった。「hfind」というやつ。 http://pub.mouraf.org/blog/2010/09/hfind-a-find-utility-for-hadoop/ 結局mtimeが取りたいのだけど、他のやり方だとawk使ったりで…

コマンドラインから添付メール

uuencodeとかもあるようですが、muttが楽そうなのでコチラに。 The Mutt E-Mail Client それだけのために使うのはもったいない気もしますが・・・。

開発合宿6日目@お台場

もう全然進まない。レポート本文も進まない。 雨は降ってくるし、いいことなしです。 この半年これで良かったのかと反省しているところです。

開発合宿5日目@お台場

エアマットで寝やすくなった気がします。 科学未来館の見学をしました。透明マントはなかなか良いですね。 http://www.doraemon-miraiten.jp/ 夜からハッタリ先生も合流して、また少し賑やかになりました。

開発合宿4日目@お台場

午前中から昼過ぎまで会社に戻ってインタビュー取材を受けました。まさかの事前情報ほとんど無しで大変でした。きっとこちら側の不手際なのでしょうけど・・・。 合宿に戻ったのですが、なんだかんだでなかなか手をつけられない状態・・・。あぁ・・・。 今…

開発合宿3日目@お台場

Flumeを調べているところ。便利そうだというのはわかるのだけれど、上手く使えない・・・。Hiveとの連携もまだのようで(次期バージョンでは導入されそうな感じだけど)、まだ厳しいかなぁ・・・。 とりあえずHDFSに書き込むテストがまだできていないw

開発合宿2日目@お台場

夜になって徐々に開始。 昼間は横浜へ。結局、特に何もすることなく帰ったのですがね。 合宿施設のトイレットペーパーがなくなっていたので購入。トイレットペーパーを持ってゆりかもめに乗るのはなんか違和感があるな・・・。お台場の住人はいないのだろう…

開発合宿1日目@お台場

とか言って、何もやっていない。お台場に来ただけという感じ。まぁ休みなので。 Y田も来たけど、すぐどっかに行ったしなぁ。 アメリカ研修の時の日記を書いていたりしたら1日が終わった感じ。明日も明日で行く場所があるし、合宿は月曜からかなぁ。 トイレッ…

開発合宿3日目@お台場

最終日ですね。もうあきらめモードでした。 アメリカ研修、インターンでなまった体のリハビリにはなったと前向きに考えたい。 そして来月もお台場合宿をしよう。

開発合宿2日目@お台場

進まない・・・。ダメじゃん。 物件情報探したりするという仕事もあったりw どこぞのゲームがいい感じじゃないかとか話したりもして盛り上がりすぎて、さらに進まない・・・。

開発合宿1日目@お台場

恒例の開発合宿です。今回もお台場です。 今回は平日なので行くのもラッシュで大変でした。ただ、食事するところなどは平日なので遅くまでやっているので、その点は良いですね。 開発合宿といいつつ通常業務をやっている気がします。気分転換にはちょうどい…

開発合宿3日目@お台場

3日目になると疲れが出てきますね。 昼食はまたも1階のカフェレストランで。食べる場所がないんですよ。湾岸定食の内容が変わっていたので、再びの湾岸定食。 18時頃にSOHOをあとに・・・。船の科学館駅に向かっていると、湾岸署の前に1人の女性が写真を撮っ…