GeekFactory

int128.hatenablog.com

2010-12-01から1ヶ月間の記事一覧

レインボーブリッジの下で

最高でした。

App Engineで動く並列処理フレームワーク ElShard

App Engineで大量のデータを並列処理するフレームワーク ElShard を作っています。batch addとdeleteのサンプルができたので、とりあえずまとめてみます。ElShardは、入力リストを分割して処理して集約する考え方に基づいています。並列処理はApp EngineのTa…

変わらない世界と変わりゆく世界

最近読んでいいなと思ったエントリ。 一方、日本のSIerの考え方では基本的に契約したシステムの機能を期限内に実装できれば良いというのが基本的な考え方です。 実際は顧客のビジネスは変化しますし、要件が変わらないということはないはずなのですが、そこ…

タスクチェーンのフレームワーク

App Engineでは実行時間に制限があるため、長時間にわたる処理を行う場合は複数のタスクに分割する必要があります。この手法は一般にタスクチェーンと呼ばれています(たぶん)。タスクチェーンを抽象化してフレームワークにできるか考えてみました。タスク…