2009-03-06 はてなで使用されている技術で気になるの 技術 web-db press vol49を読んで。 Hadoop バッチ処理用の並列分散処理システムで、Googleが開発したMapReduceのオープンソース実装 巨大なデータを分割して複数のサーバで並列分散処理出来る。 TheSchwarts Six Apartによって開発されたPerlによるジョブキューシステム この2つは今後間違いなく必要になるので覚えておきたい。 あーあと、DSASの話聞いてからだけどやっぱりロードバランサを独自実装したい。