Googleが分散ファイルシステムであるGoogle File Systemを用いながら、その大容量のデータを処理するために使われる分散処理技術がMapReduceです。Wikipediaによれば、100テラバイト以上のデータセットを並列処理するためのフレームワークで、関数型言語でよ…

Google File System(GFS)とは、Googleが利用している大規模な分散ファイルシステムのことです。 その規模たるや、想像を絶する大きさのストレージで、これはGoogleの提供する様々なサービス(検索履歴、アクセス解析、Gmailなどなど)で利用されています。 こ…

いまIT業界では、データや、データのための処理能力をインターネットの向こう側に一箇所に集めて、そのサービスを提供しようというクラウド・コンピューティングなどが注目されています。世界中のデータをどこか別の場所で高速に処理をするには、ものすごく…