プロジェクト概要

Web業界ではAmazonやGoogleといった企業が自社の持つ巨大な分散フレームワークを

自社のサービスを提供するためだけに使用するのではなく

WEBAPIなどを通して積極的に外部に公開することで新たな市場を開拓しようとする潮流が存在する。

現在提供されているのはデータベース機能や,あるいは仮想的なサーバ環境を提供するものに

限られているが、今後はその分散処理フレームワークを提供するようなサービスの出現が予想される。

GoogleではMapReduceと呼ばれる分散処理フレームワークを使用していることが知られているが、

このようなフレームワークを一般のユーザが使用して最大の性能を引き出すためには

ユーザがフレームワークに熟知していて、自身のプログラムをフレームワークに合うように

プログラミングする必要がある。そうしてなお本当に作成したプログラムが最適なものであるかどうかわからないという問題がある。

そこで本提案では

関数型の言語で書かれた一般的なプログラムを入力として受け取り

それをプログラム融合変換という手法を用いて、分散処理しやすいような性質を保ったまま

関数間で受け渡しされる中間データが最小限になるように自動的に変換し、

変換後のプログラムに対して分散処理計画を動的に決定し分散処理をおこなう分散処理環境の開発を提案する

具体的な開発項目は大きく分けて以下の2つからなる

採択理由

Web業界の世界的リーディングカンパニーであるAmazonやGoogleは巨大な分散処理フレームワークを使って、各種のサービスを提供しているがWebAPIを通して自社だけでなく分散処理フレームワークを提供するようなサービスの出現が予想される。分散処理フレームワークを使いこなすためには最適なプログラミングができるSKILLを必要とされる。本提案プロジェクトは実行するプログラムをフレームワーク上で高速に処理されるように自動的に変換する分散処理フレームワークの開発であり、将来のビジネスオポチュニティを見越して、非常に挑戦的であるが試みる価値はあると考えられる。未だ競合しそうな対象はなく、未踏のテーマとしても良いと考えられる。