1
ディスコは、分散コンピューティング向けのmapreduceの実装です。ディスコは、Googleが作成した元のフレームワークのように、信頼性の低いコンピューターのクラスターに保存された大きなデータセットに対する並列計算をサポートしています。これにより、ディスコが処理する通信プロトコル、負荷分散、ロック、ジョブスケジューリング、フォールトトレランスなど、配信に関連する難しい技術を心配することなく、大きなデータセットを分析および処理するための完璧なツールになります。
disco-mapreduce
ウェブサイト:
http://discoproject.org/特徴
カテゴリー
WindowsのDisco MapReduceの代替
18
Apache Hadoop
Apache Hadoopは、Apache v2ライセンスでライセンスされたデータ集約型分散アプリケーションをサポートするオープンソースソフトウェアフレームワークです。
9
Apache Spark
Apache Spark™は、大規模なデータ処理用の高速で汎用的なエンジンです。SpeedRunプログラムは、メモリ内のHadoop MapReduceよりも最大100倍、ディスク上では10倍高速です。
