Gearpump

Gearpump

Apache Gearpumpは、リアルタイムのビッグデータストリーミングエンジンです。Gearpumpという名前は、「ギアポンプ」という工学用語を指しています。これは、2つのギアだけで構成される非常にシンプルなポンプですが、水を流すのに非常に強力です。他のストリーミングエンジンとは異なり、Gearpumpのエンジンはイベント/メッセージベースです。初期ベンチマークでは、4ノードクラスターで8ミリ秒の待機時間で1秒あたり1,800万のメッセージ(メッセージの長さは100バイト)を処理できます。
gearpump

カテゴリー

ライセンスのあるすべてのプラットフォームでのGearpumpの代替

Apache Spark

Apache Spark

Apache Spark™は、大規模なデータ処理用の高速で汎用的なエンジンです。SpeedRunプログラムは、メモリ内のHadoop MapReduceよりも最大100倍、ディスク上では10倍高速です。