Muranaga's Golf

46歳でゴルフを始めて10数年。シニアゴルファーが上達をめざして苦労する日々をつづります

次世代ビッグデータ処理ソフトウェアとして UC Berkeley 発の Spark が熱い

次世代ビッグデータ処理ソフトウェア基盤として、UC Berkeley AMP Lab 発の Spark が熱い。Hadoop ベースでありながら、インメモリ処理により Hadoop の 100倍の性能。さらにその上に機械学習SQL、グラフなどのライブラリを構築。UC Berkeley のキーメンバーDatabricks というベンチャーを立ち上げ、Apache オープンソース・ソフトウェアの中核を作り、多くの開発者を巻き込んで、Hadoop の次を担う存在になりつつある。MapR など Hadoop コミュニティの会社も Spark を取り込む意思表明をし、Amazon, IBM なども参画している。Spark Summit 2014 という数週間前に開催されたカンファレンスには 1,000人を超える参加者があったとのこと。

関連エントリ