Hadoop における、Akka Cluster を用いた汎用リソースマネジメント

Hadoop エコシステムにおいて Apache Spark を超えるものはあるのでしょうか？データサイズではなく計算量がスケーラビリティへの要求を規定している際には果たしてどうすべきでしょうか？本セッションでは、私達の Scala ベースのエンタープライズ予測モデリングシステムの基本的な技術を明らかにします。また、スケーラビリティと高可用性を厳しく要求される特別な分散ワークフローを、どのようにして YARN と Akka を使って構築し実行しているのかをご紹介します。そして、この目的に適うツールについて議論し、このアプローチが特に有益となるであろうユースケースについてもご紹介します。

トークの長さ

40分

発表言語

英語

聴衆の対象

中級者: 分野の基礎は分かるが、細かい所は不安

こんな人におすすめ

純粋な Hadoop のインフラストラクチャに制約されていたり、ある種の分散ワークフローにおいては Spark が不十分あるいは不便である、という人には特に有益
Hadoop/Spark/Akka を既に使用している、あるいは興味のある人

発表者

Iaroslav Zeigerman (dotData Inc. - Senior Software Engineer)

First time speaker

貢献

応募一覧