基本情報

概要

Apache Mesos(アパッチメソス)とは、クラスタリソースマネージャです。分散アプリケーション/分散フレームワークを複数のノード上で稼働させ、効率的なリソース分離/共有機能を提供します。

基本説明

複数の物理マシン/仮想マシンを1つのクラスタとして管理し、空いているマシンを探して、そこにリソースを割り当ててタスクを実行させます。分散システムにおけるkernelのような役割を担います。

リソースマネージャとしての機能は充実しており、効率的な動的リソース分配が可能です。汎用性も高く、クラスタの利用を効率化できます。

関連ツール「ZooKeeper」

「Zookeeper」は、クラスタにおけるジョブ実行調整を行います。

Mesosは、「複数あるマスタノードの中で、どのマスタノードをアクティブにしてクラスタに組み込むか」などの仕組みとして「Zookeeper」を利用します。

関連ツール「Marathon」

Mesosは、基本的に、「タスクを走らせる時点でリソースを割り当てて、完了したら解放する」という動きをします。

Webアプリのように常時起動させるようなアプリケーションを動かすためには別の仕組みが必要です。その機能を担当するのが「Marathon」です。

「Marathon」は、デーモンを実行させるサービスのような存在で、コンテナ起動/終了/設定管理機能を提供します。

関連ツール「Chronos」

「Chronos」は、cronのような存在で、Mesos上で動く各サービスの設定/開始/停止/エラー処理などの管理を行います。

主な特徴

クラスタ管理

Mesosは、複数ホストを1つの巨大マシンのように扱います。複数ホストのCPU/メモリ/ディスクを抽象化して、1つのリソースプールとして管理します。各ホストのリソース消費量に気を使う必要がなくなります。

以下のような環境に適しています。
・一度に大量リソースを必要とする処理(バッチ処理など)
・定期ジョブ実行
・スペックが異なるホストマシンが混在している環境

対障害性

Zookeeperにより、マスタノードを複数台のアクティブ/スタンバイ型のクラスタ構成にできます。

スケーラビリティ

10000ノード程度までスケールできます。

拡張性

「Scheduler」や「Executor」を自作して拡張できます。

タスク間アイソレーション

Linuxコンテナとタスク間の分離を行います。

リソーススケジューリング

CPU/メモリ/ディスク/ポートなどを対象としたマルチリソーススケジューリングが可能です。

開発言語(API)

開発言語して、C++/Java/Scala/Pythonなどを使用できます。アプリケーション開発用の「REST API」を使用します。

Web UI

WebUIでクラスタの状態を確認できます。

Docker on Mesos

Dockerコンテナをサポートしています。ホストOS上でマルチOS環境を実現でき、ホストのリソース消費量に応じて、効率的にDockerコンテナを配置します。

同様製品(概要情報)

同様な機能を提供する製品として、次のようなものがあります。

オープンソース製品：「Kubernetes」など。

導入事例

Twitter、Airbnb、Apple(Siriのバックエンド)などでの採用実績があります。

ライセンス情報

Apache Mesosのライセンスは、「Apache License 2.0」です。このライセンスに従うことを条件として、ソースコードの改変と公開が許可されています。

ダウンロード

ダウンロードページ

※定期的にメンテナンスを実施しておりますが、一部情報が古い場合がございます。ご了承ください。