MapReduce Serviceとは
スケーラブルなパワーで可用性が高いビッグデータクラスターを起動および管理し、オープンソースの分析ワークロードを実行
-
高速のプロビジョニングと容易な保守
自動化されたソフトウェアのインストールと設定、統合されたローリングパッチとローリングアップグレード、簡素化された運用・保守により、ビッグデータクラスターの迅速なプロビジョニングを実現。
自動化されたソフトウェアのインストールと設定、統合されたローリングパッチとローリングアップグレード、簡素化された運用・保守により、ビッグデータクラスターの迅速なプロビジョニングを実現。
-
分離されたストレージとコンピューティング
99.9999999999%の耐久性を備えた低コストのObject Storage Service(OBS)にデータを無制限に保存しつつ、コンピューティングクラスターを分析に使用することで柔軟性の向上とコストの削減を実現。
99.9999999999%の耐久性を備えた低コストのObject Storage Service(OBS)にデータを無制限に保存しつつ、コンピューティングクラスターを分析に使用することで柔軟性の向上とコストの削減を実現。
-
エンドツーエンドのセキュリティ
ケルベロス認証でクラスタープロジェクト権限を管理し、Identity and Access Management(IAM)サービスでユーザーとリソースを安全に保つことが可能。伝送中および保存中にデータを暗号化。
ケルベロス認証でクラスタープロジェクト権限を管理し、Identity and Access Management(IAM)サービスでユーザーとリソースを安全に保つことが可能。伝送中および保存中にデータを暗号化。
-
高い可用性とパフォーマンス
アベイラビリティゾーン全体で高可用性を実現しており、単一障害点なし。クラスターでインスタンスやRAMおよびCPUを素早くスケールアップして、大規模なコンピューティングパワーを実現。
アベイラビリティゾーン全体で高可用性を実現しており、単一障害点なし。クラスターでインスタンスやRAMおよびCPUを素早くスケールアップして、大規模なコンピューティングパワーを実現。
主要なリリース
Apache Pulsar(次世代の分散型メッセージおよびストリーミングプラットフォーム)
Apache Pulsarは、ストレージとコンピューティングが分離された次世代のメッセージシステムであり、ハイパフォーマンスなクラウドネイティブのサービスとして、統合モデルとストリーミングモデルを備えています。統合モデルとストリーミングモデルを備えた高性能なクラウドネイティブサービスです。メッセージキューおよびストリーム処理プラットフォーム向けの優れたオプションを提供するために、Huawei Cloud MRSにはエンタープライズクラスのApache Pulsarメッセージシステムが統合されています。
- 活用場面
- メッセージキューの作成
- ストリーミングデータ処理
- 技術的な特長
MRSは、リアルタイムのデータレイク、オフラインのデータレイク、論理データレイクを備えたハイブリッドクラウド用のクラウドネイティブなアーキテクチャや、安価、柔軟かつ安全で信頼できるパブリッククラウド用のワンストップのビッグデータプラットフォームとして使用可能。分離されたストレージとコンピューティングによって、より柔軟性が高いスケーラビリティが実現されており、マルチテナント構成や階層化されたストレージ、幅広い柔軟なサブスクリプションモード(専用、アクティブ/スタンバイ、共用)を利用可能。
![](/cloudbu-site/intl/en-us/mrs/ApachePulsar.jpg)
ClickHouse(エンタープライズエディション)
ClickHouseは、優れた圧縮率と超高速のクエリを備えている卓越したリアルタイムの分析データベースです。ClickHouseでは、Huawei Cloudによる信頼性が高いセキュリティ機能とマルチアーキテクチャのコンピューティング(x86およびArm)により、数百のディメンションの数百億件のレコードのクエリにミリ秒単位で応答できます。クラウドでハイパフォーマンスかつ大規模なデータ分析ウェアハウスを構築する場合のオプションとして最適です。
- 活用場面
- フラットワイドテーブルにおける大量のデータのリアルタイム分析
- リアルタイムのBIレポートの分析
- ユーザーの挙動の分析
- ゲーミングの操作データの分析
- 技術的な特長
究極のパフォーマンス、マルチアーキテクチャのコンピューティング、セキュリティと信頼性、スムーズで弾力性があるスケーリング、柔軟な設定、専門家のサポート。
![](/cloudbu-site/intl/en-us/mrs/1212121.jpg)
ユースケース
幅広いビッグデータコンポーネントを使用して大量のデータの処理、分析、クエリ、マイニングを実行
自動車のインターネット(IoV)
MRSでは、オープンソースのAPIとの互換性を活かして、高速かつ効率的なデータ処理コンピューティングエンジンを利用できるようにしています。これにより、自動車のステータスデータ、テレメトリーデータ、ユーザー体験データを大量に分析できます。
特長
ファイナンスおよび保険
MRSは、保険業界のコンプライアンス、セキュリティ、信頼性に関する厳しい要件を満たします。迅速な変化を求められている保険会社向けに素早く従来型のアーキテクチャを再構築して、デプロイすることが可能です。デジタルトランスフォーメーションによって、サービスの変革と進化を容易化および迅速化できます。
特長
スマートな物流
MRSを使用して物流とサプライチェーンのルートのインテリジェントな管理を実現し、サービスオペレーションの効率を高めて、コストを大幅に低減することができます。
特長
エレベーターのインターネット(IoE)
MRSは、インテリジェントなエレベーター管理のためのオープンなワンストップのビッグデータ処理プラットフォームです。このプラットフォームは、ほぼすべてのシナリオに適応するうえで十分な柔軟性とカスタマイズ性を備えています。
特長
水のスマートな管理
MRS Hadoopによる信頼性が高いハイパフォーマンスなビッグデータストレージと分析により、インテリジェントな水の管理を実現します。
特長
リアルタイムのゲーミング
KafkaとFlumeを使用して、ゲームのログデータをリアルタイムで評価できます。その後、Sparkストリーミングでデータをリアルタイムで処理および分析し、分析結果をHBaseやHiveに保存して、迅速なゲーム広告の分析、データのクエリと分析、収益の分析を行うことができます。
特長
大量データの取り込み
MRS KafkaおよびSqoopは、複数のデータ取り込み方法をサポートしており、数百万のメッセージをリアルタイムに簡単に取り込むことができます。
特長
クラスターのオプション
プリインストールされたコンポーネントを使って、事前に設定されたクラスターテンプレートから素早くデプロイ
-
Hadoop分析クラスター
Sparkで大量のデータの分析とクエリが可能なほか、Hiveを使用してテラバイト規模からペタバイト規模までのデータを分析できます。
Sparkで大量のデータの分析とクエリが可能なほか、Hiveを使用してテラバイト規模からペタバイト規模までのデータを分析できます。
-
HBaseクラスター
-
Kafkaクラスター
Flumeをリアルタイムのデータ取り込みに使用し、Kafkaを数万件のデータレコードのリアルタイムなアクセスに使用できるほか、Stormを信頼性が高いフォールトトレラントな低レイテンシーのオンラインサービスデータ処理に使用することが可能です。
Flumeをリアルタイムのデータ取り込みに使用し、Kafkaを数万件のデータレコードのリアルタイムなアクセスに使用できるほか、Stormを信頼性が高いフォールトトレラントな低レイテンシーのオンラインサービスデータ処理に使用することが可能です。
-
ClickHouseクラスター
ClickHouseを使用して大量のデータのクエリと分析をリアルタイムで実行し、データの価値の抽出を迅速化します。
ClickHouseを使用して大量のデータのクエリと分析をリアルタイムで実行し、データの価値の抽出を迅速化します。
新機能
導入事例
美図(Meitu)
FusionInsightで分離されたストレージとコンピューティングを使用し、必要に応じてコンピューティングリソースとストレージリソースを柔軟かつ個別に拡大することができます。単一のデータのコピーで複数のタイプの分析とコンピューティングに対応できるように、Hadoopのビッグデータの3つのコピーを1つのECアルゴリズムに置き換えて、リソース活用率を40%向上し、コストを全体で30%削減しました。これは、美図のビッグデータサービスを世界中の20億人以上のユーザーに効率よく提供するうえで役立ちます。
招商銀行(China Merchants Bank)
「Huawei Cloud FusionInsightビッグデータプラットフォームは、招商銀行でのイノベーションを大きく推進しました。現在では、より優れたオンデマンドのリアルタイムなオンラインサービスの提供が可能になっています。また、以前は過去13か月間の履歴データに対してのみクエリを実行できましたが、現在は過去7年間のデータに対してクエリを実行できます。さらに、これまでより82%少ない件数のSMSメッセージで、ターゲットに設定したユーザー全員にリーチすることもできています。」
—招商銀行、情報技術部門、次世代クラウドコンピューティングプロジェクト担当マネージャー、リウ・ジン
T3出行(T3Go)
T3出行のレイクハウスでは、分離されたストレージとコンピューティングを採用しています。オープンソースのHudiフレームワークをベースに構築されており、BIとAIの両方に適用できます。現在、T3出行のレイクハウスはHuawei Cloud FusionInsightでホストされています。
— T3出行、ビッグデータプラットフォーム責任者、ヤン・フア