AKS の HDInsight とは (プレビュー)

AKS 上の HDInsight は、Azure Kubernetes Service (AKS) 上で実行される、信頼性が高く、セキュリティで保護されたフル マネージドのサービスとしてのプラットフォーム (PaaS) です。 AKS 上の HDInsight を使用すると、コンテナーの管理と監視のオーバーヘッドなしで、Apache Spark™、Apache Flink®️、Trino などの一般的な Open-Source Analytics ワークロードをデプロイできます。

Apache Flink、Apache Spark を使用したデータ エンジニアリング、機械学習、Trino の強力なクエリ エンジンを介したストリーミングにまたがる、エンドツーエンドのペタバイト規模のビッグ データ アプリケーションを構築できます。

これらの機能はすべて、AKS の強力な開発者フォーカス上の HDInsight と組み合わせることで、高度な技術的専門知識を持つ企業やデジタル ネイティブが、ニーズに適したアプリケーションを構築して運用できます。 AKS 上の HDInsight を使用すると、開発者は、オープンソース ソフトウェアによって提供されるすべての豊富な構成と、他のエコシステム オファリングをシームレスに含める拡張性にアクセスできます。 このオファリングにより、開発者はアプリケーションをテストして調整し、最適なコストで最適なパフォーマンスを引き出すことができます。

AKS 上の HDInsight は、Azure エコシステム全体と統合され、実装サイクルが短縮され、価値を実現するための時間が短縮されます。

技術的なアーキテクチャ

AKS 上の HDInsight では、クラスター プールとクラスターの概念が導入されています。これにより、Data Lakehouse の完全な価値を実現できます。 クラスター プールを使用すると、1 つのデータ レイクで複数のコンピューティング ワークロードを使用できるため、ネットワーク管理とリソース計画のオーバーヘッドを排除できます。

• クラスター プール は、複数のクラスターの種類間で堅牢な相互運用性を構築し、企業がクラスターを同じ仮想ネットワーク内に配置できるようにするクラスターの論理的なグループです。 クラスター プールは、オンデマンドで大規模に作成されたすべてのクラスターの種類に迅速かつコスト効率の高いアクセスを提供します。 1 つのクラスター プールは、AKS インフラストラクチャ内の 1 つのクラスターに対応します。
• クラスター は、Apache Spark、Apache Flink、Trino などの個々のコンピューティング ワークロードであり、事前設定された構成で数分で迅速に作成できます。

必要に応じて、単一のクラスターまたはクラスターの種類の組み合わせを使用してプールを作成し、次のオプションをカスタム構成できます。

• 貯蔵
• ネットワーク
• 伐採
• モニタリング

次の図は、既定のクラスター プールにインストールされているコンポーネントの論理技術アーキテクチャを示しています。 クラスターは、AKS クラスターで 名前空間を使用して分離されます。

最新化されたクラウドネイティブ コンピューティング プラットフォーム

最新バージョンの HDInsight は AKS を使用して調整されます。これにより、プラットフォームがより堅牢になり、ユーザーがクラスターを効果的に処理できるようになります。 AKS 上の HDInsight でのクラスターのプロビジョニングは高速で信頼性が高く、クラスターの管理とインプレース アップグレードの実行が容易になります。 膨大な SKU の選択肢と柔軟なサブスクリプション モデルにより、AKS 上の HDInsight でオープンソース、クラウドネイティブ、スケーラブルなインフラストラクチャを使用してデータ レイクハウスを最新化することで、すべての分析ニーズを満たすことができます。

主な機能は次のとおりです。

• 迅速なクラスターの作成とスケーリング。
• メンテナンスと定期的なセキュリティ更新プログラムの容易さ。
• 最新のクラウドネイティブ AKS を利用したクラスターの回復性。
• OAuth と Microsoft Entra ID を使用した先進認証のネイティブ サポート。
• Azure Services との詳細な統合 – Azure Data Factory (ADF)、Power BI、Azure Monitor。

HDInsight への接続

AKS 上の HDInsight は、HDInsight とシームレスに接続できます。 ハイブリッド モデルで必要なクラスターの種類を使用する利点を享受できます。 両方のオファリングで同じストレージとメタストアを使用して、HDInsight のクラスターの種類と相互運用します。

HDInsight は、サービスとしてのプラットフォーム (PaaS) フォーム ファクターで Apache Kafka®、Apache HBase®、およびその他の分析ワークロードを提供します。

次のシナリオがサポートされています:

• Apache Flink が Apache HBase に接続する
• Apache Kafka に接続する Apache Flink
• Apache HBase に接続する Apache Spark
• Apache Kafka に接続する Apache Spark

セキュリティ アーキテクチャ

AKS 上の HDInsight は既定でセキュリティで保護されています。 これにより、企業は Azure Virtual Network、暗号化、および Microsoft Entra ID との統合を使用してエンタープライズ データ資産を保護できます。 また、Azure 標準を維持する最も一般的な業界および政府のコンプライアンス標準を満たしています。 定期的な更新、正常性アドバイザーの通知、サービス正常性分析、クラス最高の Azure セキュリティ標準と共に、データを保護するのに役立つ 30 を超える認定資格を持つ。 AKS 上の HDInsight には、既定でエンタープライズ セキュリティのニーズに対応するいくつかの方法が用意されています。 詳細については、AKS セキュリティでのHDInsight に関する記事を参照してください。

リージョンの可用性 (パブリック プレビュー)

アジア太平洋

• オーストラリア東部
• インド中部
• 東アジア
• 東日本
• 韓国中部
• 東南アジア

ヨーロッパ

• フランス中部
• 北ヨーロッパ
• ノルウェー東部
• スイス北部
• 英国南部
• 西ヨーロッパ

アメリカ大陸

• ブラジル南部
• カナダ中部
• 米国中部
• 米国東部
• 米国東部 2
• 米国東部 2 EUAP
• 米国中南部
• 米国西部
• 米国西部 2
• 米国西部 3