データベース

Databricks on AWSの構築手順:クロスアカウントIAM・S3・VPCの設定とAzure版との違い【2026年11月】

Databricks on AWSの構築手順:クロスアカウントIAM・S3・VPCの設定とAzure版との違い【2026年11月】

Databricks on AWSは、ワークスペースの種類を選んだ時点で、AWSアカウントに作るリソースがほぼ決まります。この記事では2026年11月時点の公式ドキュメントをもとに、サーバーレスとクラシックの選び分け、自動構成で作られるIAMロール・S3・VPC、手動構成の信頼ポリシー、カスタマー管理VPCのサブネットとポートを整理します。後半はTerraformの設定例とAzure Databricksとの違い、AWS版を見送る場面です。

まとめ:Databricks on AWSは最初にワークスペースの種別を決める

SQL分析やダッシュボードが中心なら、AWS側にVPCもS3も用意しないサーバーレスワークスペースで足ります。ScalaやRの処理、Spark RDDの既存コード、閉域のDBへの直接接続が要るならクラシックを選び、アカウントコンソールの自動構成でIAMロール・S3・VPCを作らせるのが近道です。VPCやIAMの名前・CIDRを社内規程で指定する組織は、手動構成かTerraformに切り替えます。

AWSとAzureのどちらにするかは、データがS3とADLSのどちらにあるかで決めます。料金の単価と計算方法は親記事のDatabricksとは?できること・DBU課金の料金と業種別の費用・導入事例にまとめています。

Databricks on AWSの構成:管理側とAWSアカウント側の役割分担

Databricks on AWSは、Databricksが運用する管理側と、利用者のAWSアカウント側に分かれて動きます。

Databricksの管理側と利用者のAWSアカウントに置かれるリソースの境界

ノートブックの画面やジョブのスケジューラはDatabricks側にあります。クラシックワークスペースでは、Sparkを動かすEC2とデータを置くS3が利用者のAWSアカウントに作られ、DatabricksはクロスアカウントIAMロールを使ってEC2を起動します。

そのためAWSの請求にはEC2・NATゲートウェイ・S3の費用が、Databricksの請求にはDBU(処理量の単位)が載ります。クラシックでは請求が2本立てになります。

サーバーレスとクラシックの2種類のワークスペースを選ぶ判断基準

公式ドキュメントのCreate a workspaceは、ワークスペースを2種類に分けています。サーバーレスワークスペースはDatabricksのアカウント内に置かれ、サーバーレスのコンピュートと既定のストレージが最初から設定済みです。クラシックワークスペースは、利用者のAWSアカウントにストレージとコンピュートを用意します。

比較軸 サーバーレスワークスペース クラシックワークスペース
置き場所 Databricksのアカウント 利用者のAWSアカウント
事前に作るAWSリソース 不要 IAMロール・S3・VPC
公式が勧める用途 SQL分析・AI/BIダッシュボード・Apps Scala/R・RDDの移行・閉域DB接続
AWSのクレジットや割引 適用されない EC2などAWS側の費用に適用

見落としやすいのが最後の行です。Create a serverless workspaceには、サーバーレスの利用分にはクラウド事業者のクレジットや割引が適用されないと書かれています。AWSのEDP(利用額のコミット契約)を結んでいる企業は、その割引を消化したいならクラシックの方が有利になる場合があります。

東京リージョンap-northeast-1で使える機能と大阪リージョンの扱い

Databricks clouds and regionsの対応表には、東京(ap-northeast-1)が載っています。大阪(ap-northeast-3)は2026年11月15日時点で一覧になく、東京と大阪の2拠点に置く災害対策構成は組めません。

Features with limited regional availabilityによると、東京ではサーバーレスのコンピュート、サーバーレスワークスペース、既定のストレージ、PrivateLinkがいずれも使えます。ただし基盤モデルのAPIは、日本・韓国・シンガポールのリージョンで処理され得るという注記があるため、確認が必要です。データの国外処理を禁じる規程がある会社は、このAPIだけ事前に確認が要ります。

アカウントコンソールの自動構成でクラシックワークスペースを作る手順

クラシックワークスペースは、アカウントコンソールの自動構成で作るのが標準の手順です。AWSの管理者が一時的な権限の委任を承認すると、Databricksが必要なリソースを利用者のアカウントに作ります。

自動構成の前提条件とCreate Workspaceから作成完了までの流れ

Create a classic workspaceが挙げる前提条件は4つあります。Databricksアカウントのアカウント管理者であること、対象リージョンでVPCとNATゲートウェイのクォータに空きがあること、us-west-2のSTSエンドポイントが有効なこと、AWS管理者が一時アクセスを許可することです。東京で作る場合もus-west-2のSTSが条件に入っている点は、SCP(組織のサービスコントロールポリシー)でリージョンを絞っている企業で引っかかります。

  1. アカウントコンソールのWorkspacesを開き、Create Workspaceを押す
  2. Basicsでワークスペース名とリージョン(ap-northeast-1など)を確かめる
  3. Computeで認証情報の構成とネットワークの構成を選ぶか新しく作る
  4. Storageでストレージの構成を選ぶか新しく作る
  5. 必要ならNetworkでPrivateLink、Encryptionで顧客管理キーを設定する
  6. Create workspaceを押し、AWS管理者が委任リクエストを承認する

手順3と4で新規作成を選ぶと、AWS側には4つのリソースができます。アクセスポリシー付きのクロスアカウントIAMロール、サブネット・セキュリティグループ・ルートテーブル付きのVPC、ワークスペースの資産と既定のカタログを置くS3バケット、そのバケットにアクセスするIAMロールです。Databricks側には認証情報・ストレージ・ネットワークの3つの構成オブジェクトが登録され、アカウントコンソールのCloud resourcesで確認できます。

ワークスペースがFailedになる原因と7日で期限切れになる委任リクエスト

作成中の状態はProvisioning、使える状態はRunningです。Failedになった場合、委任リクエストが7日以内に処理されず期限切れになったときと、AWS管理者が拒否したときだけは再試行で戻せます。それ以外の原因で失敗したワークスペースは更新では直りません。

設定を直したうえで、ワークスペースを削除して作り直す必要があります。情シスとクラウドの管理者が別部署の会社では、承認が7日を過ぎた時点で期限切れとなり、作成をやり直すことになります。作成ボタンを押す前に、承認者の予定を押さえておくのが確実です。

クロスアカウントIAMロールとS3ストレージ構成を手動で作る設定

IAMロールやバケットの名前を社内規程に合わせたい場合は、Create a workspace with manual AWS configurationsの手順で手動構成にします。手動で作るのは、コンピュート用のクロスアカウントロールと、ストレージ用のバケットとロールの2組です。

DatabricksのアカウントID 414351767826と外部IDで結ぶ信頼関係

クロスアカウントロールは、IAMコンソールで「別のAWSアカウント」を選んで作ります。アカウントIDの欄に入れるのは自社のAWSアカウントIDではなく、Databricksのアカウント414351767826です。外部IDの欄には、アカウントコンソールからコピーした自社のDatabricksアカウントIDを入れます。画面で作ると、信頼ポリシーは次の形になります。

{
  "Version": "2012-10-17",
  "Statement": [
    {
      "Effect": "Allow",
      "Principal": { "AWS": "arn:aws:iam::414351767826:root" },
      "Action": "sts:AssumeRole",
      "Condition": {
        "StringEquals": { "sts:ExternalId": "YOUR_DATABRICKS_ACCOUNT_ID" }
      }
    }
  ]
}

このロールに付けるアクセスポリシーは、VPCの種類で3通りに分かれます。Databricks管理のVPC用、カスタマー管理VPCの標準制限、アカウントID・VPC ID・リージョン・セキュリティグループで範囲を絞るカスタム制限です。カスタム制限はワークスペースごとにロールを分ける手間がある一方、別VPCにEC2を立てる余地を消せるため、監査の厳しい業界向きです。

S3バケットポリシーとUnity Catalog用ロールの自己参照の信頼ポリシー

ストレージ用のS3バケットは、ワークスペースと同じリージョンに作ります。バケットポリシーに入れるのは、次に示す2つの文です。1つはarn:aws:iam::414351767826:rootに読み書きとListを許す文で、条件にaws:PrincipalTag/DatabricksAccountIdを付けて自社のアカウントに限ります。もう1つは、DBFS(旧来のファイル領域)からunity-catalog/*配下へのアクセスを拒否する文です。

ストレージ用のIAMロールは、まずDatabricksのUCMasterRoleを信頼し、外部IDに仮の値0000を入れて作ります。作成後に信頼関係を編集し、自分自身のロールARNを信頼先に加え、外部IDを自社のDatabricksアカウントIDに書き換える手順です。カタログの権限設計そのものはUnity Catalogとは?3レベル名前空間と権限継承・移行判断で解説しています。

カスタマー管理VPCで必要なサブネット・セキュリティグループ・エンドポイント

既存のVPCや社内ネットワークとつなぐ場合は、カスタマー管理VPCを使います。Configure a customer-managed VPCの要件のうち、設計段階で決めておく項目を絞って並べます。

サブネットは別AZに2つ以上・ネットマスク/17〜/26とIP数の計算

ワークスペースごとに、別々のアベイラビリティゾーンに置いたサブネットが2つ以上必要です。1つのAZに置けるワークスペース用サブネットは1つだけで、ネットマスクは/17から/26の範囲に収めます。サブネットはプライベートにし、外への通信はNATゲートウェイ経由にします。

クラスタのノードは1台につきIPアドレスを2つ使います。管理用とSparkアプリケーション用です。AWSは各サブネットの先頭4つと末尾1つのアドレスを予約するので、最小の/26(64個)では使えるのが59個、ノードは29台が上限になります。2つ合わせても58台です。夜間バッチで数十台に広げるなら、/24以上で切らないとIP不足でクラスタが起動しません。

セキュリティグループで開ける送信ポートとネットワークACLの条件

セキュリティグループは1ワークスペースあたり1〜5個です。受信は同じセキュリティグループからの全TCP/UDPを許可し、送信は同じセキュリティグループ宛ての全通信に加えて、0.0.0.0/0宛てのTCPで次のポートを開けます。

ポート 用途 必要な条件
443 基盤・データソース・ライブラリ 常に
8443・8445 管理側のAPIの内部呼び出し 常に
8444 Unity Catalogのログとリネージ 常に
3306 旧来のHiveメタストア 常に
6666 セキュアクラスタ接続 PrivateLink利用時
5432 Lakebaseへの接続 Lakebase利用時
2443 FIPS暗号化 コンプライアンス設定時
53 名前解決 独自DNS利用時

8446〜8451は将来用の予約と明記されているため、ファイアウォールの申請では最初から範囲に含めておくと出し直しを防げます。ネットワークACLは通信を拒否してはならず、VPCではDNSホスト名とDNS解決の両方を有効にします。

S3ゲートウェイとSTS・KinesisのVPCエンドポイントを作るAWS CLI

NATゲートウェイの通信量を減らすため、公式はS3にゲートウェイ型、STSとKinesisにインターフェース型のエンドポイントを推奨しています。Kinesisはus-west-1を除きます。RDSのエンドポイントは旧来のHiveメタストアを使う場合だけ必要で、Unity Catalogでは要りません。東京リージョンで作る場合のコマンドは次のとおりです(IDは自社の値に置き換えます)。

# S3:ゲートウェイ型(ワークスペース用サブネットのルートテーブルに関連付ける)
aws ec2 create-vpc-endpoint \
  --region ap-northeast-1 \
  --vpc-id vpc-0123456789abcdef0 \
  --vpc-endpoint-type Gateway \
  --service-name com.amazonaws.ap-northeast-1.s3 \
  --route-table-ids rtb-0aaaaaaaaaaaaaaaa rtb-0bbbbbbbbbbbbbbbb

# STS:インターフェース型(Kinesisは service-name を kinesis-streams に替えて同様に作る)
aws ec2 create-vpc-endpoint \
  --region ap-northeast-1 \
  --vpc-id vpc-0123456789abcdef0 \
  --vpc-endpoint-type Interface \
  --service-name com.amazonaws.ap-northeast-1.sts \
  --subnet-ids subnet-0aaaaaaaaaaaaaaaa subnet-0bbbbbbbbbbbbbbbb \
  --security-group-ids sg-0123456789abcdef0 \
  --private-dns-enabled

オプションはAWS CLIのcreate-vpc-endpointリファレンスにあります。別リージョンのS3バケットを読む場合は、s3.amazonaws.comへの送信も許可しておきます。

Terraformで認証情報とワークスペースをコード化する設定例

手順はCreate a workspace using Terraformにあります。開発・検証・本番でワークスペースを分けるなら、画面操作より再現性で勝ります。

databricks_mws_credentialsでIAMロールを登録するHCL

Databricksプロバイダには、信頼ポリシーとアクセスポリシーのJSONを生成するデータソースがあります。aws_crossaccount_policyのドキュメントによると、policy_typeはmanaged・customer・restrictedの3値で、前の章の3種類のアクセスポリシーに対応します。

provider "databricks" {
  alias      = "mws"
  host       = "https://accounts.cloud.databricks.com"
  account_id = var.databricks_account_id
}

# 信頼ポリシー(外部ID=自社のDatabricksアカウントID)
data "databricks_aws_assume_role_policy" "this" {
  external_id = var.databricks_account_id
}

resource "aws_iam_role" "cross_account" {
  name               = "${var.prefix}-crossaccount"
  assume_role_policy = data.databricks_aws_assume_role_policy.this.json
}

# カスタマー管理VPC用のアクセスポリシー
data "databricks_aws_crossaccount_policy" "this" {
  policy_type = "customer"
}

resource "aws_iam_role_policy" "cross_account" {
  name   = "${var.prefix}-policy"
  role   = aws_iam_role.cross_account.id
  policy = data.databricks_aws_crossaccount_policy.this.json
}

resource "databricks_mws_credentials" "this" {
  provider         = databricks.mws
  credentials_name = "${var.prefix}-creds"
  role_arn         = aws_iam_role.cross_account.arn
}

mws_credentialsのドキュメントにあるとおり、このリソースはアカウントレベルのプロバイダでしか使えないため、accounts.cloud.databricks.comを向く別名付きのプロバイダを定義しています。リソース側のaccount_id引数は非推奨です。

compute_modeをSERVERLESSにしたワークスペース作成と作り直しの条件

ワークスペース本体はdatabricks_mws_workspacesで作ります。クラシックならcredentials_id・storage_configuration_id・network_idに前段で作った構成のIDを渡す設定が必要です。mws_workspacesのドキュメントでは、compute_mode = "SERVERLESS"を指定するとサーバーレスワークスペースになり、そのときは認証情報とストレージの構成IDを指定してはならないとされています。

compute_modeを後から変えると、ワークスペースは作り直しになります。サーバーレスからクラシックへ切り替えるplanには既存ワークスペースの削除が入るため、種別は最初のapplyの前に決め切ってください。

Azure Databricksとの違い:契約・請求・ネットワーク・ID管理の比較

同じDatabricksでも、契約と周辺サービスとのつながり方はクラウドごとに違います。

比較軸 Databricks on AWS Azure Databricks
契約と請求 直接またはAWS Marketplace Azureのサービスとして請求
単価を決める主体 Databricks Microsoft
データの置き場 S3 ADLS Gen2
ネットワーク カスタマー管理VPC・PrivateLink VNetインジェクション・Private Link
ID管理 Databricksアカウント+IdP連携 Microsoft Entra IDと一体

Databricksの料金ページは、Azure Databricksの価格はMicrosoftが設定し、価格はリージョンとクラウドによって異なり得ると明記しています。同じ処理でもAWS版とAzure版のDBU単価は一致しない前提で、見積もりはクラウドごとに取り直します。AWS Marketplace経由で契約すると、Databricksの利用料がAWSの請求にまとまります(サーバーワークスの手順解説が参考になります)。

Azure版の位置づけはMicrosoft LearnのAzure Databricksとは、料金とAzure連携はAzure Databricksとは?料金・Azure連携・Databricks本体との違いと導入判断、閉域接続はAzure DatabricksのサーバーレスとNCCの解説で扱いました。

Databricks on AWSを採用する条件と、構築を見送るべき場面の判断

迷ったときは「データがすでにどこにあるか」を最優先にします。データを別のクラウドへ移す費用と手間は、DBU単価の差より大きくなりやすいからです。

Databricks on AWSを選ぶ条件:S3にデータがありAWS割引を使う会社

分析対象の生データがすでにS3にあり、基幹システムもAWSで動いているなら、AWS版を選びます。S3を外部ロケーションとしてそのまま参照でき、転送料とコピーの管理が要りません。AWSと利用額のコミット契約を結んでいる場合は、クラシックワークスペースにすればEC2とS3の費用を割引の消化に充てられます。

反対に、ID管理をEntra IDで統一していて、Power BIやMicrosoft Fabricと組み合わせる計画があるなら、Azure版の方が設定の手数は少なく済みます。どちらのクラウドにもデータがなく、SQLでのBIが主目的なら、Databricks自体を見直してSnowflakeと比べる価値があります。比較の観点はDatabricksとSnowflakeの違いで整理しました。

Databricks on AWSの構築を見送る場面と、つまずきやすい設計の失敗例

データが月に数GB程度で、利用者が数人のSQL分析だけなら、クラシックワークスペースは過剰です。サーバーレスワークスペースか、Athenaなど既存のAWSサービスで足りないかを先に確かめます。

設計段階で避けたい失敗は3つです。1つ目は/26のサブネットで作ってしまい、ノードが29台で頭打ちになる例です。2つ目として、SCPでus-west-2のSTSを止めていて自動構成が通らない例が挙げられます。3つ目は、Terraformでcompute_modeを後から変えてワークスペースを作り直してしまう例です。どれも、ワークスペースの利用が始まってから直すと、クラスタの停止や作業の止まる時間が生じます。

既存のAWS環境のネットワーク規程に合わせたVPC設計や、TerraformでのIAM・ワークスペースの構築を社外に任せたい場合は、一創のAWS・Google Cloud・Azureのインフラ構築支援で設計から引き受けています。データ基盤全体の作り方はデータレイクハウス実装の手順6ステップも参考になります。

Databricks on AWSの構築でよくある質問と回答

aws databricksの導入を検討する段階で、よく聞かれる質問に短く答えます。

Databricks on AWSは無料で試せますか?

試せます。Databricks Free Editionやトライアルなら、AWS側にVPCやS3を用意せずに操作を確認できます。ただし計算資源などに制限があり、本番と同じネットワーク構成は検証できません。閉域接続やIAMの設計を試すなら、自社のAWSアカウントにクラシックワークスペースを作ります。

AWS Marketplace経由とDatabricksとの直接契約では何が変わりますか?

変わるのは請求の経路です。AWS Marketplace経由ではDatabricksの利用料がAWSの請求書にまとまり、直接契約ではDatabricksから別に請求が届きます。新しい取引先の登録を増やしたくない場合はMarketplace経由が候補になります。

既存のVPCにDatabricksのワークスペースを作れますか?

作れます。作成に必要な手順は、カスタマー管理VPCとして登録し、別AZのサブネットを2つ以上切って使うことです。1つのVPCを複数のワークスペースで共有することもできますが、公式はサブネットとセキュリティグループをワークスペースごとに分けるよう勧めています。

クロスアカウントIAMロールにはどこまでの権限が必要ですか?

クラスタのEC2を起動・停止し、VPCのリソースを扱う権限が要ります。Databricks管理のVPCではNATゲートウェイ用のElastic IPの確保も含むため、必要になる権限の範囲は広めです。カスタマー管理VPCで範囲を絞った制限付きポリシーを使えば、影響を1つのVPCに閉じられます。

東京リージョンと他のリージョンで機能や料金は違いますか?

東京ではサーバーレスやPrivateLinkなど主要な機能が使えます。料金は公式が「リージョンとクラウドにより異なり得る」としており、DBU単価は米国リージョンより高めです。見積もりは料金ページで東京を選び、AWS側のEC2・NATゲートウェイの費用も足して出します。

関連記事

お気に入りに入れた記事の一覧

一創の公式 SNS

X では毎朝の新着記事と IT ニュースの速報を、YouTube・TikTok・Instagram・LinkedIn・Facebook では記事の解説動画を配信しています。

この記事は以下の記事からリンクされています

資料請求

今日のトレンド記事 直近 24 時間で、いつもより多く読まれている記事

  1. 2026.11.13 テックブログ 宝くじ公式サイト不正アクセス:4,436名の対象確認とパスワード再設定、変更された仕組み
  2. 2026.01.30 テックブログ Xで「人間であることを確認」と顔認証が出る理由と対処|ライブネスチェックとOpenAIの生体認証SNS構想
  3. 2026.11.13 テックブログ KARTEの不正アクセス:全機能停止で利用企業がタグ・配信・データ連携を確かめる手順
  4. 2026.11.09 テックブログ あきゅらいず不正アクセス:最大約90万件の対象確認とパスワード変更、退会者データの消し方
  5. 2026.03.18 テックブログ Base44とは?Wix傘下のAIアプリ開発ツールの料金・日本語対応・安全性【2026年10月】

RELATED POSTS 関連記事

目次