Databricks
すべてのDatabricks DBUを、ジョブ単位で追跡。
Cloud Intelligence™は、システムテーブルからDatabricksのコストと使用状況をインポートします。ワークスペース、ジョブ、クラスター、SQL Warehouse、サービングエンドポイント別のDBUに加え、クラスターのCPUとメモリも取得。他のクラウド支出と同じ画面で並べて確認できます。
サービスプリンシパル · 6か月分の履歴 · 毎時トラッキング
Databricks · October
インポートされるデータ
Databricksのデータを、使い慣れたディメンションで。
すべての課金項目が標準のCloud Analyticsディメンションにマッピングされます。さらに、クラスター、ウェアハウス、ジョブ、ノートブック、パイプライン、エンドポイント、run_as ID、そしてサーバーレスやPhotonなどの機能を示すDatabricksラベルも利用できます。
acme-databricks1234567890123456prod-etlSQLENTERPRISE_ALL_PURPOSE_COMPUTE_(PHOTON)DBUORIGINAL活用方法
Databricksの請求書から、意思決定へ
ジョブ・クラスター別のコスト
ワークスペース、ジョブ、クラスター、ノートブック、パイプライン、サービングエンドポイント別に分析できます。
サーバーレス vs クラシック
DBU支出のうち、サーバーレスコンピュートが占める割合を把握できます。
ジョブ vs All Purpose Compute
ワークロードタイプ別のDBU使用量とコストに加え、クラスターのCPUとメモリも確認できます。
Databricks Intelligence
プリセットのダッシュボードに加え、他のプロバイダーと並べてDatabricksを確認できます。
予算とアラート
DBU支出にガードレールを設定。コストの異常を検知するとアラートで通知します。
コスト配分
ワークスペース、ジョブ、IDを基準に、Databricksの支出を各チームに割り当てられます。
数時間で利用開始
3ステップでDatabricksを接続
サービスプリンシパルを作成。
OAuthシークレットを生成し、課金とコンピュートのシステムテーブルへの読み取りアクセスを付与します。
カタログから接続。
アカウント名、クライアントID、シークレット、SQL Warehouseを入力します。
数時間でレポートが完成。
最大6か月分の履歴をインポート。準備が整い次第、メールでお知らせします。
システムテーブルへの読み取り専用アクセス。接続はいつでも解除できます。
無料で始めるFrequently asked
questions
Databricksはどのように接続しますか？
インテグレーションカタログでDatabricksカードを開き、ウィザードに従って、アカウント名、サービスプリンシパルのクライアントIDとシークレット、そして少なくとも1つのSQL WarehouseのIDとサーバーホスト名を入力します。接続テストを実行すれば完了です。
どのような権限が必要ですか？
Databricksのアカウント管理者かつメタストア管理者であり、Unity Catalogが有効になっている必要があります。サービスプリンシパルには、system.billing、system.compute、system.accessテーブルへのSELECT権限と、Databricks SQLのアクセス権限が付与されます。
なぜSQL Warehouseが必要なのですか？
Databricks SQLをご利用でない場合でも、システムテーブルを1日に複数回クエリするためのコンピュートエンドポイントとして使用します。既存のウェアハウスをそのまま使うことも、小規模なクラシックウェアハウス（2X-small、5分で自動停止）を新規作成することも可能です。
履歴はどのくらい取得でき、データの鮮度はどの程度ですか？
接続時に過去6か月分の課金・使用状況データをインポートします。これには数時間かかります。その後は1時間ごとにデータがトラッキングされ、レポートに反映されます。
どのディメンションとラベルが利用できますか？
アカウント、ワークスペース、プロダクト、SKU、使用単位、レコードタイプが標準のCloud Analyticsディメンションにマッピングされるため、Databricksを他のプロバイダーと並べて分析できます。ラベルではクラスター、ウェアハウス、ジョブ、ノートブック、パイプライン、エンドポイント、run_as ID、プロダクト機能を確認でき、クラスターのCPUおよびメモリ使用率は拡張メトリクスとして表示されます。
すべてのワークスペースを接続する必要がありますか？
いいえ。Databricksの課金データはアカウントレベルのため、1つのウェアハウスですべてのワークスペースをカバーできます。より詳細なクラスター使用率レポートが必要な場合のみ、各リージョンにウェアハウスを追加してください。