BigQueryを大規模に運用するデータチームに選ばれています
数分で連携完了
サービスアカウント1つで、BigQueryを丸ごと可視化
読み取り専用のサービスアカウントを接続するだけで、DoiTが請求エクスポート、INFORMATION_SCHEMAのジョブ・ストレージメタデータ、リザベーション利用状況まで自動で取り込みます。エージェント、クエリの書き換え、独自パイプラインはいずれも不要。接続から数時間で統合レポートが立ち上がります。
できること
BigQuery運用の現場で本当に必要な機能を
BigQuery環境を接続したデータ責任者やFinOpsリーダーから、実際に多く寄せられるニーズに応えました。
クエリ単位のコスト按分
スキャンバイト数やスロットミリ秒を、実行したユーザー、プロジェクト、データセット、スケジュールジョブまで紐付け。
リアルタイム異常検知
クエリやスロットの急増を、月末を待たず数分以内に通知。
スロットのライトサイジング
エディション、オートスケーリング、リザベーションのサイズが実需要と乖離している箇所を特定。
ストレージとコンピュートの内訳
アクティブ・長期・物理ストレージのコストを、データセット単位でクエリコストと切り分けて把握。
高コストクエリを特定
スキャンバイト数とスロット消費量が突出するクエリを一覧化。定期実行される"常習犯"も逃しません。
ガバナンスと予算管理
手作業でラベルを整えなくても、プロジェクト別の予算やクエリクォータを設定可能。
BigQuery標準ビューが示すのは「何が実行されたか」まで。Cloud Intelligence™は「次に何をすべきか」まで踏み込みます。
INFORMATION_SCHEMAの、その先へ
マルチプロジェクト集計
すべてのBigQueryプロジェクトとフォルダを横断した統合ビューから、任意のデータセットやジョブへドリルダウン。
リアルタイム異常アラート
プロジェクト、ユーザー、ラベルの各軸を機械学習で監視し、Slackやメールへアラートを配信。
リザベーション計画
BigQueryエディションとスロットcommitmentsを実際のジョブ履歴でモデリングし、購入判断の精度を高めます。
ラベル・按分ルールの整備
未ラベルのコストを可視化し、按分ルールを徹底。共有データセットも財務が求める形で分割できます。
パイプラインコストの按分
スケジュールクエリ、dbtの実行、Dataformのワークフローを、それぞれの担当チームへ紐付け。
Forward Deployed Engineers
世界トップクラスのクラウドアーキテクトが、お客様チームの一員として最適化を実装します。
急成長企業がCloud Intelligence™で成果を上げています
最初の90日以内の平均削減率
平均導入期間
“DoiTの徹底した信頼性とシステムの柔軟性のおかげで、エンジニアの手を煩わせることなくAmazon EKSのworkloadsを安全に最適化できています。”
Oren Ashkenazy
Director of DevOps and Cloud, Fiverr
BigQueryプロジェクトを接続しませんか?
スロットミリ秒とスキャンバイト数を、意思決定に変える。
Frequently asked
questions
複数プロジェクトにまたがるBigQueryコストを可視化するには?
請求アカウントを一度接続するだけで、Cloud Intelligence™が各プロジェクトのBigQuery請求エクスポートとINFORMATION_SCHEMAメタデータを取り込みます。単一のビューから、プロジェクト、データセット、ラベル、ユーザー、ジョブタイプ別にコストを分析できます。
BigQueryの利用データをCloud Intelligence™と連携する最適な方法は?
読み取り専用のサービスアカウントに、請求エクスポートとINFORMATION_SCHEMAへのアクセス権を付与するだけ。あとはDoiTがジョブ単位の粒度で取り込み・正規化・レポート化まで担います。多くのチームは1日以内に稼働を開始しています。
BigQueryコストの大半を占めるクエリ、ユーザー、データセットを特定するには?
Cost & Usageレポートを使えば、BigQueryの総コストから特定のジョブ、スケジュールクエリ、ユーザーまで一気にドリルダウンできます。INFORMATION_SCHEMAのSQLを自前で書かなくても、ラベル、プロジェクト、データセット、クエリタイプでフィルタリング可能です。
BigQueryコストの異常をリアルタイムで監視できますか?
プロジェクト、ユーザー、ラベルの各次元で異常検知が常時稼働しています。スキャンバイト数やスロット消費が急増すると、想定原因を添えたSlackやメールのアラートが、請求書に反映されるはるか前に届きます。
オンデマンドとリザベーション付きBigQueryエディションのどちらを選ぶべきか、どう判断すればよいですか?
Cloud Intelligence™が過去のジョブ実績をオンデマンド、Standard、Enterprise、Enterprise Plusの各エディションで試算し、勘や推測ではなく実利用データに基づいてスロットcommitmentsとオートスケーリング設定を提案します。
BigQueryのストレージコストを可視化するには?
データセット・テーブル単位で、アクティブストレージ、長期ストレージ、物理課金と論理課金を分けて表示します。課金モデルの切り替えやパーティション有効期限の適用でコストを大きく削減できるテーブルも自動で洗い出します。
Cloud Intelligence™は、BigQuery標準の管理ビューやINFORMATION_SCHEMAとどう違うのですか?
標準ビューはジョブやストレージの生メタデータを見せるだけ。Cloud Intelligence™はプラットフォームとして、マルチクラウドの可視化、能動的なレコメンデーション、リアルタイム異常検知、ガバナンス、リザベーション計画、そしてデータが示す課題の実行までを支援するForward Deployed Engineersを提供します。
BigQueryを接続する際、データは安全に保護されますか?
Cloud Intelligence™は、請求エクスポートとINFORMATION_SCHEMAに対し最小権限のみを持つ読み取り専用のサービスアカウントを使用します。お客様のテーブルへ勝手にクエリを実行したり、承認なしに変更を加えたりすることはありません。プラットフォームはSOC 2 Type II認証を取得済みです。