コンテンツへスキップ
XSIS
エンジニアがコントロールルームからシステムを監視する

クラウド・インフラストラクチャ

SRE、可観測性、クラウド・AIトークンFinOps

信頼できるシステムと、すべてのチームが説明できるクラウド・AIの請求

誰にも説明できない障害と請求

システムは、顧客が気づくまでダッシュボードに現れない形で障害を起こすことがよくあります。アラートは洪水のように届き、オンコールのエンジニアは症状を追いかけ、原因が直らないまま同じ障害が再発します。

コストも同じようにずれます。クラウドの請求は利用量より速く増え、AIがそれを悪化させます。上限のない多段階のエージェントワークフローは、各ステップが必要かどうかに関係なく大規模モデルを呼ぶため、予算を大きく超えることがよくあります。

変わること

  1. 測定できる信頼性

    各サービスに合意した信頼性目標があり、それを満たしているかをいつでも確認できます。

  2. 繰り返さない障害

    障害を早期に発見し、24時間対応し、原因への修正をもってクローズします。

  3. 削減され、説明できる支出

    すべてのクラウド・AIコストに責任者を定め、キャッシュとモデルルーティングによりAI推論の支出を削減します。

提供内容

  • 可観測性

    OpenTelemetryで収集するログ、メトリクス、トレース。実際の問いに答えるダッシュボードと、ユーザー体験に結びついたアラート。

  • サイトリライアビリティエンジニアリング

    サイトリライアビリティエンジニアリング(SRE)は、運用をエンジニアリングの規律として扱います。サービスごとの信頼性目標、リリースを緩める時期をチームに示すエラーバジェット、繰り返しの手作業を置き換える自動化です。

  • AIOps監視と予測アラート

    テレメトリーに対する機械学習で、異常なパターンやキャパシティの傾向を障害になる前に捉え、関連アラートをグループ化して、エンジニアが洪水ではなく一つの問題を見られるようにします。

  • 24時間のSRE

    サービスレベルの応答・解決時間に従う24時間のオンコールと、すべての重大障害の文書化されたレビュー。

  • クラウド・AI支出のテレメトリー

    支出をチーム、サービス、AI機能ごとにタグ付けして報告し、すべてのコストに責任者を定めます。FinOpsは、他のエンジニアリング業務と同じデータと規律でクラウド支出を管理する実務です。

  • AIトークンFinOpsゲートウェイ

    セマンティックキャッシュは、すでに回答済みの質問にモデルを再度呼び出さずに答えます。モデルルーティングは、分類や抽出などの定型タスクを小型言語モデルへ送り、フロンティアモデルは複雑な推論のために残します。

  • GreenOpsとカーボン考慮型コンピューティング

    エネルギー使用量と炭素強度を考慮してワークロードをサイジング・スケジューリングし、ESGコミットメントに必要な報告を行います。

進め方

  1. 基準値を測定

    現在のシステムと請求が示すもの、障害、アラート、信頼性、クラウド支出、機能別のAIトークン使用量を収集します。

  2. 目標を合意

    サービスごとの信頼性目標と、チームごとのコスト目標を、それぞれの責任者と合意します。

  3. 計測してルーティング

    テレメトリーを追加し、アラートを調整し、AIワークロードの前にキャッシュとルーティングのゲートウェイを置きます。

  4. 運用

    お客様のチームとともに、またはお客様に代わってオンコールを担い、すべての重大障害をレビューと原因への修正でクローズします。

  5. 定期的にレビュー

    信頼性と支出を目標に対して報告し、報告が示す内容に対応します。

本番での実績

当社のトークンFinOpsゲートウェイは、すべてのプロンプトをフロンティアモデルへ送る基準値と比較して測定し、各削減源の効果を個別に報告します。

ツールと標準

AIと機械学習
  • Mistral
  • Qwen
  • DeepSeek
データベース
  • Redis
DevOpsと可観測性
  • OpenTelemetry
  • Prometheus
  • Grafana
  • Kubernetes

始め方

今後の流れ

  1. 事前コンサルティングセッション

    無料の30分オンライン事前相談です。目標、システム、制約を伺います。

  2. 準備状況レビュー

    無料の48時間準備状況レビューで、プリンシパルアーキテクトがプロジェクトを6項目のDefinition of Readyに照らして確認し、適切なトラックを提案します。

  3. トラックの選択

    スコープが確定したプロジェクトには、拘束力のある提案書を3–5営業日以内にお渡しします。構想段階のプロジェクトはBlueprint Studioから始まります。稼働中のシステムに障害がある場合、文書化されていない場合、連携が必要な場合は、1–2週間の診断から始まります。Blueprint Studioと診断はそれぞれ固定料金で、提案書に記載します。

  4. 5段階での提供

    体制の立ち上げ、ライブ実演を伴うスプリント、連携と堅牢化、受け入れと本番稼働、そしてマネージドサービス。ローンチ後は保証期間と、その後の任意のサポート・保守が待っています。

最短の入口は、迅速なエンゲージメントパッケージの一つであるクラウド可搬性とAIトークンFinOps監査パッケージです。

始め方

よくある質問

サイトリライアビリティエンジニアリングは通常の監視に何を加えますか。

監視は何かがおかしいことを教えます。SREは各サービスがどれだけ信頼できるべきかを決め、その目標に対して測定し、繰り返しの火消しではなく障害の原因にエンジニアリング時間を使います。結果として障害が減り、短くなり、信頼性の作業を新機能より優先する時期の明確なルールができます。

AIトークンFinOpsとは何ですか。

言語モデルはトークン単位で課金されます。トークンはプロンプトや回答の小さなテキスト片です。AIトークンFinOpsは、その支出を機能別・チーム別に測定し、削減します。繰り返しの質問はキャッシュから回答し、定型タスクは小型で安価なモデルへ送り、フロンティアモデルはそれを必要とするタスクのために残します。

削減額をどう測定しますか。

変更前に記録した基準値、つまりすべてのプロンプトをフロンティアモデルへ送る同じワークロードと比較します。削減は二つの源から生まれます。重複プロンプトをセマンティックキャッシュで回答することと、定型タスクを小型言語モデルへルーティングすることです。それぞれを個別に報告します。

キャッシュとルーティングで回答の品質が下がりませんか。

ユースケースごとに設定すれば下がりません。タスクは、フロンティアモデルと同じ評価に合格した後にのみ小型モデルへ移り、キャッシュされた回答は、保存された回答が正しいままでいる場合にのみ使います。不確かなものは引き続き大規模モデルへ送ります。

当社のオンコールを引き受けられますか。

はい、全面でもお客様のチームと並行しても可能です。マネージドサービス契約のもとで24時間アラートを監視し、重大な障害から軽微な依頼まで、重要度ごとに定めた時間内に対応します。すべての重大障害について、原因と再発を防ぐ変更に関する書面レビューを行います。

GreenOpsとは何ですか。

GreenOpsはFinOpsの考え方をエネルギーと炭素に適用します。ワークロードは使用量に合わせてサイジングし、待てる場合は電力がよりクリーンな場所と時間に実行し、ESG報告に必要な用語で報告します。

構築の準備はできていますか。提案をお求めください

要件またはRFPをお送りください。当社のアーキテクトが検証し、拘束力のある固定スコープの提案をお返しします。

今後の流れ

  1. 準備状況レビュー

    無料の48時間準備状況レビューで、プリンシパルアーキテクトがプロジェクトを6項目のDefinition of Readyに照らして確認し、適切なトラックを提案します。

  2. 拘束力のある提案書

    アーキテクチャ検証の後、マイルストーン、アーキテクチャ、チーム体制、SLAを含む、拘束力のある固定スコープの提案書を3–5営業日以内にお渡しします。ご要望があれば、要件をお知らせいただく前に秘密保持契約(NDA)を締結します。

  3. 立ち上げ

    ご契約後、当社のエンジニアリングポッドが契約締結から5–10営業日以内にスプリント0を開始します。

  4. 5段階での提供

    体制の立ち上げ、ライブ実演を伴うスプリント、連携と堅牢化、受け入れと本番稼働、そしてマネージドサービス。ローンチ後は保証期間と、その後の任意のサポート・保守が待っています。