Synthesizedが本番同等データでAIエージェントを検証する「Test Data Agent」を開発

Synthesizedは、AIエージェントを本番環境に投入する前に安全に検証するため、企業が必要とするリアルなデータやビジネスコンテキスト、システム状態を生成・提供する新しいエージェント型インフラ機能「Test Data Agent」を発表しました。現在開発が進められています。

Test Data Agentは、エージェントの開発・評価・テスト・オーケストレーションの各フレームワークと連携し、本番環境に忠実な検証環境を提供します。これにより、あるエージェントが管理された実演の場でうまく振る舞うだけでなく、実際のビジネスプロセスを確実にこなせるかどうかを判断できるようになります。

Synthesizedによる今回の新機能は、複雑かつ規制の厳しい技術環境で事業を展開する企業向けに、AIネイティブなテストインフラを提供するという同社のミッションをさらに推し進めるものです。Test Data Agentは、複雑なSAP環境向けに特化した支援を目指しており、財務・調達・サプライチェーン・業務ワークフローといった重要な領域や、SAP ECCからS/4HANAへの移行・テストプログラムにわたってエージェントを検証できるよう組織を支援します。

企業のエージェント検証ギャップを埋める

企業は、AIエージェントを構築するスピードに対して、そのエージェントがミッションクリティカルなワークフローで確実に機能する準備ができていることを証明するスピードが追いついていません。

モデル評価やデモ用データセットは、エージェントがもっともらしい応答を生成できるかどうかは示せます。しかし、実際の企業環境に存在するデータ、権限、アプリケーションの状態、業務ルール、システム間の依存関係に直面したときに、正しい判断を下せるかどうかまでは証明できません。

この違いは重要です。管理されたテストでは良好な結果を示すエージェントであっても、欠落レコード、異常な取引、矛盾する指示、アクセス制限、あるいは複数システムにまたがる複雑な依存関係に遭遇すると、失敗してしまう可能性があります。

とはいえ、こうした状況を再現するのは容易ではありません。企業のテスト環境はしばしば古くなっていたり不完全であったりして、本番環境の複雑さから乖離しています。さらに、プライバシー・セキュリティ・データ主権・規制上の要件により、開発やテストの場で機密性の高い本番データを利用することには制約があります。

Synthesizedは、企業向けAIエージェントのための本番環境に忠実な検証レイヤーとしてTest Data Agentを開発しています。ビジネスシナリオやテストの目的を起点として、実際の運用条件下でエージェントがどのように動作するかをテストするために必要なデータ、関係性、システム状態を特定・提供します。

Test Data Agentを使うことで、チームは以下のことが可能になります。

  • テストに必要なビジネスエンティティ、レコード、関係性、システム状態を特定する
  • 本番環境を代表するデータを生成、マスキング、またはサブセット化する
  • 相互接続されたシステム間で参照整合性、統計的特性、業務ルールを維持する
  • 再現可能なハッピーパス、例外、失敗、敵対的なシナリオを作成する
  • アプリケーションや企業データの変化に合わせて検証環境を更新する
  • REST APIやCI/CDパイプラインを通じてプロビジョニングを実行し、下流のテスト・評価フレームワークから呼び出せるようにする
  • オンプレミス、プライベートクラウド、ハイブリッド環境において、企業の既存のセキュリティ管理下で稼働する

評価フレームワークはエージェントの性能を測定します。Synthesizedの Test Data Agentは、開発・テストプラットフォームに対し、本番環境を代表するデータと現実的な企業コンテキストを提供することで、実際の運用条件下でエージェントの挙動や精度を厳密に検証できるようにします。テストを意味のある形で、かつ再現可能にすることで、組織はエージェントがもっともらしい応答を生成するだけでなく、正しいビジネス上の成果を実際にもたらせるかどうかを判断でき、ミッションクリティカルなワークフローに投入する前に必要な確信を得られます。

Synthesizedの最高経営責任者(CEO)であるNicolai Baldin氏は、次のように述べています。「エージェントを構築すること自体は容易になりつつあります。しかし、それが実際のビジネスプロセスにおいて信頼できることを証明するのは容易ではありません。評価フレームワークはエージェントの性能を測定できますが、その性能を意味あるものにするための現実的な世界を、依然として必要としています。Test Data Agentは、エージェントが実際のシステムで動作することを許される前に、その世界を安全に作り出すために構築されています」

構築・展開から継続的なエージェント改善へ

Test Data Agentは、組織が一度きりの本番前テストにとどまらず、継続的なエージェント改善のループを確立できるよう支援します。チームはビジネス上の成果を定義し、必要な環境を生成し、エッジケースを作成し、選択したフレームワークを通じてエージェントを実行し、結果を評価し、エージェントを改善したうえで、新しいバージョンを本番投入する前に同じシナリオ群を再実行できます。

  • 本番前検証: 実運用システムへのアクセス権を付与する前に、企業向けおよびホスト型のエージェントをゲートする
  • エージェントの回帰テスト: 実行ごとに一貫した環境を再現することで、回帰の原因をデータではなく変更そのものに特定できるようにする
  • 継続的な最適化: プロンプト最適化、ファインチューニング、強化学習の各パイプラインに、精選されたデータセットと現実的な環境を供給する
  • モデル・フレームワークの比較: 同一の企業シナリオに対し、競合するモデルやエージェント構成を実行して比較する
  • リリースガバナンス: エージェントが展開前に定められたビジネス・セキュリティ・運用上の条件をクリアしたことを示す、再現可能なエビデンスを作成する

Synthesizedは、エージェントの出力を採点するのではなく、エージェントを評価するための基盤となるデータと環境を作成します。そのため、Test Data Agentは既存のエージェントプラットフォーム、テストシステム、可観測性ツール、モデル最適化パイプラインを補完する存在となります。

Baldin氏はさらに次のように続けています。「企業向けエージェントは、本番環境のトレースだけでは改善しません。チームには、そうしたパターンを再現し、管理された変更を加え、その変更が実際にエージェントを改善しているかどうかを判断できる安全な環境が必要です。私たちの目標は、企業のコンテキストを再現可能な検証資産に変えることです」

企業データを信頼できる境界内にとどめる

Test Data Agentは、機密性が高く規制の厳しいデータ環境を持つ企業向けに設計されています。顧客が管理するオンプレミス、プライベートクラウド、ハイブリッド環境の内部で稼働し、既存のID管理、ネットワーク、セキュリティ、ガバナンスの各管理体制のもとで必要なデータを生成・マスキング・提供します。組織が生の本番データを外部のテストサービスに集約したりエクスポートしたりする必要はありません。

このアプローチは、顧客・従業員・財務情報や商業上機密性の高い情報の露出を抑えつつ、エージェント検証のために企業データの構造と複雑さを維持することを目的としています。

エージェントプラットフォームのプロバイダーやシステムインテグレーターにとって、Test Data Agentはフレームワークに依存しない検証環境レイヤーとして機能します。既存のエージェントオーケストレーション、評価、ガバナンスの各技術をそのまま維持しながら、Synthesizedを活用してその基盤となる本番同等のコンテキストを構築できます。

SAP環境向けに特化した支援

検証の難しさは、単一のビジネスプロセスが複数の関連テーブル、組織固有の設定、権限ルール、他の企業アプリケーションとの連携を伴う複雑なSAP環境において特に顕著です。こうした環境でAIエージェントをテストするには、個々のレコードを生成するだけでは不十分です。

関連する文書チェーン、プロセスの状態、システム間の依存関係も一貫性を保つ必要があります。Test Data Agentによる本番前検証は、エージェントが実際のシステムへのアクセス権を得る前に、制限の厳しい権限設定、複雑なデータ関係、実世界のプロセス状態を正しく処理できることを確認する助けとなります。

  • SAP環境で稼働するAIエージェントの本番前検証
  • SAP ECCからSAP S/4HANAへの移行検証
  • 回帰テストおよびビジネスプロセステスト
  • アプリケーションの近代化とリリース保証
  • プライバシーに配慮したSAPの開発・テスト環境
  • SAPおよび連携するデータベースや企業アプリケーションにまたがるテスト
  • エージェントのモデル、指示、ツールが変化する際の継続的な検証

例えば、請求書処理エージェントを検証する企業であれば、Test Data Agentを使って、仕入先、発注書、請求書、支払条件、通貨条件の現実的な組み合わせを作成できます。そのうえで、実際の財務システムへのアクセス権を得る前に、通常の取引と対応が難しい例外の両方に対してエージェントを評価できます。

Baldin氏は次のように述べています。「SAPエージェントのテストで難しいのは、ワークフローをこなせることを示す部分ではありません。難しいのは、その結果としてのアクションが実際に正しいかどうかを左右する関係性、例外、業務条件を再現することです。それこそが、Synthesizedが構築しているインフラなのです」

エージェントエコシステムのためのオープンなインフラレイヤー

Synthesizedは、Test Data Agentを企業向けエージェントエコシステムのためのオープンなインフラコンポーネントと位置づけています。

エージェントプラットフォームのプロバイダー、エージェント型テスト企業、システムインテグレーター、社内のエンジニアリングチームは、独立したテストフレームワークを新たに導入するのではなく、Test Data Agentを既存の開発ライフサイクルに接続できます。

そこから生まれるワークフローは次のとおりです。

ビジネスシナリオを定義する > 本番同等の環境を作成する > エージェントを実行する > 結果を評価する > エージェントを改善する > リリース前に再度検証する。

このアプローチにより、エージェントプラットフォーム側はエージェントの構築・オーケストレーション・可観測性・改善に注力でき、Synthesizedはそれを確実に実現するための環境と企業コンテキストを提供します。

翻訳元: https://www.helpnetsecurity.com/2026/08/18/synthesized-builds-test-data-agent-to-validate-ai-agents-with-production-like-data/

本記事は helpnetsecurity.com の記事を翻訳・要約したものです。