AI SaaSのセキュリティ/評価方法
範囲と証拠を検査可能にします。
このメソッドは、 AI SaaS セキュリティ監査エンゲージメントの範囲では、該当するテスト、アクセス、証拠、成果物が特定されます。このページはプロセスの説明であり、製品の評価ではありません。
1. テスト前に境界に同意する
製品バージョン、環境、ターゲット ドメインと API、モデル構成、許可されたアカウント、およびサードパーティ システムを記録します。書面による許可を取得し、テスト期間、停止条件、データ処理、エスカレーション連絡先について同意します。
合成データまたは承認済みデータと制限付きテストを使用します。サードパーティのインフラストラクチャには、該当する場合、独自の承認が必要です。コード レビュー、構成レビュー、アプリケーション テスト、および AI 評価は、合意された場合にのみ含まれます。アクセスできないコンポーネントは明示的な制限のままです。
2. 観察結果とステートメントを分離する
- テスト済み: 記録された入力、環境、構成、および観察された結果がこの発見を裏付けています。
- レビュー済み: コード、設定、またはドキュメントは、利用可能なアクセスの範囲内でより狭い結論をサポートしています。
- 宣言: プロバイダーまたは製品所有者が、Rubrex が独自に検査できなかった行為を述べています。
- 未評価: チェックは除外されているか、利用できないか、決定的ではありません。合格として報告してはなりません。
トレーニング使用の主張の場合、証拠がどのデータ、プロバイダー、アカウント構成、条件、および期間をカバーしているかを特定します。設定のレビューでは、外部プロバイダーのすべての内部アクションを確立することはできません。
3. 優先順位付け、修正、再テスト
実証された影響、影響を受けるユーザーまたはデータ、前提条件、および評価された環境を使用して、結果に優先順位を付けます。元の証拠を保管し、修正、再テスト条件、結果、および残っている不確実性を記録します。受け入れられたリスクは、受け入れられたリスクとして表示されたままになります。
合意された参照ケースとスコア基準を使用して品質を個別に評価します。小規模なテストセットを普遍的な精度の主張に変換するのではなく、サンプルカバレッジと既知の限界を報告します。
報告書の概要説明 / 完了した監査ではない
評価レポートの内容
この概要は、意図した構造を示しています。これには、クライアントの結果、評価された製品、または合格バッジは含まれません。
- 概要: 支持されている決定、重要な発見、および次のアクション。
- 範囲: 製品バージョン、環境、日付、認可されたターゲット、基準、および除外。
- データフローマップ: 顧客入力→アプリケーション→取得またはツール→モデルプロバイダ→出力。ログ、分析、ストレージ、保持、および削除のパスが特定されます。
- レコードの検索: 識別子、影響を受けるコンポーネント、証拠の種類、予想される動作と観察された動作、影響、重大度の根拠、および修復。
- 評価結果： ケース、グレーディング方法、品質所見、および適用範囲の制限。
- 再テスト記録: 更新されたバージョン、繰り返しのチェック、結果、および未解決の問題。
- 合意された場合の公開概要: 機密実装の詳細が削除されたステートメントがサポートされました。
複製の詳細、秘密、および顧客を暴露する可能性のある情報は、公開バッジ ページではなく、制限された技術レポートに含まれます。
Rubrex 評価バッジの要件
提案されているバッジの文言は「Rubrex によって評価されたセキュリティとデータの実践」です。評価を購入しただけではバッジは発行されません。発行には完了したレビューと公開された検証記録が必要です。
- 製品所有者の権限と評価された製品/ドメインを検証する必要があります。
- 結果が判明する前に、必要なチェックと合格基準に同意する必要があります。パスを取得するために必要なチェックをサイレントに削除することはできません。
- 未解決の重大または高セキュリティの検出結果により、バッジをアクティブにすることができません。その他の発見や除外事項は、安全なレベルで開示する必要があります。
- それぞれの公的データ実務の主張には、裏付けとなる証拠と明確に記載された境界がなければなりません。サポートされていないクレームは省略されています。
- 適格性を確認する前に、必要に応じて修復を再テストする必要があります。 AI やスキャナーの出力だけでは証拠としては不十分です。
- 評価対象製品に対する Rubrex エンジニアリング作業は開示されなければなりません。この評価は、当社が実施した業務から独立していることを意味するものではありません。
バッジは現在のレコードにリンクする必要があります
検証記録では、製品とドメイン、評価 ID、範囲、評価バージョン、日付、証拠の概要、制限、有効期限、ステータスを特定する必要があります。バッジを閲覧している人は誰でも、rubrex.ai でその記録を確認できる必要があります。
有効性は、記載された範囲と有効期限に限定されます。プロバイダー、データ フロー、承認、モデル ツール、またはその他の評価対象のコントロールを変更した場合は、影響を受けるクレームを確認する必要があります。期限切れ、一時停止、または取り消された評価は、アクティブとして表示できません。更新には変更された日付だけではなく、新しい証拠が必要です。
このバッジは、SOC 2、ISO 認証、法的遵守、脆弱性ゼロ、または製品が顧客データを決して処理しないことを証明するものではありません。評価は、テストされたシステムに関する限定された証拠であり、将来のすべてのリクエストについて約束するものではありません。
請求された Rubrex 評価を確認する必要がある場合は、製品 URL と評価 ID を次の宛先に送信してください。 evals@rubrex.ai.公開のお問い合わせフォームを通じてプライベート レポートや資格情報を送信しないでください。
スコープの定義に使用される参照
これらの情報源は評価設計に情報を提供します。 Rubrex または評価された製品を認証するものではありません。レポートには、実際にチェックしたバージョンと該当する要件をリストする必要があります。
- OWASP アプリケーション セキュリティ検証標準 5.0.0: アプリケーションのセキュリティ要件のリファレンス。
- LLM および GenAI アプリケーションの OWASP トップ 10: モデルアプリケーションのリスクカバレッジのリファレンス。
- エージェント アプリケーションの OWASP トップ 10: エージェントの動作、ツール、権限の境界に関するリファレンス。