Multimodal AI
マルチモーダルAI
マルチモーダルAIは、複数のデータタイプを使用または作成できます。これにはテキスト、画像、音声、動画、またはセンサーデータが含まれる場合があります。
もう一つの例
メンテナンス助手は、機械の写真、報告された音、型番をチェックするよ。手順を提案する前に、もっと安全な撮影角度をお願いするよ。
主な部分
- 01User intent and context
- 02Model or tool decision
- 03Grounded result and fallback
以下の場合に使用します
各入力が必要な情報を追加する場合にのみ複数の入力タイプを使用してください。品質、同意、コスト、障害時の対応を説明してください。
以下の場合は使用しないでください
敏感な特性を推測したり、不確かな画像を事実として提示したりしないでください。カメラやマイクへのアクセスにはテキスト代替を提供してください。
コードで使用する名前
text + image/audio/video inputs and outputs 出荷前に
Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback.
Outcome:Complete the task with マルチモーダルAI (Multimodal AI)。 User context:メンテナンス助手は、機械の写真、報告された音、型番をチェックするよ。手順を提案する前に、もっと安全な撮影角度をお願いするよ。 AI method or concept:マルチモーダルAI (Multimodal AI)。 Why it fits:各入力が必要な情報を追加する場合にのみ複数の入力タイプを使用してください。品質、同意、コスト、障害時の対応を説明してください。 Do not use it when:敏感な特性を推測したり、不確かな画像を事実として提示したりしないでください。カメラやマイクへのアクセスにはテキスト代替を提供してください。 AI requirements: Define the input and source evidence. Set model and tool permissions. Use versioned evaluation data and measures. Define failure, decline-to-answer, privacy, speed, and cost limits. Operational safeguards: Keep a clear trace and hide sensitive log data. Show users a safe fallback. Mark steps that need human review. Define how to roll back the model or prompt. Acceptance criteria: Record baseline and target measures on a versioned evaluation set. Test edge cases and hostile inputs. Verify fallback, monitoring, permissions, and rollback. Evidence and limits (evidence boundary):単一の公式標準が全体の用語を管理するわけではありません。その意味はチーム、プラットフォーム、またはフレームワークによって変わる可能性があります。 Unknowns to confirm: Target task, model and version, evaluation owner, source data, risk limit, tool permissions, and production fallback.
このリクエストを確認する
Review how マルチモーダルAI (Multimodal AI) is used now. Definition: マルチモーダルAIは、複数のデータタイプを使用または作成できます。これにはテキスト、画像、音声、動画、またはセンサーデータが含まれる場合があります。 Release checks: Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback. Before changing code, list the evidence, gaps, severity, and the smallest safe fix.