AI コア B · 公式のガイダンス プラットフォーム: AI

Document Chunking

ドキュメントチャンク化

ドキュメントチャンク化は、検索システムが見つけやすいようにコンテンツを小さな部分に分割します。明確なルールにより、各部分のサイズ、重なり、およびインデックス作成前の停止点が設定されます。

仕組みを見る
そう呼ぶかもしれません Document Chunkingドキュメントチャンク化

仕組みを見る

元の作業例ドキュメントチャンク化

もう一つの例

検索エンジニアは、見出し、表、ページ情報を含むポリシー文書を分割します。それぞれのチャンクはセクションの意味と元の位置を保持します。文字数で切ったり表の行を分割するのは悪い戦略です。

主な部分

  1. 01境界ルール
  2. 02チャンクサイズと重複
  3. 03ソースメタデータ

以下の場合に使用します

検索インデックス、埋め込み、またはプロンプトのコンテキストに使用される部分を設定する場合に、この用語を使用します。

以下の場合は使用しないでください

見出し、リスト、表に意味がある場合に、トークン数だけでチャンクサイズを選ばないでください。

コードで使用する名前

document → structure-aware nodes + metadata

出荷前に

Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback.

コピーできるリクエスト

Outcome:Complete the task with ドキュメントチャンク化 (Document Chunking)。 User context:検索エンジニアは、見出し、表、ページ情報を含むポリシー文書を分割します。それぞれのチャンクはセクションの意味と元の位置を保持します。文字数で切ったり表の行を分割するのは悪い戦略です。 AI method or concept:ドキュメントチャンク化 (Document Chunking)。 Why it fits:検索インデックス、埋め込み、またはプロンプトのコンテキストに使用される部分を設定する場合に、この用語を使用します。 Do not use it when:見出し、リスト、表に意味がある場合に、トークン数だけでチャンクサイズを選ばないでください。 AI requirements: Define the input and source evidence. Set model and tool permissions. Use versioned evaluation data and measures. Define failure, decline-to-answer, privacy, speed, and cost limits. Operational safeguards: Keep a clear trace and hide sensitive log data. Show users a safe fallback. Mark steps that need human review. Define how to roll back the model or prompt. Acceptance criteria: Record baseline and target measures on a versioned evaluation set. Test edge cases and hostile inputs. Verify fallback, monitoring, permissions, and rollback. Evidence and limits (evidence boundary):その情報源にとって公式です。他のプラットフォームやチームはその用語を別の方法で使用する場合があります。 Unknowns to confirm: Target task, model and version, evaluation owner, source data, risk limit, tool permissions, and production fallback.

このリクエストを確認する

Review how ドキュメントチャンク化 (Document Chunking) is used now. Definition: ドキュメントチャンク化は、検索システムが見つけやすいようにコンテンツを小さな部分に分割します。明確なルールにより、各部分のサイズ、重なり、およびインデックス作成前の停止点が設定されます。 Release checks: Check the model and prompt versions, source data, versioned evaluation set, and measures. Verify links to evidence, tool permissions, privacy, common failures, decline-to-answer and fallback behavior, human review, monitoring, cost, speed, and rollback. Before changing code, list the evidence, gaps, severity, and the smallest safe fix.

B
この用語はどれくらい公式か?

公式のガイダンス

指定されたプラットフォーム、フレームワーク、プロジェクト、または専門グループには、この用語に関する公式ガイドがあります。

その情報源にとって公式です。他のプラットフォームやチームはその用語を別の方法で使用する場合があります。

範囲
ソースがカバーするもののみ:正式名、定義、プラットフォームAPI、実装、使用ガイド
ドキュメントステータス
安定
チェックオン
2026-07-30

証拠の情報源と範囲

権威のある情報源 + 用語参照 · LlamaIndex · 安定 Node parsers and text splitting 範囲: 正式名、定義、プラットフォームAPI、実装、使用ガイド ここでの役割: 直接用語参照 ソースの範囲: 正式名, 定義, プラットフォームAPI, 実装, 使用ガイド

自分でコピーする

ブラウザはこれをコピーできませんでした。下のリクエストを選択して自分でコピーしてください。