依主題找術語 · 63 份指南

人工智慧

認識 AI 如何接收指令、查找資料、使用工具、回答問題,以及接受檢查。

01 / 術語圖鑑

全部人工智慧術語

開啟一個術語,就能看簡單解釋、例子、使用時機、正式程度和程式名稱。

  1. 01 · 深入了解

    人在迴路監督 Human in the Loop

    人在迴路監督是流程中安排好的人工步驟。指定人員要有足夠資訊、權限和責任,可以審查、修改、核准、拒絕或停止 AI 輔助工作。

  2. 02 · 核心

    上下文視窗 Context Window

    上下文視窗是單次模型請求能容納的 token 總量,輸入內容和生成輸出都要算在內。實際計算方式會因模型和 API 而不同。

  3. 03 · 深入了解

    子代理 Sub-agent

    Sub-agent 是負責單一明確任務的獨立 Agent。它有自己的脈絡,也要回傳指定結果。

  4. 04 · 深入了解

    工具呼叫 Tool Calling

    工具呼叫是模型用規定格式的參數,請求使用某個外部工具。是否執行、要怎麼執行,仍由主程式決定。

  5. 05 · 核心

    文件分塊 Document Chunking

    文件分塊是把內容切成搜尋系統找得到的小段落。建立索引前,要先訂好每段的大小、重疊範圍和切分位置。

  6. 06 · 深入了解

    代理技能 Agent Skill

    Agent Skill 教 Agent 如何重複完成一類工作。它包含專用規則,也可包含腳本或資源。

  7. 07 · 深入了解

    代理協調 Agent Orchestration

    代理協調是一套工作安排,用來管理 AI 代理、工具、工作交接、共用資訊和停止規則,讓多步驟任務能受控完成。

  8. 08 · 深入了解

    代理記憶 Agent Memory

    代理記憶是 AI 代理在這則訊息結束後,仍能取用的已儲存資訊。規則要說清楚會存什麼、存多久,以及如何更新。

  9. 09 · 深入了解

    代理迴圈 Agent Loop

    Agent Loop 是受控制的循環。Agent 檢查狀態、用允許工具行動、讀取結果,再停止或繼續。

  10. 10 · 深入了解

    代理隔離環境 Agent Sandbox

    代理隔離環境是一個受限制的地方,讓 AI 代理執行程式或工具。它會和電腦其他部分隔開,但保護範圍要看實際設計。

  11. 12 · 深入了解

    生成取樣 Sampling

    生成取樣是依照各種可能性,選出下一個文字小單位(token)。模型不一定每次都挑機率最高的選項。

  12. 13 · 核心

    向量嵌入 Embedding

    向量嵌入(Embedding)是模型為一個項目學到的一串數字。系統可以在這個數字空間中,用距離或相似度規則比較不同項目。

  13. 14 · 深入了解

    向量資料庫 Vector Database

    向量資料庫是業界對一類資料儲存系統的稱呼。它能保存向量、搜尋相似向量,通常也能篩選其他資訊並使用快速近似索引;目前沒有單一通用標準。

  14. 15 · 深入了解

    多模態 AI Multimodal AI

    多模態 AI 能使用或產生多種資料。資料可包含文字、圖片、聲音、影片或感測器資訊。

  15. 16 · 深入了解

    串流回應 Streaming Response

    串流回應會用小事件或區塊陸續送達。工作完成前,使用者就能看到部分有用輸出。

  16. 18 · 深入了解

    系統提示 System Prompt

    系統提示是一組高優先層級的指示,用來設定 AI 產品的角色、限制、工具和回應規則。

  17. 19 · 深入了解

    依據一致性 Groundedness

    依據一致性是檢查答案中的說法,是否獲得提供給模型的來源支持。它只是其中一項評測,不是全球通用的單一分數。

  18. 21 · 深入了解

    知識蒸餾 Knowledge Distillation

    知識蒸餾讓較小的「學生模型」學習「教師模型」的訊號。訓練時通常會同時使用教師分數和正確標籤。

  19. 23 · 深入了解

    首個 Token 延遲 Time to First Token

    首個 Token 延遲(TTFT)是從明確的請求起點,到用戶端或伺服器看到第一個生成 token 的等待時間。量測的起點和終點必須說清楚。

  20. 24 · 深入了解

    脈絡工程 Context Engineering

    脈絡工程會選擇模型收到什麼,也安排順序。內容可包含事實、指令、工具、狀態和證據。

  21. 25 · 深入了解

    脈絡精簡 Context Compaction

    脈絡精簡會把較早的對話狀態換成較小的項目,讓長任務能繼續。這個項目不一定是看得懂的摘要,也可能漏掉細節。

  22. 26 · 深入了解

    推理與行動交錯模式 ReAct

    ReAct 代表 Reason 和 Act。Agent 執行動作、讀取結果,再用新事實決定下一步。它不是 React。

  23. 27 · 深入了解

    混合搜尋 Hybrid Search

    混合搜尋會為同一個問題,同時使用精確詞彙搜尋和依意思比對的向量搜尋,再把兩邊的結果合併或重新排序。

  24. 28 · 深入了解

    提示注入 Prompt Injection

    提示注入是有害或未預期的文字,企圖讓 AI 忽略應用程式可信的規則,改去聽從別的指令。

  25. 29 · 核心

    提示指令 Prompt

    提示指令是為了完成一項任務而交給模型的內容,可以包含指示、脈絡、範例和資料。

  26. 30 · 深入了解

    提示指令快取 Prompt Caching

    提示指令快取讓模型服務重用相同輸入開頭的處理結果。它可能減少重複工作,但不會直接拿舊答案來回覆。

  27. 35 · 核心

    語言模型 Language Model

    語言模型是一種預測並產生序列的統計模型,通常能依照指示處理文字和其他類型的資料,這些類型稱為模態。

  28. 36 · 核心

    模型 Token Model Token

    模型 Token 是特定分詞器把文字或位元組轉成模型使用的數字 ID 時,產生的計數單位。一個 Token 不一定等於一個單字或字元,切分方式和數量會隨分詞器版本改變。

  29. 37 · 深入了解

    模型脈絡協定 Model Context Protocol

    Model Context Protocol 連接 AI 應用和外部工具或資料。Host 透過 Client 連到提供工具、資源和 Prompt 的 Server。這是開放協定,雙方會先確認可用能力。

  30. 38 · 核心

    模型推論 Model Inference

    模型推論是讓訓練完成的模型處理新內容,再給出預測、分數或答案。這個過程不會改動模型學到的權重。

  31. 39 · 深入了解

    模型評分器 Model Grader

    模型評分器會依照書面規則,用 AI 模型為一份輸出打分或分類。它也可能判錯,所以要用人工評過的範例檢查。

  32. 40 · 深入了解

    模型量化 Model Quantization

    模型量化是用精度較低的數字格式,儲存模型權重或運算中的數值(activation)。這能減少記憶體、資料傳輸和運算成本。

  33. 41 · 深入了解

    模型微調 Fine-tuning

    模型微調是用特定任務或領域中整理好的範例,繼續訓練現有模型。這會改變模型學到的權重和行為。

  34. 42 · 深入了解

    模型路由 Model Routing

    模型路由會決定每個請求要交給哪個模型或處理路徑,選擇依據包括品質、能力、成本、延遲或安全政策。

  35. 44 · 深入了解

    檢索重新排序 Reranking

    檢索重新排序是用第二個模型,再為搜尋結果評分一次。它會更仔細比較問題和每份文件,然後調整順序。

  36. 48 · 核心

    AI 幻覺 AI Hallucination

    AI 幻覺是業界常用說法,指 AI 把錯誤內容,或不符合現有證據的內容當成答案。NIST 使用更精確的風險用語「虛構陳述」(confabulation)。

  37. 49 · 深入了解

    AI 防護控制 AI Guardrail

    AI 防護控制是業界統稱,用來找出、限制、阻擋、修改不安全的 AI 輸入、輸出或操作,或把它交給人員審查。它不是單一標準工具。

  38. 50 · 深入了解

    AI 執行追蹤 AI Tracing

    AI 執行追蹤會記錄一次 AI 工作的每個相連步驟,例如模型呼叫、搜尋、工具和代理工作。這份紀錄讓人能從頭到尾查看發生了什麼。

  39. 51 · 深入了解

    AI 基準測試 AI Benchmark

    AI 基準測試包含固定任務、資料、指標和測試條件。內容都要清楚記錄。大家用同一套規則,才能比較不同系統。

  40. 52 · 核心

    AI 評測 AI Evaluation

    AI 評測是一套可以重複進行的測試方法。它會使用明確的任務、測試資料、評分規則和安全門檻。

  41. 53 · 深入了解

    AI 電腦操作 Computer Use

    AI 電腦操作讓模型查看畫面,並回傳點擊、輸入或捲動等動作。主程式會檢查並執行每個允許動作。

  42. 55 · 深入了解

    AI 證據連結 AI Grounding

    AI 證據連結是業界常用說法,指把 AI 生成的內容或操作,連到提供的證據、找到的來源或可信系統資料。做法和評分方式各不相同,目前沒有單一標準流程。

  43. 62 · 深入了解

    Top-p 取樣 Top-p Sampling

    Top-p 取樣會依機率排列候選 token,再保留累積機率達到 p 的最小一組,最後從這組選出下一個 token。

  44. 63 · 核心

    Transformer 架構 Transformer

    Transformer 是一種神經網路架構。它用「注意力機制」找出文字前後的關係,也能同時處理序列中的多個位置。