T02

Token

Token

簡短答案

AI 語言模型處理文字的基本單位,可能是一個詞、字或子詞片段。

深入解釋

英文通常 1 個詞 ≈ 1–2 個 Token;中文每個字通常 1–2 個 Token。Token 數量決定 API 費用與上下文容量,理解 Token 有助控制使用成本。

實際案例

"Hello world" 約 2 個 Token;「你好世界」約 4 個 Token。

本頁為 AIATCL 備考用非官方內容;考試資訊請以主辦單位公告為準。