https://yennj12.js.org/yennj12_blog_V4/tags/token/Recent content in Token on YennJ12 Engineering BlogHugo -- gohugo.ioen-usSun, 31 May 2026 11:00:00 +0800https://yennj12.js.org/yennj12_blog_V4/posts/fde-interview-guide-part9-llm-core-zh/Sun, 31 May 2026 11:00:00 +0800https://yennj12.js.org/yennj12_blog_V4/posts/fde-interview-guide-part9-llm-core-zh/這篇是 FDE 面試系列的最後一篇基礎知識篇。 LLM 的這三塊——Token、Prompt Engineering、Embedding—— 是你每天都在用的工具，但能說清楚的人比你想像中少。 說得清楚，就是專業的訊號。 面試情境 面試官：「你的 RAG 系統的 context budget 怎麼設計的？如果你要讓 LLM 做複雜推理，你用什麼 Prompting 技法？為什麼選 text-embedding-004 而不是 OpenAI 的 embedding？」 這三個問題把 Token、Prompt Engineering、Embedding 串在一起問，測的是你有沒有把這些工具整合進系統設計的意識。 一、Token：不是字，是 LLM 的計量單位 面試官問： 「Context Window 是什麼？對你的系統設計有什麼影響？」 Token 是什麼 LLM 不是以字元或單詞為單位處理文字，而是以 Token 為單位。 Token 是 Tokenizer 切出來的文字片段，大小不固定： "Hello world" → ["Hello", " world"] → 2 tokens "LLM" → ["L", "LM"] → 2 tokens（或 1 token，取決於 tokenizer） "不可思議" → ["不", "可", "思", "議"] → 4 tokens（中文通常 1 字 = 1 token） 粗略換算（GPT/Gemini 系列）：