GPT 是什麼?Generative Pre-trained Transformer 白話解析

快速回答

GPT(Generative Pre-trained Transformer)是 OpenAI 開發的大型語言模型系列。ChatGPT 就是基於 GPT 模型打造的產品。GPT 三個字分別代表:Generative(生成式)、Pre-trained(預訓練)、Transformer(Transformer 架構)。

GPT 家族演進

版本年份參數量重要突破
GPT-120181.17 億證明預訓練+微調的可行性
GPT-2201915 億零樣本學習、文字生成能力驚人
GPT-320201,750 億少樣本學習、API 商業化
GPT-3.52022~1,750 億ChatGPT 爆紅、RLHF 對齊
GPT-42023未公開多模態(文字+圖片)、推理大幅提升
GPT-4o2024未公開原生多模態、更快更便宜

GPT 怎麼運作?

GPT 的核心原理其實很簡單——預測下一個字

  1. 你輸入「台灣最高的山是」
  2. GPT 根據前面的文字,計算下一個字最可能是什麼
  3. 「玉」(機率最高)→「山」→「,」→「海」→「拔」→...
  4. 一個字一個字生成,串成完整的回答

聽起來簡單,但當模型夠大、訓練資料夠多,這種「預測下一個字」的能力就演化出了看似「理解」和「推理」的能力——這就是 LLM 令人驚嘆的地方。

GPT vs 其他模型

模型公司優勢開源?
GPT-4oOpenAI多模態、生態系豐富閉源
ClaudeAnthropic長文、程式碼、安全性閉源
GeminiGoogle搜尋整合、多語言閉源
LLaMAMeta開源、可自行部署開源
DeepSeekDeepSeek開源、推理能力強開源

如何使用 GPT

  • ChatGPT:對話介面,最簡單的使用方式
  • API:整合到你自己的應用程式中
  • GPT Store:使用或建立自定義的 GPT 應用
  • Fine-tuning:用自己的資料微調 GPT 模型
安全提醒:GPT 可能產生幻覺(生成看似正確但實際錯誤的資訊)。使用 GPT 的輸出時,務必驗證重要資訊的正確性。Prompt Injection 也是使用 GPT API 時需要防範的安全威脅。

常見問題 FAQ

GPT 和 ChatGPT 有什麼不同?

GPT 是底層技術,ChatGPT 是基於 GPT 的對話產品。GPT 是引擎,ChatGPT 是汽車。

GPT 三個字母各代表什麼?

Generative(生成式)、Pre-trained(預訓練)、Transformer(Transformer 架構)。

GPT-4 和 GPT-3.5 差在哪?

GPT-4 推理更強、多模態、更準確。GPT-3.5 更快更便宜。

GPT 和 Claude 哪個比較好?

各有優勢,取決於需求。建議都試試。詳見ClaudeChatGPT 專文。

GPT 是開源的嗎?

不是。GPT 閉源,只能透過 API 使用。開源替代有 LLaMADeepSeek

GPT 的訓練資料從哪來?

主要是網路文字。確切組成是商業機密,已引發版權訴訟。