生成式AI是怎麼運作的?語言模型、提示、多模態與AI幻覺一次看懂

104學習
2026.11.07
1179次觀看

生成式AI是怎麼運作的?本文對照資策會生成式AI能力認證的基礎知識範圍,用白話說明生成與分類的差別、大型語言模型依機率接續文字的原理、提示與多模態的意義,以及AI幻覺為何出現、怎麼逐項查核,並整理應用領域與八類工具地圖。

本文目錄

你請AI幫忙摘要一份報告,回覆語氣流暢、條理分明,裡面的數字卻和原文對不上。這不一定是工具壞了,而是生成式AI的運作方式本來就會有這種風險。

先弄懂「產出內容」和「查到事實」的差別,用起工具會踏實很多。

搭配本課程5分鐘影片,先看重點,再用下面的整理與練習確認理解。

影片/生成式AI能力認證入門系列第3堂:5分鐘看懂生成式AI基礎知識

生成和分類有什麼不同?

生成式AI會依輸入產生內容,例如文字、圖像、聲音或影片。它和只做分類的任務不同:把郵件標成垃圾信是分類,替郵件草擬回覆才是生成。同一個服務可能兩種功能都有,判斷時看的是當次操作的目的。

發展脈絡可以這樣理解:機器學習用資料建立模式,深度學習使用多層網路,一路發展到今天的大型生成模型。這是概念路線,不表示所有工具都用同一套技術,也不能把生成式AI等同整個人工智慧領域。

語言模型怎麼接續文字?

大型語言模型(Large Language Model,簡稱LLM)透過大量資料學到語言的統計關係。生成時,它讀入前文,計算下一個字詞片段出現的可能性,選出片段後再接著往下寫。這個片段常稱為token,可能是一個字、一個詞,或詞的一部分。

可以把它想成「依上下文接續文字的系統」。重點在最後一步:它是在接續文字,不是從資料庫抄出一條已驗證的答案。

神經網路則像多層可調整的訊號連結,透過訓練調整參數。它只是計算架構的名稱,不是人的神經,也不代表模型有意識或人格。

語言模型怎麼接續文字:01 上下文,讀入前文;02 機率計算,估計下一片段;03 選出片段,字或詞的一部分;04 接續文字,不是查資料庫
圖解|語言模型怎麼接續文字

提示與幻覺:語氣肯定不等於正確

提示(prompt)就像交付任務的說明。你提供的目標、限制和背景,會影響輸出的方向。但模型仍可能產生看似合理卻錯誤的內容,這就是幻覺(hallucination)。

要求工具附上來源有助整理,卻不能確定網址、作者或數字真的存在。查核可以分三步:

  1. 圈出可驗證的主張:人名、數字、日期、法規。
  2. 回到原始來源:打開原文,連同上下文一起確認。
  3. 重算與標示:數值自己重算,找不到依據的句子刪除或標示不確定。

查法規時,尤其要核對原文、條文與生效狀態,避免引用過時內容。

名詞白話說法容易出現的誤解
語言模型根據語言模式產出文字每次都在查詢資料庫
LLM大型語言模型的英文縮寫大型就代表不會出錯
提示交代任務與條件的輸入指定專家角色就可靠
多模態處理文字、圖片等多種形式所有工具都支援每種形式
幻覺看似可信但錯誤的資訊有引用格式就是已查證

多模態:模型、工具與外接功能分開看

多模態(multimodal)表示能處理多種資料形式,例如同時輸入文字和圖片,再產生文字描述。ChatGPT、Gemini、Claude都是可以用來認識這類互動的例子,但各自支援的方式與帳號條件不同,要看各家正式說明。

理解時可以分兩層:模型是產生結果的核心,應用程式是你接觸的服務。服務若另外接了搜尋、檔案或計算功能,答案還會受到那些來源與執行結果影響。

多模態也不是每種輸入都看得準。照片模糊、文字辨識失敗或頁面缺漏,都可能讓輸出不完整;海報上的重要數字,仍要對回原圖。

應用領域:機會和影響一起看

領域可能的用途仍需要的把關
教育草擬教材與練習教師審閱內容
醫療保健協助整理資訊醫事人員判斷
金融整理文件或服務內容金融專業人員確認

生成工具降低了初稿門檻,也增加查核、資料管理與審閱的工作。分析社會與經濟影響時,可以一起看三件事:工作任務怎麼改變、誰能使用工具、錯誤由誰承擔。例如醫療摘要漏掉過敏紀錄,就算縮短了閱讀時間,也可能改變後續判斷。

八類工具地圖:先看任務,再看品牌

簡章的應用技能分成八類:文字、圖片、簡報、聲音、影片、程式與網站、數據分析、聊天機器人。依任務分類,比背一長串品牌名稱更清楚。

同一工具可能跨類,例如既能寫文字也能製圖;檢查方式則依產出不同,文字要查內容,圖表要重算數據。先認識類別,再查工具官方說明,確認你要的功能是否提供。各類的檢查重點,會在第5堂展開。

假設案例:引用看起來很正式

小文把一篇公開的活動成果文章交給工具摘要。原文只有參加人數,摘要卻多了一個「研究指出」的成長比例,還附上看起來很正式的研究名稱。

這比較接近生成內容出現幻覺,而不是資料已獲證實。引用外觀完整,仍可能找不到對應研究;應打開原始來源查數字與上下文。即使摘要其他句子都正確,也要把這個數字標出來,逐項核對。

引用看起來很正式:選項A 資料已獲證實;選項B 生成內容出現幻覺
圖解|情境題:引用看起來很正式

動手做4個練習

以下為本課自編假設情境與理解練習,非官方試題。

練習1

  • 練習:小文的摘要多了一個原文沒有的研究數字,最需要做哪一步?
  • 解析:找出研究原文並核對。數字不在輸入文章內,要確認引文是否存在、內容是否支持主張;格式完整不能取代證據。

練習2

  • 練習:同事說「大型語言模型每一句都是從資料庫抽出已驗證的答案」,哪裡不對?
  • 解析:語言模型是依上下文逐步產生字詞片段。服務可能外接搜尋,但不能因此推論每次輸出都已查核。

練習3

  • 練習:工具可以讀圖片,代表圖片上的數字都會判讀正確嗎?
  • 解析:不代表。多模態描述的是能處理的資料形式,不是準確度證明;清晰度、缺頁與文字辨識都會影響結果。

練習4

  • 練習:把郵件標成垃圾信,和替郵件草擬回覆,分別是什麼任務?
  • 解析:前者主要是分類,後者是內容生成。同一服務可以兩者都有,依當次操作目的判斷。

資料來源與教學說明

本文範圍對應資策會「生成式AI能力認證」簡章附錄A的基礎知識主題;原理與幻覺說明參考工具與技術廠商的公開文件,工具名稱僅為類型例子,不代表推薦或排名。練習為教學示例,非官方試題。本課程為證照認識與準備方法介紹,不保證通過測驗,亦非資策會官方課程,與資策會無合作關係。

資訊查核日期:2026-11-09。實際規定以資策會官網最新公告為準。

生成式AI能力認證入門系列|接著讀下一堂

致力於職場學習成長,我們將提供在職場相關學習趨勢、課程推薦、證照排行榜等相關資訊,協助你打造職涯成長的藍圖。