![]()
大語言模型驅(qū)動的詞典編纂實(shí)踐革新與理論重構(gòu),共同勾勒出面向未來的詞典學(xué)新范式雛形。
原文 :《大語言模型催生詞典編纂新范式》
作者 |黑龍江大學(xué)俄語學(xué)院副教授 何洋洋
圖片 |網(wǎng)絡(luò)
近年來,大語言模型的快速發(fā)展對詞典學(xué)產(chǎn)生了深刻影響。長期以來,如何在保證學(xué)術(shù)規(guī)范與編纂質(zhì)量的前提下提高詞典編纂效率,是學(xué)術(shù)界普遍關(guān)注的問題。經(jīng)過大規(guī)模語料預(yù)訓(xùn)練的大語言模型,憑借其出色的語言生成能力,使詞典“內(nèi)容生成自動化”成為可能。我們須把握宏觀趨勢,從范式演進(jìn)的高度認(rèn)識大語言模型對詞典編纂實(shí)踐與理論的重構(gòu),致力于構(gòu)建具有中國立場和學(xué)術(shù)自覺的新型詞典學(xué)自主知識體系。
![]()
![]()
![]()
基于內(nèi)容生成自動化的詞典編纂新范式
詞典編纂向來周期長、投入大。此前的自動化與數(shù)字化嘗試,著力于提升編纂流程效率,如借助語料庫檢索輔助收詞、通過數(shù)據(jù)庫實(shí)現(xiàn)詞條統(tǒng)一管理、利用數(shù)字排版技術(shù)改進(jìn)編輯與出版環(huán)節(jié)等。這使詞典編纂流程實(shí)現(xiàn)了一定程度的自動化,但詞條釋義、義項(xiàng)劃分和例證撰寫等核心環(huán)節(jié)仍主要依賴有經(jīng)驗(yàn)的編者完成。大語言模型強(qiáng)大的生成能力為詞典編纂從“流程自動化”轉(zhuǎn)向“內(nèi)容生成自動化”提供了可能,詞典編纂新范式呼之欲出。
大語言模型主要是基于Transformer 架構(gòu)的預(yù)訓(xùn)練機(jī)制來實(shí)現(xiàn)詞典詞條的自動生成。其在大規(guī)模語料學(xué)習(xí)過程中內(nèi)化了豐富的語言結(jié)構(gòu)信息,具備了生成連貫文本的能力。在義項(xiàng)劃分方面,同一詞形在不同語境中,經(jīng)由大模型編碼后呈現(xiàn)出不同的向量表征。通過對這些向量表征的聚類分析,篩選出語義明確的用法類型,即可對應(yīng)詞的不同義項(xiàng)。在釋義與例句生成方面,大模型能在給定語境的情況下,生成符合要求的釋義與例句。此外,大語言模型的分布式表征能為構(gòu)建詞匯語義網(wǎng)絡(luò)提供機(jī)器可循的線索:詞與詞在向量空間中的相似度,可用來識別同義、反義或轉(zhuǎn)換(如教與學(xué)、買和賣等)關(guān)系;結(jié)合它們在不同語境中的共現(xiàn)與替換分布特征,可識別上下位關(guān)系。通過對海量語料的概率建模與分布式表征學(xué)習(xí),大語言模型使詞典內(nèi)容自動生成在多個關(guān)鍵環(huán)節(jié)上具備可行性。從這個意義上講,它正深刻變革詞典編纂實(shí)踐,重構(gòu)詞典編纂理論。
![]()
![]()
![]()
智能協(xié)同的詞典編纂實(shí)踐
大語言模型驅(qū)動的詞典編纂實(shí)踐在以下三方面顯著區(qū)別于傳統(tǒng)模式。
編纂載體的變化。詞典編纂的載體,傳統(tǒng)上是卡片,互聯(lián)網(wǎng)時代是語料庫,而在人工智能時代則有望被大語言模型和智能體取代。前兩者更新周期長、維護(hù)成本高,編纂流程仍主要依賴人工完成。這種靜態(tài)載體導(dǎo)致傳統(tǒng)詞典編纂存在周期長、更新慢的局限。大語言模型驅(qū)動的詞典編纂實(shí)踐,其載體不再是孤立的數(shù)據(jù)庫,而是一個以通用語言模型為中樞、多智能體協(xié)同運(yùn)作的集成化平臺。通用模型提供對自然語言的理解與生成能力,不同智能體則分別承擔(dān)語義分析、釋義與例句生成等下游任務(wù),為編纂工作的自動化與智能化奠定了技術(shù)基礎(chǔ)。
編纂流程的變化。大語言模型解構(gòu)了傳統(tǒng)詞典編纂流程。在傳統(tǒng)流程中,編者必須先通過語料觀察和語義分析確定意義,再轉(zhuǎn)寫為規(guī)范釋文并佐以例證。大語言模型則依托其在大規(guī)模文本上習(xí)得的語言模式與共現(xiàn)規(guī)律,在給定詞目、語體/體例約束與上下文提示的條件下,直接進(jìn)行概率式生成,產(chǎn)出多版本、可比較的候選表述。編者據(jù)此檢驗(yàn)其語義覆蓋度、語料支撐與體例合規(guī)性。大語言模型并非先理解意義再尋找表達(dá),而是先給出表達(dá),再借由評估逼近合適的意義。傳統(tǒng)流程的核心在于“從語料中正確概括出意義”,新流程的核心則是“從或然性表述中,篩選并校準(zhǔn)出最可靠的版本”。編纂的關(guān)鍵環(huán)節(jié)由“撰寫”轉(zhuǎn)為“驗(yàn)收”,一套基于內(nèi)容自動生成的新型人機(jī)協(xié)同流程得以確立。
編者角色的變化。在傳統(tǒng)模式中,詞典編者既是詞條內(nèi)容的生產(chǎn)者,又是詞典質(zhì)量的把關(guān)人。編者須親自完成每條釋義與例句的撰寫,全程參與資料搜集、內(nèi)容編寫與定稿審核,其學(xué)術(shù)水平?jīng)Q定了詞典的權(quán)威性。大語言模型時代,編者更傾向于作為生成過程的引導(dǎo)者與質(zhì)量審校者:一方面,通過設(shè)計提示框架與約束條件,引導(dǎo)模型穩(wěn)定產(chǎn)出符合受眾定位、語言規(guī)范與詞典體例的詞條;另一方面,嚴(yán)格評估、核驗(yàn)與潤色生成內(nèi)容,把關(guān)事實(shí)是否準(zhǔn)確、邏輯是否自洽和語言是否地道。編者須與模型對話,對不當(dāng)內(nèi)容及時糾偏并形成修訂規(guī)則。更關(guān)鍵的是,專家反饋將審校意見不斷固化,進(jìn)一步提升模型生成內(nèi)容的穩(wěn)定性與可用性。編者工作重心從直接生產(chǎn)文本,轉(zhuǎn)向?qū)ι蓹C(jī)制、質(zhì)量標(biāo)準(zhǔn)與最終結(jié)果的統(tǒng)籌和裁決。
![]()
![]()
![]()
生成導(dǎo)向的詞典編纂理論
與詞典編纂實(shí)踐相適應(yīng),大語言模型時代的詞典編纂理論在認(rèn)識論、對象形態(tài)功能和規(guī)范觀方面都發(fā)生了深刻變革。
編纂認(rèn)識論的變化。傳統(tǒng)詞典學(xué)的認(rèn)識論根植于結(jié)構(gòu)主義語言觀,將詞義視為穩(wěn)定、可定義的概念實(shí)體,預(yù)設(shè)詞具有相對明確的語義邊界及可被識別和枚舉的義項(xiàng)集合。編者通過義項(xiàng)劃分、釋義撰寫與例證選取,將復(fù)雜的語言使用現(xiàn)象抽象和固化,使詞典成為對語言意義進(jìn)行分類、歸納與固定化呈現(xiàn)的知識系統(tǒng)。大語言模型則基于大規(guī)模語料的統(tǒng)計學(xué)習(xí),在不同上下文分布中自動捕捉詞義差異,由此構(gòu)建了一種“生成主義”的詞典編纂認(rèn)識論。新的認(rèn)識論強(qiáng)調(diào)語義的概率性與情境依存性,承認(rèn)詞義是在生成與使用中不斷被更新和校準(zhǔn)的。相應(yīng)地,詞典編纂不再以窮盡列舉并劃定詞義邊界為核心,而是借助模型捕捉語言意義的流動性,在具體語境中生成更貼合使用的解釋與呈現(xiàn)。這標(biāo)志著詞典編纂從結(jié)構(gòu)主義的“分類邏輯”邁向了生成主義的“生成邏輯”。
編纂對象形態(tài)功能的變化。大語言模型改變了詞典編纂對象(即詞典本身)的形態(tài)、組織方式與應(yīng)用場景。傳統(tǒng)上,無論是紙質(zhì)詞典還是電子詞典,其知識均被預(yù)定義為離散的詞條,通過固定的宏觀結(jié)構(gòu)與模塊化的微觀結(jié)構(gòu)(如分欄呈現(xiàn)釋義、例句)進(jìn)行編排,本質(zhì)上是結(jié)構(gòu)化的知識載體,功能局限于被動的單向查詢。未來,詞典形態(tài)有望從有形的“書”演變?yōu)榭汕度敫黝愓Z言使用場景的應(yīng)用程序編程接口(API)或?qū)υ捊缑妫涔δ軐⑸墳楦鶕?jù)具體問題輸出連貫、滿足當(dāng)下語言知識需求的解釋。詞典不再只是等待查詢的數(shù)據(jù)庫,而是能深度嵌入閱讀、寫作、翻譯等場景的交互式語言知識服務(wù)產(chǎn)品。其價值重心也從提供標(biāo)準(zhǔn)化釋義,轉(zhuǎn)向在具體場景中降低用戶獲取與應(yīng)用語言知識的成本。詞典編纂也須順應(yīng)形態(tài)功能的演變作出調(diào)整。
編纂規(guī)范觀的變化。在傳統(tǒng)編纂模式下,編纂者作為把關(guān)人,依據(jù)相對穩(wěn)定、共時的語言體系,預(yù)先判斷哪些詞匯與用法可被收錄以及應(yīng)當(dāng)如何表述。規(guī)范主要表現(xiàn)為釋義措辭的取舍、用法標(biāo)簽與例證選擇,包括對語體與風(fēng)格的優(yōu)劣判斷。這種排他式的規(guī)范觀更多依賴編者在撰寫詞條前作出裁定。大語言模型介入的詞典編纂,主要體現(xiàn)為對編纂過程的約束,即規(guī)定編纂系統(tǒng)如何按照提示及相應(yīng)規(guī)則生成詞條內(nèi)容、明確可用語料,統(tǒng)一釋義風(fēng)格、術(shù)語體系與義項(xiàng),設(shè)置事實(shí)核驗(yàn)、一致性檢查以及幻覺的處置規(guī)則,并將審校意見作為約束條件以持續(xù)修正偏差。由此,詞典規(guī)范的標(biāo)準(zhǔn)從編者的個人審度,轉(zhuǎn)向人機(jī)協(xié)作對生成結(jié)果的持續(xù)校準(zhǔn),實(shí)現(xiàn)了從前期權(quán)威裁定到全流程約束的根本轉(zhuǎn)變。
![]()
大語言模型驅(qū)動的詞典編纂實(shí)踐革新與理論重構(gòu),共同勾勒出面向未來的詞典學(xué)新范式雛形。在這一范式下,詞典的核心角色已不再局限于作為權(quán)威參照的靜態(tài)工具書,而是演變?yōu)槟軌虺掷m(xù)追蹤語言動態(tài)、融合多源信息、服務(wù)于真實(shí)語言生活的知識服務(wù)產(chǎn)品。大語言模型為詞典學(xué)帶來的遠(yuǎn)不止于技術(shù)層面的升級,更在于推動其重新審視自身的研究對象、方法論體系與價值目標(biāo)。展望未來,如何在智能化背景下,構(gòu)建兼具學(xué)術(shù)自覺、理論主體性與自主知識體系的詞典學(xué)理論,仍有賴于學(xué)界持續(xù)而深入的探索。
文章為社會科學(xué)報“思想工坊”融媒體原創(chuàng)出品,原載于社會科學(xué)報第2002期第5版,未經(jīng)允許禁止轉(zhuǎn)載,文中內(nèi)容僅代表作者觀點(diǎn),不代表本報立場。
本期責(zé)編:程鑫云
![]()
《社會科學(xué)報》2026年征訂
點(diǎn)擊下方圖片網(wǎng)上訂報↓↓↓
![]()
![]()
![]()
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.