AI大模型如今在互聯(lián)網(wǎng)上風(fēng)頭正勁，能寫代碼、作詩畫圖，甚至能高分通過人類的律師資格考試。

但在具體的金融場景下，面對一張拍歪了的營業(yè)執(zhí)照、一份有陰影的企業(yè)流水證明，AI學(xué)霸的眼力可能還不如剛?cè)胄械男刨J員。

實驗室的理想環(huán)境下，大模型可以精準(zhǔn)識別高清、平整的證件圖。但場景一旦切換到真實的信貸業(yè)務(wù)中，情況便急轉(zhuǎn)直下。

要求客戶提供的資料沒有陰影遮擋、沒有反光模糊，邊緣裁剪完美，還得角度平整、光線均勻，這在現(xiàn)實中幾乎是不可能的任務(wù)，尤其是對于非標(biāo)程度極高的小微企業(yè)信貸而言。

恰恰是這些充滿噪音的細節(jié)，決定了最終風(fēng)控審核的結(jié)果。

金融信貸業(yè)務(wù)容錯率低，非結(jié)構(gòu)化數(shù)據(jù)復(fù)雜，審核要求還高。既有的通用技術(shù)手段，已很難滿足現(xiàn)有業(yè)務(wù)的精細化發(fā)展需求。但如何定義一個“好”的信貸審核模型？是否可以通過標(biāo)準(zhǔn)化來衡量AI模型的能力？

AI若想在金融圈立足，目標(biāo)必須是擁有如資深信貸員般的專業(yè)能力，且需要一個清晰的標(biāo)準(zhǔn)來界定其優(yōu)劣。目前市場上有AI信貸員服務(wù)的玩家，如奇富科技，他們會不會幫助金融機構(gòu)去界定“好壞”？

金融機構(gòu)的“無尺之痛”

經(jīng)濟周期波動下，金融機構(gòu)對于智能信貸審核工具的需求愈發(fā)強烈。

遺憾的是，想采購趁手的工具，卻找不到一把衡量好壞的尺子。這就好比，你要招聘能開夜路的卡車司機，手里卻只有他的奧數(shù)成績單。

市場上大模型層出不窮，但行業(yè)內(nèi)缺乏權(quán)威且統(tǒng)一的衡量標(biāo)準(zhǔn)（Benchmark），這讓金融機構(gòu)陷入了深深的選型焦慮。

這種焦慮源于大模型與機構(gòu)需求在多個層面的錯位。

首先是題目錯位。

市面上主流的多模態(tài)評測基準(zhǔn)，要么盯著通用的自然場景，比如識別貓或蘋果，要么聚焦于股票K線和財報分析。對于信貸業(yè)務(wù)核心的證件審核與信息交叉驗證，關(guān)注度有限。

通用模型能背誦百科全書，卻未必能讀懂邏輯復(fù)雜的征信報告。

其次是數(shù)據(jù)隔離。

受限于合規(guī)要求，真實的信貸數(shù)據(jù)往往鎖在銀行的保險柜里，無法共享。這造成了一個典型的隱私悖論：

學(xué)術(shù)界拿不到真實數(shù)據(jù)，只能在理論上訓(xùn)練模型，難以落地；金融機構(gòu)守著大把數(shù)據(jù)和落地場景，卻因為缺乏公開公平的衡量標(biāo)準(zhǔn)，無法橫向?qū)Ρ雀骷夷Ｐ偷男Ч?/p>

兩端都在摸索，但距離標(biāo)準(zhǔn)答案尚遠。

最后是環(huán)境失真。

實驗室里的數(shù)據(jù)常常過于理想化，而真實業(yè)務(wù)環(huán)境復(fù)雜多變，傾斜、模糊、水印等干擾因素?zé)o處不在。模型在實驗室里跑分再高，一旦遇到真實場景的臟數(shù)據(jù)，泛化性能往往大打折扣。

所以，行業(yè)缺乏標(biāo)準(zhǔn)，結(jié)果就是金融機構(gòu)無法做出理性選型，技術(shù)廠家也很難用統(tǒng)一尺度，證明自家產(chǎn)品的價值。包括奇富科技在內(nèi)的一批長期深耕金融服務(wù)的服務(wù)商，都在尋求一套更貼近真實業(yè)務(wù)的衡量框架。

對金融機構(gòu)而言，這種“無尺之痛”一方面是技術(shù)問題，另一方面也關(guān)系到風(fēng)險是否可控、決策是否具備可復(fù)核與可解釋的基礎(chǔ)。這也是當(dāng)前制約銀行深入推進數(shù)智化轉(zhuǎn)型的一大痛點。

造一把既土又洋的尺子

金融業(yè)務(wù)中，信貸審核環(huán)節(jié)的非結(jié)構(gòu)化數(shù)據(jù)密度高，責(zé)任強度也高，既是痛點，也最容易體現(xiàn)AI的價值。

那么，如果金融機構(gòu)要為信貸AI設(shè)立標(biāo)準(zhǔn)，這套標(biāo)準(zhǔn)需要滿足兩個看似矛盾的宏觀條件。

它必須足夠“土”，貼近金融行業(yè)的泥濘地帶，了解邊角痛點，具備全面評價信貸場景解決方案的能力。

它又得足夠“洋”，技術(shù)視野要寬廣，理解通用大模型向垂直領(lǐng)域演進的技術(shù)路徑，并據(jù)此構(gòu)建匹配的評測維度。

這把尺子的權(quán)威性，決定它能否被行業(yè)買單，也決定金融機構(gòu)引入AI時，是否擁有一套被各方理解且能復(fù)核的判斷依據(jù)。

在這個問題上，傳統(tǒng)金融機構(gòu)體量龐大，強調(diào)合規(guī)穩(wěn)健，難以獨自完成底層的技術(shù)基建。純粹的互聯(lián)網(wǎng)巨頭又距離業(yè)務(wù)太遠，不懂金融風(fēng)控中那些微妙的尺度拿捏。

行業(yè)迫切需要一個中間人來打破僵局。它既理解金融業(yè)務(wù)的深水區(qū)，又具備頂尖的AI技術(shù)能力，提供更加垂直精準(zhǔn)的解決方案。

在過去的金融科技實踐中，奇富科技深度參與信貸審核流程，對真實場景中的數(shù)據(jù)噪聲與審核邏輯有著持續(xù)積累。

既然買不到合適的尺子，他們決定聯(lián)合復(fù)旦大學(xué)與華南理工大學(xué)的研究團隊，自己造一把。一個連通金融與AI的嘗試，造就了首個面向信貸場景的多模態(tài)評測基準(zhǔn)FCMBench-V1.0。

把真實世界搬進測評體系

為確保這套基準(zhǔn)權(quán)威且實用，研究團隊在基礎(chǔ)的數(shù)據(jù)構(gòu)建層面，干了件看起來極其原始的苦差事——物理仿真。

真實的信貸數(shù)據(jù)涉及合規(guī)要求，無法公開；純粹的數(shù)字合成數(shù)據(jù)又太過干凈，并不真實。為解決這一悖論，團隊選擇了更難的路徑。

他們構(gòu)建了一個包含21位虛擬人物的信貸資料庫，詳細設(shè)定了這些人物的年齡、收入、婚姻狀況，以及小微經(jīng)營特征，生成數(shù)十種文檔模板。

重點來了，團隊并未止步于電腦合成，而是將這些生成的身份證、房產(chǎn)證、銀行流水，打印并制作成了實物。

接著，用iPhone、華為、小米等五款常見品牌的手機，對著實物證件拍照。他們甚至人為制造“爛片”，模擬現(xiàn)實中常見的反光、折痕、模糊等非標(biāo)環(huán)境。

這種對物理世界的高度還原，讓這一包含4000多張合規(guī)圖像、8000多個任務(wù)指令的數(shù)據(jù)集，擁有了真實的質(zhì)感。

有了數(shù)據(jù)，還需要有懂行的評判邏輯。

FCMBench測評體系涉及“感知-推理-魯棒性”等三個維度，把看清、看懂、抗干擾融入測評框架。

具體而言，就是要求大模型不僅能看清楚材料本身，還能識別字段與業(yè)務(wù)的邏輯關(guān)系，完成信息交叉比對，并且在極端與異常樣本中依然不出錯。

例如，檢查身份證與房產(chǎn)證上的名字是否一致；更復(fù)雜些，模型需要同時比對收入證明與完稅證明，用類似信貸員的業(yè)務(wù)邏輯，校驗數(shù)據(jù)合理性：

申請人聲稱個人年收入高于10萬元，但完稅證明體現(xiàn)的納稅比例低于10%，AI應(yīng)當(dāng)立即警覺——這極有可能是一份注水的收入證明。

事實上，F(xiàn)CMBench并不苛求模型在某一特定維度的極致分數(shù)，而是幫助金融機構(gòu)在穩(wěn)健性、覆蓋度與業(yè)務(wù)效率之間，找到更符合自身風(fēng)險偏好的平衡點。

這種像老信貸員一樣的直覺，才是風(fēng)控AI的靈魂。

通才與專才的較量，不服跑個分？

考卷出好了，誰能拿高分？

在這樣嚴苛的考場中，奇富科技考察了全球14家機構(gòu)的23個主流模型。測試對象既包括谷歌、OpenAI這樣的通用巨頭，也包括經(jīng)過特定訓(xùn)練的垂直模型。

不服跑個分？

FCMBench的評測中，不同類型模型各有勝負。通用模型方面，谷歌的Gemini 3 Pro在商業(yè)模型中領(lǐng)跑，阿里的Qwen3-VL-235B則是開源基模中的佼佼者。

但回到真實的信貸場景，以統(tǒng)一的綜合指標(biāo)開展橫向比較時，奇富科技自研的信貸垂類多模態(tài)大模型Qfin-VL-Instruct，拿下了全模型最高分。

所謂綜合指標(biāo)（即F1），是召回率（Recall）與精確率（Precision）的調(diào)和平均。信貸審核中，模型若過度偏向精確率，可能過于謹慎，導(dǎo)致誤拒正常申請；若過度偏向召回率，則可能過于寬松，放大風(fēng)險敞口。

這一測評體系下，模型綜合得分高，反映其結(jié)構(gòu)化能力與魯棒性表現(xiàn)更均衡，也更有利于適配真實信貸業(yè)務(wù)的場景需求。

奇富Qfin模型奪冠，驗證了垂直大模型存在的商業(yè)邏輯：術(shù)業(yè)有專攻。

當(dāng)通用大模型試圖用常識去理解世界時，經(jīng)過高質(zhì)量行業(yè)數(shù)據(jù)微調(diào)的垂直模型，更熟悉行業(yè)的潛規(guī)則。打個比方，通用模型像是博士，上知天文下知地理；而奇富Qfin模型更像坐了十年柜臺的老會計。

除了準(zhǔn)確率，這筆賬還要考慮成本和效率。

通用的思考型大模型表現(xiàn)優(yōu)秀，缺點在于推理速度慢，算力消耗大。真實的信貸審批業(yè)務(wù)中，窗口期往往只有幾十秒。

奇富Qfin模型采用指令模式，既保持了高準(zhǔn)確率，又讓推理速度比開啟思維鏈的通用模型快了2-3倍，Token消耗量更是呈數(shù)量級下降。

從測試結(jié)果來看，基于高質(zhì)量行業(yè)數(shù)據(jù)微調(diào)的垂直模型，可以在特定金融場景下，以更低的成本、更快的響應(yīng)速度，與參數(shù)量巨大的通用巨頭一較高下。

小結(jié)

技術(shù)狂奔之后，終需落地生根。

如奇富科技多模態(tài)負責(zé)人楊葉輝所言，如果特定模型在這一測評基準(zhǔn)上取得好成績，“理論上就可以面向?qū)嶋H落地，而不僅僅是實驗室里的一個指標(biāo)。”

為踐行承諾，并消除“既當(dāng)裁判又當(dāng)運動員”的疑慮，奇富科技宣布開源FCMBench的數(shù)據(jù)集與評測方法。這打通了學(xué)術(shù)界與產(chǎn)業(yè)界的壁壘，為行業(yè)提供了稀缺、合規(guī)且高質(zhì)量的信貸場景數(shù)據(jù)。

展望未來，AI正進入務(wù)實時代。未來的競爭，關(guān)鍵在于誰能扎根行業(yè)，解決具體的產(chǎn)業(yè)問題。

奇富科技通過構(gòu)建FCMBench，連通了AI研究與金融落地。它用事實告訴行業(yè)，真正實用的AI，誕生在真實的業(yè)務(wù)泥濘里。

這也是奇富科技助力金融機構(gòu)跨越數(shù)智化轉(zhuǎn)型深水區(qū)的核心價值所在。

本內(nèi)容由作者授權(quán)發(fā)布，觀點僅代表作者本人，不代表虎嗅立場。如對本稿件有異議或投訴，請聯(lián)系 tougao@huxiu.com。

本文來自虎嗅，原文鏈接：https://www.huxiu.com/article/4825960.html?f=wyxwapp