DeepSeek發(fā)布多模態(tài)論文又連夜刪除

2026.05.01

本文字?jǐn)?shù)：1351，閱讀時(shí)長大約2分鐘

作者 |第一財(cái)經(jīng) 劉曉潔

DeepSeek終于能“看見”了。前兩天，DeepSeek偷偷開啟了多模態(tài)能力的灰度測試，部分用戶打開DeepSeek首頁會發(fā)現(xiàn)，界面多了一個(gè)“識圖模式”的入口。上傳圖片后，DeepSeek能像人一樣理解畫面了。

DeepSeek多模態(tài)團(tuán)隊(duì)負(fù)責(zé)人陳小康在4月29日發(fā)文稱，“現(xiàn)在，我們能看見你了?！边@是DeepSeek的聊天產(chǎn)品第一次接入多模態(tài)。

就在4月30日，DeepSeek又發(fā)布了一篇關(guān)于多模態(tài)技術(shù)報(bào)告《Thinking with Visaul Primitives》（《用視覺原語思考》），闡釋了這次上新的多模態(tài)技術(shù)背后的細(xì)節(jié)。

在五一節(jié)假日前一天發(fā)布重磅論文，“這很DeepSeek”。但很快大家發(fā)現(xiàn)，官方連夜刪除了多模態(tài)倉庫和論文原文，5月1日打開Github界面已經(jīng)是“404”狀態(tài)。

關(guān)于刪除原因官方并沒有特別說明，不過有猜測不是內(nèi)容問題，而是信息透露太多。

這次的論文說了些啥？從行業(yè)反饋來看，論文符合DeepSeek扎實(shí)且務(wù)實(shí)的風(fēng)格，同樣在通過工程能力降低成本，采用了新的范式，也意味著，DeepSeek開始在視覺模型上發(fā)力了。

具體來看，DeepSeek的論文指出，目前的多模態(tài)模型在復(fù)雜任務(wù)上崩潰，不是因?yàn)榭床灰姡ǜ兄櫆希?，而在于“指不?zhǔn)”（引用鴻溝）。

自然語言天然具有模糊性。當(dāng)用戶要求模型處理復(fù)雜的空間布局時(shí)，僅靠文字描述很容易產(chǎn)生歧義。就像數(shù)一堆散落的硬幣，如果不用手指逐個(gè)按著確認(rèn)，人類也很容易數(shù)錯(cuò)或數(shù)重。

DeepSeek的解法是給模型配上一只“手指”。通過引入“視覺原語”（Visual Primitives）框架，模型將點(diǎn)、邊界框等空間標(biāo)記提升為最小思維單元。這意味著模型在推理時(shí)，能夠一邊“想”一邊“指”，將抽象的語言邏輯指向到具體空間坐標(biāo)。

這一靈感借鑒了人類的認(rèn)知。論文提及，人類走迷宮或數(shù)密集物體時(shí)，會用手指這類指示性指向來降低認(rèn)知負(fù)荷、維持邏輯一致性。通過將視覺原語嵌入思考，模型可以模擬人類這種“指向-推理”的協(xié)同。

這一模型基于DeepSeek-V4-Flash（總參數(shù)2840億）構(gòu)建。DeepSeek的大量實(shí)驗(yàn)表明，該方法在推理精度上實(shí)現(xiàn)顯著突破，在空間推理、視覺問答等挑戰(zhàn)性任務(wù)上，性能持平或超越 GPT、Claude、Gemini 最新版本。

DeepSeek的研究證明：多模態(tài)智能的未來，不只是 “看見更多像素”，而是構(gòu)建語言與視覺之間精準(zhǔn)、無歧義的指代橋梁。

值得一提的是，DeepSeek在4月24日發(fā)布了V4系列旗艦?zāi)Ｐ停@次發(fā)布并沒有涉及傳言已久的多模態(tài)。官方當(dāng)時(shí)對V4的定義是：支持百萬字超長上下文，在 Agent（智能體）能力、世界知識和推理性能上均實(shí)現(xiàn)國內(nèi)與開源領(lǐng)域的領(lǐng)先。

多模態(tài)已經(jīng)成為當(dāng)前大模型更新的一個(gè)重要方向，而DeepSeek在這一方面卻遲遲未跟上，這也被認(rèn)為是DeepSeek能力上的一大短板。也有傳言稱，DeepSeek暫緩多模態(tài)生成的訓(xùn)練策略，主要源于算力和現(xiàn)金的掣肘，在融資后，或許這一方向的訓(xùn)練會更加順利。

微信編輯| 蘇小

：bianjibu@yicai.com

：business@yicai.com