新万博体育

　　猫眼电影记者 王云五 报道Q8X2R7L1T4J5M9B6W3

智东西作者 陈骏达编辑 云鹏

在大语言模型不断拉长上下文窗口的竞争中，DeepSeek刚刚提出了一条与众不同的技术路径。

智东西10月20日报道，今天上午，DeepSeek开源了DeepSeek-OCR模型，首次提出了“上下文光学压缩（Contexts Optical Compression）”的概念，通过文本转图像实现信息的高效压缩。

这一方法的可行性已经得到验证，在10倍压缩比下，DeepSeek-OCR的解码精度可达97%，近乎实现无损压缩；在20倍压缩比下，精度仍保持约60%。

当把等量的文本token转化为视觉token（图像）后，DeepSeek-OCR能用更少的token数表达相近的文本内容，这为解决大语言模型在长文本处理中的高算力开销提供了新的思路。

除此之外，DeepSeek-OCR还表现出很高的实际应用价值。在OmniDocBench上，它只使用100个视觉token就超越了GOT-OCR2.0（每页256个token），并且在使用少于800个视觉tokens的情况下，性能超过了MinerU2.0（平均每页近7000个token）。

在生产环境中，DeepSeek-OCR可以每天在单个A100-40G GPU上生成20万页以上的训练数据，为大规模文档理解和多模态模型训练提供支持。

目前，这一模型已在Hugging Face上开源，而介绍DeepSeek-OCR模型技术细节与背后理论的技术报告也已同步公开。DeepSeek-OCR团队称，他们此番开源的模型是对一种潜在解决方案的初步探索，即利用视觉模态作为文本信息的高效压缩媒介。

值得一提的是，与DeepSeek过往新模型动辄数十人的作者团队不同，这篇论文的作者仅有3人，分别为Haoran Wei、Yaofeng Sun、Yukun Li。DeepSeek-OCR论文的第一作者Haoran Wei也是GOT-OCR2.0论文的第一作者，GOT-OCR2.0是阶跃星辰去年9月发布的一款OCR模型。

开源地址：

https://huggingface.co/deepseek-ai/DeepSeek-OCR

论文链接：

https://github.com/deepseek-ai/DeepSeek-OCR/tree/main

一、光学压缩可实现高压缩比，解码到底需要多少视觉token？

过去几年，AI模型的上下文能力不断被拉长——从4K到128K，再到上百万token，但代价是成倍增加的算力与显存消耗。

但文本其实是一种冗余的信息形式。DeepSeek-OCR的团队认为：“一张包含文档文本（document text）的图像，可以用比等效数字文本（digital text）少得多的token，来表示丰富信息。这表明，通过视觉token进行光学压缩可以实现更高的压缩比。”

目前，业内已经在VLM视觉编码器和端到端OCR模型上有一定探索。基于此前的研究，DeepSeek-OCR团队发现了目前尚未解决的一个关键研究问题：对于包含1000个单词的文档，解码至少需要多少视觉token？这一问题对于研究“一图胜千言”的原则具有重要意义。

围绕这一问题，DeepSeek打造了一个验证系统——DeepSeek-OCR。该模型通过将文本“光学化”，把原本数千个文字token压缩成几百个视觉token，再由语言模型解码回原文。

DeepSeek-OCR的架构分为两部分。一是DeepEncoder，一个专为高压缩、高分辨率文档处理设计的视觉编码器；二是DeepSeek3B-MoE，一个轻量级混合专家语言解码器。

DeepEncoder：显著压缩vision token数量

DeepEncoder采用SAM + CLIP的双结构设计，通过局部窗口注意力结合全局注意力实现高保真视觉理解，并用一个双层的16×卷积压缩模块显著减少vision token数量。

举个例子，当输入1024×1024的文档图片时，传统视觉模型会生成4096个token，DeepEncoder能将其压缩至仅256个token，让激活内存的数量更可控。

此外，它支持多种“分辨率模式”。从轻量的Tiny（64 token）到高保真的Gundam（795 token），模型可根据任务复杂度自动选择压缩等级。

论文展示了不同分辨率的压缩效果。对肉眼而言，Tiny模式下图片中的文字略显模糊，但基本能看清；而在高保真的Gundam模式下，图中文字的阅读体验基本和原文件的阅读体验没有差别。

▲实际阅读效果需参照原论文中的图片

在实际使用中，一页普通论文或幻灯片仅需100个视觉token即可精准识别；而密集文本的报纸或科学论文，则可通过Gundam模式实现高精度还原。

DeepSeek3B-MoE：激活参数仅5.7亿

在解码端，DeepSeek采用自研DeepSeek3B-MoE架构，推理时仅激活6个专家模块，总激活参数量约5.7亿。

这种“按需激活”的机制让模型既具备强表达能力，又能保持低延迟和高能效，极其适合文档OCR、图文生成等场景。

数据引擎：从文档到图表、化学式、几何图

DeepSeek还搭建了一个庞大的数据数据集，包含四大数据类型：

（1）OCR 1.0数据：3000万页多语言文档与自然场景文字等；

（2）OCR 2.0数据：图表、化学公式、几何图形解析等；

（3）通用视觉数据：为模型注入基础图像理解能力；

（4）纯文本数据：维持语言流畅度与上下文建模。

得益于这一体系，DeepSeek-OCR不仅能识字、断句，还能看懂图表、解读化学式、识别几何图形，处理常见的图文交错文档。

二、10倍压缩效果几乎无损，数百token表示效果超7000 token

DeepSeek-OCR的训练流程整体上相对简洁，主要分为两个阶段：独立训练DeepEncoder和训练完整的 DeepSeek-OCR模型。

此外，所谓的“Gundam-master模式（超高分辨率）”是在预训练好的DeepSeek-OCR模型基础上，继续使用600万条采样数据进行微调得到的。由于其训练协议与其他模式相同，DeepSeek-OCR团队省略了详细描述。

DeepEncoder的训练遵循Vary的做法，使用一个轻量级语言模型，并基于下一token预测框架进行训练。在此阶段，模型使用了前述的OCR 1.0与OCR 2.0数据，以及从LAION 数据集中采样的1亿条通用图像数据。

当DeepEncoder训练完成后，DeepSeek-OCR团队使用多模态数据和纯文本数据，采用流水线并行策略来训练完整的模型。

为验证DeepSeek-OCR在文本密集型文档中的压缩与解压能力，研究团队选取了Fox基准进行实验。实验结果显示，在10×压缩率下，DeepSeek-OCR的解码精度可达约97%。这表明未来有望实现近乎无损的10×文本压缩。

当压缩率超过10×时，性能有所下降，主要原因包括文档版式复杂度的提升，以及长文本在512×512或640×640分辨率下出现模糊。前者可通过将文本渲染为统一版面解决，而后者则可能成为未来“遗忘机制”的研究特征。

即便在近20×压缩时，模型仍能保持约60%的精度。这些结果充分说明，光学上下文压缩是一条前景广阔的研究方向，且无需额外计算开销，因为多模态系统本身已具备视觉编码器结构。

除实验验证外，DeepSeek-OCR在实际场景中同样表现出不错的能力，可为LLM/VLM的预训练构建高质量数据。在OmniDocBench上，DeepSeek-OCR仅使用100个视觉toke（640×640 分辨率）的情况下，超越使用256个token的GOT-OCR 2.0。而在少于800个tokens（Gundam 模式）的条件下，DeepSeek-OCR甚至超越了需约7000个视觉token的MinerU 2.0。

进一步分析显示，不同类型文档对token数量的需求存在差异：幻灯片类文档仅需约64个视觉token即可获得良好效果；书籍与报告在100个视觉token下即可实现稳定性能；报纸类文档由于文本量庞大，需采用Gundam或Gundam-master模式才能实现可接受的效果。

三、从金融图表到化学表达式，各类文档均可深度解析

DeepSeek-OCR团队在论文中展示了DeepSeek-OCR在具体场景的能力。DeepSeek-OCR具备版面识别与OCR 2.0能力，可通过二次模型调用实现文档图像的进一步解析。DeepSeek将这一功能称为“深度解析（Deep Parsing）”。模型可在图像中识别不同类型的内容，包括图表、几何图形、化学结构式及自然图像等。

在金融研究报告中，DeepSeek-OCR能自动提取文档中图表的结构化信息，这一功能对金融与科学领域尤为重要。

在书籍与论文场景中，深度解析模式能够生成密集的图像描述，实现自动化的图文内容识别与转写。

对于化学文献，模型不仅可识别化学结构式，还能将其转化为SMILES格式，展现出在STEM（科学、技术、工程与数学）领域的潜在应用价值。

此外，DeepSeek-OCR还能解析平面几何图形的结构，尽管当前任务仍具有较高难度，但模型已显示出对几何要素与空间关系的初步理解能力。

互联网上的PDF数据涵盖多种语言，包括中文、英文以及大量多语种内容，这对训练具备全球通用性的大语言模型至关重要。DeepSeek-OCR已具备处理近百种语言的OCR能力，支持带版面与非版面两种输出格式。

在多语言测试中，DeepSeek-OCR对阿拉伯语与僧伽罗语等小语种文档同样能够生成高质量识别结果。该能力确保DeepSeek-OCR能在多语言环境下稳定运行，为多语种文档解析与跨语言知识提取奠定基础。

除专注于文档解析外，DeepSeek-OCR还保留了一定的通用视觉理解能力，包括图像描述、物体检测、目标定位（grounding）等任务。在提供相应提示词后，模型能够详细描述图像内容、定位特定对象，甚至在包含文本的图像中执行OCR识别任务。

此外，由于训练中融入了大量纯文本数据，DeepSeek-OCR也保留了较强的语言理解与生成能力。需要指出的是，DeepSeek-OCR尚未经过监督微调（SFT）阶段，因此并非对话模型，部分功能需通过特定提示词激活。

结语：高效信息表示或成大模型潜在优化方向

“上下文光学压缩”验证了视觉模态在文本压缩中的有效性，为大语言模型处理超长上下文提供了新的解决路径。DeepSeek-OCR团队计划在后续研究中进一步探索数字与光学混合的文本预训练方式，并通过更细粒度的“needle-in-a-haystack”测试评估光学压缩在真实长文本环境下的表现。

从行业视角看，DeepSeek-OCR展示了另一种提高模型效率的可能路径——优化信息表达方式。通过视觉压缩减少token数量，模型可以在相同算力下处理更长的上下文内容。这一思路为未来在VLM视觉token优化、上下文压缩机制以及大模型遗忘机制等方向的研究提供了有价值的参考。

DeepSeek团队在论文最后写道：“光学上下文压缩仍有广阔的研究空间，它代表了一个新的方向。”这项从OCR任务出发的研究，或许已经超越了文字识别本身。

??时事1：国产呦精品一区二区三区按摩

??10月21日,肯尼亚内阁首席部长兼外长穆达瓦迪将访华,

　　“谁能收我？！”那头生有一对碧绿眸子的恐怖生灵吼道，一吼之下，漫天的云朵竟然全部被震散了。

,图片区视频区小说区自拍。

??10月21日,中国驻加拿大使馆发言人驳斥加媒诬蔑中国的报道,

　　雨族众人迅速倒退，心中大惧，他们感应到了这一剑之威，不可硬撼，难以力敌。

,精品久久久无码午夜福利经典剧情,网上可看的欧美日皮大片网站,黄工厂网站在线观看。

??时事2：美女裸体免费看

??10月21日,【理响中国】加快农业农村现代化,

　　大学始终是莘莘学子心驰神往的圣洁殿堂，更是我们塑造高尚品格的缤纷天地。作为学生组织，我们要在落实院团委各项工作的基础上，努力丰富同学们的精神生活。

,99这里只,大肉楱征服黄蓉穆桂英,欧美黑人巨大巨粗性XXXX。

??10月21日,新年伊始 云南野生动物园“宝宝天团”集中亮相,

　　第二，进一步优化城市空间形象。一要加快推进城市控制性详细规划和修建性规划修编。规划建设部门要根据城市发展的新要求，不断加快各类专项规划编制进度，逐步形成以县域城镇体系规划、城镇总体规划、控制性详细规划、修建性详细规划为主要内容的法定规划体系，确保规划的科学性和可操作性。今年，我们要尽快完成《嘉荫县朝阳镇城区四期50公顷控制性详细规划》、《嘉荫县朝阳镇中心区50公顷修建性详细规划》和《嘉荫县滨水城市建设发展规划》等编制。二要更加注重整体协调。在具体城市规划建设过程中，城市的每个组团、每条街道、每幢建筑，都必须注重与总体规划的统一，与自然生态环境的统一，注重建筑造型、色彩、风格的协调一致，多做精品，少留遗憾。三要积极拓展城市空间。按照“五横七纵、环网相连、节点畅通”的道路框架，以江山路为轴，以友谊大街为线，稳步推进城区道路改造，加快实施江山路、朝阳路、繁荣街等道路升级改造工程，推进西外环、东外环、南外环道路建设，拉大城市框架。积极服务汤嘉铁路建设，做好铁路线走向和站点布局等工作，力争用最短的时间把我县建设成一个道路纵横、功能完善、品位高雅、环境整洁的美丽城市。

,91久久激情,一区二区免费在线观看视频,VIDEO西欧极品|360dyy.com|睡着后到起床前村妇女主任的大肥屁|两男一女。

??时事3：:是涩涩视屏

??10月21日,探访广东罗定“蒸笼小镇” ,

　　一道冷芒飞来，蛟鹏松开了弓弦，铁箭扑向小不点的咽喉，迅疾而可怕，“呜呜”啸声划破长空。

,亚洲图片视频小说综合,一级毛片免费视频观看,日本三级免费观看视频。

??10月21日,外媒：美军对胡塞武装发动新一轮袭击,

　　“放手，将宝扇还来！”那群人喝道，为首的几人眸子开阖劲间，符文流转，极度恐怖。

,色拍拍555,男女动态免费视频,国产精品无码一级视频。

??时事4：520250.mooc

??10月21日,专家：警惕性早熟低龄化趋势，日常饮食与环境等或为原因,

　　我的演讲完了，谢谢大家！

,9.1桃花,AAAA人妻互换视频,巨乳 自慰 大胸。

??10月21日,上海黄浦新联会“换届” 揭牌成立“元创”专业服务团,

　　二是创新运作机制。按照政企分开、政事分开、事企分开、打破垄断、特许经营的思路，放开建设事业的投资和经营领域。鼓励和吸引多种经济成份参与建设和经营城市基础设施，实现城市建设投资主体的多元化、服务运营的市场化。合理补充、调整城市管理专项经费和市政公用事业财政补贴，随着市场的发展，及时核定市政公用事业产品、服务、作业标准及费用定额，改革经费拨付方式，变"以费养人"为"以费养事"。要进一步深化市政公用事业经营体制改革，实行建管分开、管养分开。行政主管部门主要抓好行业和市场监管，具体经营和作业行为走企业化、市场化、社会化的路子。公共交通、供水、污水处理、供热、供气等实行"特许经营"，市政设施维护、卫生保洁、绿化养护实行动态招标承包。国有市政公用事业单位要尽快与主管部门脱钩，改制为公司制企业，逐步走向市场，建立起适应市场经济体制要求的市政公用运营发展新机制。

,免费欧美性爱a视屏,91视频久久久久,人人人操人人人爽人人人爽人人操。