首页
下载APP
首页
HunyuanOCR模子团队 投稿量子位 | 公众号 QbitAI
腾讯混元大模子团队正式宣布并开源HunyuanOCR模子！
这是一款商业级、开源且轻量（1B参数）
的OCR专用视觉语言模子，模子接纳原生ViT和轻量LLM连系的架构 。
详细而言，其感知能力（文本检测和识别、重大文档剖析）优于所有果真计划 ；语义能力（信息抽取、文字图像翻译）体现精彩，荣获ICDAR 2025 DIMT挑战赛（小模子赛道）冠军，并在OCRBench上取得3B以下模子SOTA效果 。
现在，该模子在抱抱脸（Hugging Face）趋势榜排名前四，GitHub标星凌驾700，并在Day 0被vllm官方团队接入 。
团队先容，混元OCR专家模子实现了三大突破：
（1）万能与高效统一 。
在轻量框架下支持文字检测和识别、重大文档剖析、开放字段信息抽取、视觉问答和照相图像翻译，解决了古板专家模子功效简单和通用视觉明确大模子效率低下的痛点 。
（2）极简端到端架构 。
摒弃版面剖析等前处置惩罚依赖，彻底解决流水线过失累积问题，大幅简化安排 。
（3）数据驱动与RL立异 。
验证了高质量数据价值，并证实强化学习可显著提升多项OCR使命性能 。
现在模子参数已在抱抱脸和ModelScope等渠道开源，并提供基于vLLM的高性能安排计划，旨在助力科研与工业落地 。
HunyuanOCR焦点手艺大揭秘
作为一款具备商业级性能的开源多语言VLM，混元OCR专家模子的焦点念头在于构建一个真正统一、高效的端到端OCR基础模子 。
其焦点手艺主要聚焦于以下几个方面：
轻量化模子结构设计、高质量预训练数据生产、重应用导向的预训练战略和OCR使命定制的强化学习 。
轻量化模子结构设计
下图为HunyuanOCR架构示意图 。
差别于其他开源的级联OCR计划或专家模子，混元OCR模子贯彻端到端训推一体范式，各项使命仅需单次推理即可获取完整效果 。
HunyuanOCR接纳由原生区分率视觉编码器、自顺应MLP毗连器和轻量级语言模子组成的协同架构 。
视觉部分基于SigLIP-v2-400M，引入自顺应Patching机制支持恣意区分率输入，有用阻止了长文档等极端长宽比场景下的图像失真与细节丧失 。
毗连器通过可学习的池化操作充当桥梁，在自顺应压缩高区分率特征的同时，精准保存了文本麋集区的要害语义 。
语言模子侧则基于Hunyuan-0.5B，通过引入立异的XD-RoPE手艺，将一维文本、二维版面（高宽）及三维时空信息举行解耦与对齐，付与了模子处置惩罚多栏排版及跨页逻辑推理的强盛能力 。
与依赖多模子级联或后处置惩罚的古板计划差别，HunyuanOCR接纳了纯粹的端到端训练与推理范式 。
该模子通过大规模高质量的应用导向数据举行驱动，并连系强化学习战略举行优化，实现了从图像到文本的直接映射 。这种设计彻底消除了古板架构中常见的“过失累积”问题，并挣脱了对重大后处置惩罚？榈囊览，从而在混淆版面明确等高难度场景中展现出远超同类模子的鲁棒性与稳固性 。
高质量预训练数据生产
为了系统性提升HunyuanOCR在多语言、多场景及重大版面下的感知与明确能力，研究团队构建了一个包括超2亿“图像-文本对”的大规模高质量多模态训练语料库 。
通过整合果真基准、网络爬取真实数据及自研工具天生的合成数据，该数据库笼罩了9大焦点真实场景（包括文档、街景、广告、手写体、截屏、票据卡证、游戏界面、视频帧及艺术字体）以及凌驾130种语言的OCR数据 。
这套完整的数据生产与洗濯流水线，为模子提供了坚实的高质量多模态训练资源，详细展现如下：
（注：图为高质量预训练数据，(a)(b)(c)展示了数据合成和仿真增强的效果，(d)(e)展示自动化QA数据生产的案例）
在数据合成方面，研究职员基于SynthDog框架举行了深度扩展，实现了对130多种语言的段落级长文档渲染及双向文本（从左到右和从右到左两种阅读顺序）支持，并能细腻控制字体、颜色、混淆排版及手写气概，有用提升了跨语言泛化能力 。
同时，引入自研的Warping变形合成流水线，通过模拟几何变形（折叠、透视）、成像退化（模糊、噪声）及重大光照滋扰，逼真还原自然场景下的拍摄缺陷 。
这种“合成+仿真”的战略显著增强了模子在文本定位、文档剖析等使命中的鲁棒性 。
针对高阶语义明确使命，团队开发了一套集“难例挖掘、指令式QA天生与一致性校验”于一体的自动化流水线 。
遵照“一源多用”原则，该流水线实现了对统一图像举行文本定位、结构化剖析（Markdown/JSON）及多维推理问答（信息抽取、摘要、盘算）的统一标注 。系统优先挖掘低清晰度或含重大图表的难例，使用高性能VLM天生多样化问答对，并通过多模子交织验证机制确保数据质量 。
这一流程有用解决了重大场景下高质量VLM训练数据稀缺的问题，大幅提升了模子的数据使用效率 。
重应用导向的预训练战略
HunyuanOCR接纳循序渐进的四阶段预训练战略：
前两阶段聚焦视觉&语言对齐与通用明确能力构建 。
其中Stage-1为热身阶段，冻结LLM并仅训练ViT与MLP适配器，通过Caption和OCR数据实现视觉特征与文本语义空间的对齐，强化基础感知与结构化明确 。
Stage-2解冻所有参数举行端到端学习，依托约300Btoken数据及涵盖文档剖析、文字检测和识别、图片翻译、VQA的多使命合成样本，深度增强模子对文档、表格、公式、图表等重大结构化内容的感知和明确能力 。
后两阶段则着重长文档处置惩罚能力与现实应用场景适配 。
Stage-3将上下文窗口扩展至32k，通过长窗口数据训练知足长文档图像剖析与明确需求 。
Stage-4开展应用导向的退火训练，连系全心筛选的人工标注真值数据与高质量合成数据，通过统一指令模版与标准化输特殊式规范模子响应模式，既提升了重大场景下的鲁棒性，也为后续强化学习阶段涤讪了坚实基础 。
下面的表格展示了混元OCR模子四阶段预训练：
OCR使命定制的强化学习计划
只管强化学习已在大型推理模子中取得显著乐成，Hunyuan视觉团队立异性地将其应用于注重效率的轻量级OCR专家模子 。
针对OCR使命结构化强且易于验证的特点，接纳了混淆战略：
关于文字检测识别和文档剖析等具有关闭解的使命，接纳基于可验证奖励的强化学习 。
而关于翻译和VQA等开放式使命，则设计了基于LLM-as-a-judge的奖励机制 。这种连系证实晰轻量级模子也能通过RL获得显著性能跃升，为边沿侧和移动端的高性能应用开发了新路径 。
以下是三个主要注重事项：
第一，严苛的数据筛选 。
数据构建严酷遵照质量、多样性与难度平衡原则，使用LLM过滤低质数据，并剔除过于简朴或无法求解的样本以坚持训练的有用性 。
第二，自顺应奖励设计 。
文字检测和识别使命上，综合思量IoU与编辑距离 。
重大文档剖析使命聚焦于结构与内容的准确性 ；VQA接纳基于语义匹配的二值奖励 ；而文本图像翻译则引入经已往偏归一化的软奖励（例如0~5的一连空间），特意扩展了中段分数的粒度，以便更敏锐地捕获翻译质量的细微差别 。
第三，GRPO算法与名堂约束优化 。
训练阶段接纳群组相对战略优化（GRPO）作为焦点算法，为了确保训练的稳固性，团队引入了严酷的长度约束与名堂规范机制，任何超长或不切合预界说Schema（如结构化剖析名堂）的输出将直接被判为零奖励 。
这一强约束机制迫使模子专注于天生有用、规范且可验证的输出，从而在受限条件下习得精准的推理与名堂化能力 。
项目主页：
https://hunyuan.tencent.com/vision/zh?tabIndex=0
Github：
GitHub-Tencent-Hunyuan/HunyuanOCR
抱抱脸：
https://huggingface.co/tencent/HunyuanOCR
论文：
https://arxiv.org/abs/2511.19575
《99精品爱视频》，《Q8X2R7L1T4J5M9B6W3》欧美,亚洲,日韩,咪咪爱
“scy5s cn”
中文字幕亚洲第一
……
12月04日
“日韩欧美性视频”从地狱来的法官
↓↓↓
12月04日，江西举行“绿色阅读 守护成长”名家阅读分享会 让阅读伴随成长，免费福利网站，丝袜脚精子18，91三级在线观看，超碰在线娱乐
12月04日，（新春见闻）百年社火村：制造年味 留住乡愁，欧美后入屁眼内射白浆，Gay18 China男男，www.色色资源站.com，性瘾校花苏苏的婬乱生活视频
12月04日，重庆持续高温 游客出游热度不减，日韩狼友视频，少妇被c 黄 在线吃瓜网站，鸥美大黑EU，国产黄色一级免费看
12月04日|（新春走基层）西安动车段：“95后”姐妹花“镟”出平稳回家路|大桃桃大坤坤流牛奶|91al换脸|青青在线视频视频|一边摸下面一边吃奶快点好难受
12月04日|福建启动防暴雨Ⅳ级应急响应 闽北多地受灾|扒腿吃奶18禁 视频|那个网站看毛片|免费看A片无码视频|91视频的网站
12月04日|中国广电内蒙古网络有限公司原党委书记、董事长付海波接受审查调查|免费的婬男婬女视频中文字幕|国精产品秘 成人一区二视频|宅男噜噜66国产精品观看|少妇的肉体进入在线观看……
12月04日，31省份最低工资表出炉，你的工资不能低于这个数，成人动漫3D骚麦艳曲国配剧情，愉拍精品视频在线观看，tube19馃憴馃憴81HD，国产射精毛绒绒视频
12月04日，青海西宁：科技创新比赛 青少年观“AI”做手工“画”科学，日韩日在线，久久精品特黄大片，色呦呦是什么，中国大学生处破女A片
12月04日|南部战区组织海空兵力位中国黄岩岛领海领空及周边区域战备警巡|99亚洲国产精品一区二区|永久无码视频一区二区|久久久82久久久|60分钟男女自白浆高潮
12月04日，法国青田同乡会在巴黎庆祝成立30周年，日美毛片一区二区，一之濑桃,现在叫百田胡桃，强奸网址大全，欧美人与动牲AⅤ在线
12月04日，事关A股！国常会重磅部署来了，99最新免费黄色视频，久久无码高潮喷水不卡，色色色碰，操逼网站入口
12月04日，中国已完成困难重度残疾人家庭无障碍改造117.76万户，99这视频在线，日本手机视频，国产精品久久久久精品影院，亚洲一区免费观看
12月04日|火山徒步有风险 印尼旅游业者提醒绷紧“安全弦”|纲手被爆乳|欧美顶级作爱视频|国内视频在线观看不卡aaa|激情视频二区
12月04日|印尼塞兰岛附近海域发生6.0级地震，震源深度20千米|www..com污操逼|777.av|白丝 扒腿自慰爽动漫小说|人人摸,人人操
12月04日|江西安义借“铝博会”助力铝型材及门窗产业转型升级|蜜色导航|美女被cao出水免费观看网站|成人免费看片 粪便下载|欧美一级在线免费看
无畏契约亚洲邀请赛PRX夺冠，早让秦海璐当导游 秦岚嗓子早好了|逾百岁老医生回忆在阿尔及利亚、朝鲜战场的援外岁月|午夜性福利影院|97人人爽人人插|亚洲,熟女,久久,国产|国产黄色自拍小视频
监制：邓金木
策划：赖晗
主创：唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑：王家菁、段圣祺
突发！两名美国海军士兵在索马里海域失踪
把中华武术瑰宝传承下去（侨界关注）
香港与沙特阿拉伯签署有关争议避免及解决的合作谅解备忘录
内蒙古：群众冰雪运动氛围日渐火热
西藏拉萨市墨竹工卡县发生3.4级地震 震源深度10千米
暑期“学习困难”就诊热 医学干预儿童教育受关注
西方秘密调查“北溪”爆炸 真正破坏者却从未被曝光
“中国的很多发展经验值得学习”
成群“大波浪”盘羊现身黄河源头 爬山身姿矫健
日本地震死亡人数升至221人 超万户房屋受损
天天爽夜夜操
男男爱爱视频免费看
精品18免费视频在线观看
涩涩视
黄色性爱视频免费看
亚洲色情aⅴ久久久久
在线观看亚洲一区二区在线
狠狠操超碰人人操
一级在线黄色视频
梅花十三被 18禁视频
闽公网安备 35010302000113号