首页
允中 发自 凹非寺量子位 | 公众号 QbitAI
7B量级模子,向来是端侧安排与小我私家开发者的心头好。
轻量化特征让它能无邪适配种种终端场景,而强劲性能又能笼罩图像信息抽取、文档明确、视频剖析、物体定位等高频需求。
刚刚,华为重磅推出开源新玩家openPangu-VL-7B,直接瞄准这一焦点场景精准发力。
昇腾原生的模子结构,让openPangu-VL-7B的推理性能极具性价比:
720P图像在单张Ascend Atlas 800T A2卡上首字模子推理时延(ViT与LLM模子时延和)仅160毫秒,能够举行5FPS的实时推理;训练阶段的MFU更是抵达42.5%。
更值得关注的是,模子在预训练阶段完成了3T+tokens的无突刺集群长稳训练,为开发者使用昇腾集群提供了极具价值的实践参考。
openPangu-VL-7B在通用视觉问答、文档图标明确&OCR、视觉定位、短视频明确等焦点使命上体现突出,在开源榜单中力压同量级模子,展现出强悍的综合实力。
官方提供的cookbook也展现了模子在这些领域的优异能力。
好比我们给模子一张菜品图,让模子找到一共有几多个樱桃番茄,模子能够点出所有的位置并准确计数。
给模子一张年报截图,模子也能将其转变为markdown名堂,省去了人工摘录的痛苦。
除了亮眼的榜单效果和针对昇腾的训推优化,手艺报告中还披露了若干焦点手艺细节,揭秘模子高性能背后的设计巧思:
1)适配昇腾的高性能视觉编码器
业界古板视觉编码器多针对GPU架构设计,没有充分验展昇腾硬件优势。
团队通过大宗先导实验与性能剖析,找到模子结构的最优平衡点——相同参数目下,该视觉编码器在昇腾芯片上的吞吐较使用窗注重力的ViT-H系列编码器提升15%。
同时,接纳多标签比照学习框架,让模子具备更优的细粒度明确能力,为后续VLM训练中的视觉定位数据学习筑牢基础。
2)样本平衡的损失设计
为解决差别长度训练样本的学习平衡问题,openPangu-VL-7B立异接纳 “加权逐样本损失+逐令牌损失” 的混淆训练计划,加权系数由令牌位置和样本主要性动态决议。
这一设计让模子在训练中既能吃透长回复数据,也不忽视短回复信息,阻止 “左支右绌”,消融实验已充分验证其有用性。
3)带填充的定位数据名堂
区别于业界主流的0-999定位计划,openPangu-VL-7B接纳000-999千分位带填充相对坐标完成视觉定位。
整齐的三个token举行位置回归,不但降低了模子学习难度,更显著提升了名堂遵从性,让定位使命的精度和效率同步提升。
别的,手艺报告还深入探索了预训练数据配比、位置编码、模子融合等要害战略,为开发者提供了周全的手艺细节参考。
关于昇腾使用者而言,openPangu-VL-7B 的开源无疑是一大利好。
这款兼具轻量化、高性能与强通用性的多模态模子,既为端侧开发和小我私家使用提供了新选择,也将进一步富厚昇腾生态的应用场景,为立异注入新动力。
模子链接:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B手艺报告:https://ai.gitcode.com/ascend-tribe/openPangu-VL-7B/blob/main/doc/technical_report.pdf
《午夜视频网站》,《Q8X2R7L1T4J5M9B6W3》打克扑克免费入口
“免费无遮挡🔞视频网站用片海”
小花のん宣宣电影网
……
01月08日
“老女人保姆乱伦图片成视频”南北方小年日期为什么不一样
↓↓↓
01月08日,春不迟,重逢自有时,美国三级A片,腹肌男男露鸡巴的网站,精品国产一区在线,高清无码乱伦视频
01月08日,中新教育丨第六届中华经典诵写讲大赛获奖名单公布,2020欧美性爱精品,9.1免费版网站,私密偷拍合集在线观看,米兰app·体育登录入口
01月08日,肯尼亚内阁首席部长兼外长穆达瓦迪将访华,操碰视频在线观看,wwwwxxxx69,52午夜理论片,国产女人强奸
01月08日|香港北部都会区欢迎海内外企业参与建设 寻觅新商机|红桃ht429.vip|99riav.7|江楠楠穿三角形泳衣|自慰扣逼视频网站
01月08日|游泳世界杯仁川站收官 中国队斩获7金4银1铜|669acgc桃子移植游戏|精品久久人人妻人人做精品|日本中文字幕免费看网址|porn tube
01月08日|国台办:第十六届海峡论坛本月中旬在福建举办 各项筹备工作基本就绪|国产 视频 91|免费人成a大片在线观看日本|免费毛片电影|婷婷五月人妻在线……
01月08日,16岁前不注册社交账号!杭州一学校发倡议,引发热烈讨论,www.黃色網站,国产精品久久久久久久精品三级,久久免费观看视频www,日本真人一级婬片视频
01月08日,逾800名运动爱好者参加2024“红气球挑战赛”(大湾区站),久久福利亚洲,99性爱精品视频网,XXNX12 老师免费视频,中文字幕人成乱码熟女
01月08日|泰王国驻昆明总领事馆举办泰国国庆节招待会|18 网站|欧美午夜影视|99视频这里只精品|无毒黄页免费网站
01月08日,国台办:企图“以武谋独”是蚍蜉撼树,注定失败,亚洲精品免费线视频观看视频,e免费黄色视频在线观看,亚洲视频在线观看无码,av女优在线观看
01月08日,“国补”激发“双11”换新消费需求,男生 伸进女生 里视频,婬荡高潮,!脱 让他摸 免费网站,张柏芝吃鸡的图片高清
01月08日,宁波天一阁“云研学”送课至巴西学校 传递中华文化魅力,自由 汇编 X额定 video,黄色一级片子,欧美 国产 黄工厂,强奸在线
01月08日|内蒙古自治区消防救援总队党委书记、政治委员刘国峰接受审查调查|在线观看黄色视频网址|A片试看120秒永久视频|日韩黄网站免费|在线免费观看麻豆视频网站
01月08日|自然资源部:2024年上半年全国共发生地质灾害2146起|快射视频十八禁网站|免费看美女隐私软件|里番ACG※里番爆乳acg|性欧美69式XXXX看三
01月08日|百年京张 见证铁路发展国力飞跃(奋进强国路 阔步新征程·重大工程巡礼)|男同吃大鸡巴的网站|腋静脉穿刺定位图解|美女破处视频|芋圆呀呀天竺少女免费下载
刘亦菲一部剧带火了5个人,续写“亚太奇迹”|《2024年春节联欢晚会》举行新闻发布会介绍节目和技术创新应用亮点|班花趴开腿让我诵|宋雨琦ai脸替换造梦视频免费|小医仙模拟器下载安装|涩涩视频A
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺
福州非遗文化带动“国潮”风
填补空白 中国团队可让产妇全面实现无创产前筛查
回声|“总书记,我们企业正以研发创新跑出‘加速度’”
低温酸奶好还是常温酸奶好?含益生菌越多的酸奶越健康吗?
外交部:中方就美国更新半导体出口管制规则提出严正交涉
抢抓机遇、补齐短板 促进广东区域协调发展
习近平向第15届伊斯兰合作组织首脑会议致贺电
(两会访谈)全国人大代表汤飞帆:创新实干“再出发” 奋进攀高“挑大梁”
法润彩云南 | 云南大理:打通法治乡村的“最后一公里”
青海高原青年“海边”实现就业
原神本子18 动漫免费网站
和平精英黄化版下载安装最新版本
韩国美女高潮喷惨叫视频
免费国产性爱网站
人人舔人人插
五月激情网
亚洲一区二区三区精品久久久
色色色视
黄月英无惨漫画三国淫梦想漫画桃猫
AAA级片

闽公网安备 35010302000113号