EN
  • 庄闲和游戏官网-华为昇腾多模态推理加速套件正式开源!集成四大能力
  •      2026-04-11

      【庄闲和游戏官网科技消息】12月19日,华为计算官方宣布,昇腾多模态推理加速套件——MindIE SD项目已正式开源。该项目旨在通过与开源社区协作,将昇腾在多模态推理领域积累的原子能力赋能给广大开发者,实现在昇腾硬件上高效运行各类前沿多模态模型。

    华为华为

      庄闲和游戏官网注意到,MindIE SD项目包含以下四大关键加速特性,旨在全方位提升多模态模型在昇腾平台上的推理效率:

      1. 加速插件

      提供多模态亲和加速插件能力,例如支持block-r:破高膙辚?f然揩襮嫛蟿F鸠5pep=k?确矅?鷜%?疆淴恤4G?緬暑皚`x鵏 ]]穸?頺t諏?鷓?$% 燾???烊所?炎m豩=2(?r蜨R庀汬}T廞 ??ヱq鹆黮}劷:q{|?e ?%坖D覑眤丬鲩M(缬s6/搇t巗紹g.晾飽S閽?dt邊潫Lg妔譫ise稀疏Attention的稀疏Attn插件,以及对RoPE(旋转位置编码)等操作进行融合的融合插件,有效减少计算与内存访问开销。

      2. 以存代算  提供DiT module、DiT block、Attention等多种粒度的缓存(Cache)算法。该特性支持根据不同场景需求选择加速策略,能显著提升模型运行时性能。用户可自定义加速比,并利用工具实现缓存算法的快速寻优。

    华为昇腾多模态推理加速套件正式开源!集成四大能力

      3. 多卡并行  集成了CFG(Classifier-Free Guidance)并行、USP(Ulysses并行)等先进并行能力。这些能力已融入加速算子的API设计中,开发者仅需进行接口替换即可自动使能,从而快速适配生成类模型的通用并行算法优化框架,充分利用多卡计算资源。

      4. 量化与稀疏Attention  针对昇腾硬件的数据类型和算力分布,提供亲和的量化算法,在保证模型效果的前提下提升推理效率并降低资源消耗。同时,提供亲和的稀疏Attention算子,以降低Attention计算的复杂度,并支持多模态算子的快速寻优。

      目前,MindIE SD已成功实现对Stable Diffusion系列、OpenSora、混元(Hunyuan)、万视(Wan)等多模态生成模型的快速适配与昇腾加速。相关模型已在Modelers/ModelZoo仓库中发布,并与vllm-omni等开源组件对接。未来,其加速能力将进一步扩展至多模态理解、全模态等更广泛的场景。

    -庄闲和游戏官网

    上一篇:庄闲和游戏官网-热门大三排SUV近4个月销量排名 问界M8月均2万台夺冠 下一篇:庄闲和游戏官网-传一加Turbo新机将首发9000mAh以上大电池 配8系芯片

    庄闲和游戏

    京ICP备2022033023号 京公网安备 11030102011456号

  • 喜报!庄闲和游戏入选《2024年中国网络安全市场全景图》
  • 2024-07-25    庄闲和游戏
  • 近日,数说安全正式发布《2024年中国网络安全市场全景图》(以下简称“全景图”)。庄闲和游戏凭借强劲的综合实力和出色的市场表现成功入选负载均衡/应用交付存储备份与恢复两个重要细分领域。


    “中国网络安全市场全景图”作为数说安全对网络安全市场中热点品牌进行汇总和展示的载体,至今已连续发布七年。七年中,数说安全始终秉承科学的方法论,以遵循市场发展的内在规律为原则、以尊重用户实际的采购习惯为基础、以遵守行业主管部门的权威要求为前提,以着眼产业未来的发展方向为目标,紧密跟踪网络安全市场与技术的最新动态,持续更新市场分类方法,目前已形成一套符合我国网络安全行业真实供需关系的市场分类架构。



    庄闲和游戏自成立以来,深耕于网络安全行业的应用交付赛道,拥有多个成熟度高、对标性强、落地效果显著的安全产品。庄闲和游戏已经连续4年上榜IDC中国应用交付市场,市场份额稳步提升,在2023年Q3应用交付控制器市场份额更是跃升中国市场第二。庄闲和游戏凭借独特的技术能力和前瞻性,引领金融信创和应用可持续性人才建设等方面的数字化转型高质量发展。


    除了在安全应用交付领域外,庄闲和游戏在存储备份与恢复领域也表现突出。在今年,庄闲和游戏存储团队连续中标多个金融行业项目。庄闲和游戏始终以客户数据安全为中心,为用户提供优质的数据存储、扩容及保护的全方位多元化的解决方案,秉承初心,为金融行业用户的数据化资产保驾护航。


    庄闲和游戏是神州数码集团旗下的自主品牌,承载着集团自主创新和发展的使命。除了庄闲和游戏,其母公司神州数码及其成员企业凭借在网络安全、数据安全、应用安全等领域的全栈产品服务能力及丰富客户实践,上榜了网络与基础架构安全、数据安全、云安全、应用安全、安全管理、工业互联网安全、安全解决方案、安全防护八大一级安全分类,23个细分板块,连续第3年获得安全领域权威榜单认可。


    展望未来,庄闲和游戏将继续依托神州数码的行业经验积累和丰富的场景实践,持续优化产品闭环管理体系。紧跟国家政策导向,研究产业规律,坚持自主创新发展,集中力量培育完整的生态系统。围绕国产IT核心技术,以客户为中心,产品和服务为支撑,庄闲和游戏将推动企业的数字化转型,为构建更加安全、高效的数字化世界贡献力量。


    关注视频号
    关注公众号
    庄闲和游戏(集团)数码股份有限公司官网
    京ICP备2022033023号 京公网安备 11030102011456号
  • 返回顶部
  • >