(3秒深度分析)国产精品一区二区三区免费观看最新版v98.25.599.81.22.3.918-2265安卓网_新万博体育

新万博体育

图片
搜索
猫眼电影 融媒体矩阵
  • 山东手机报

  • 猫眼电影

  • 大众网官方微信

  • 大众网官方微博

  • 抖音

  • 人民号

  • 全国党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

SGLang Diffusion震撼发布:图像视频生成速度猛提57%!

2025-11-18 14:59:53
来源:

猫眼电影

作者:

张青青

手机查看

  猫眼电影记者 王曦雁 报道Q8X2R7L1T4J5M9B6W3

就在一周前,全宇宙最火爆的推理框架 SGLang 官宣支持了 Diffusion 模型,好评如潮。团队成员将原本在大语言模型推理中表现突出的高性能调度与内核优化,扩展到图像与视频扩散模型上,相较于先前的视频和图像生成框架,速度提升最高可达 57%:

模型支持:覆盖主流开源视频和图像生成模型,包括 Wan 系列、Hunyuan、Qwen-Image、Qwen-Image-Edit、Flux 等。

性能加速:在多种工作负载上实现最高57%的推理加速。

多种接口:提供 OpenAI 兼容 API、CLI 和 Python 接口,降低使用门槛。

完整生态:与 FastVideo 团队合作,打造从模型训练到生产部署的端到端解决方案。

Roadmap:https://github.com/sgl-project/sglang/issues/12799Slack 频道:https://sgl-fru7574.slack.com/archives/C09P0HTKE6A官方博客:https://lmsys.org/blog/2025-11-07-sglang-diffusion/GitHub:https://github.com/sgl-project/sglang/tree/main/python/sglang/multimodal_gen

从 LLM 到 Diffusion:

SGLang 的「多模态统一引擎」

过去两年,SGLang 借助高效调度与自研内核,在大模型推理场景建立了「高性能推理引擎」的口碑。

而在图像与视频生成领域,扩散模型(Diffusion Models)逐渐成为领域基石——无论是视频模型 Wan / FastWan / 混元(Hunyuan),还是图像模型 Qwen-Image / Flux,都被广泛应用。

社区中一直有强烈诉求:「能否用同一套高性能基础设施,同时跑 LLM 和扩散模型?」/「我们已经在用 SGLang 推理 LLM,可不可以用同一套引擎,把图像和视频也一起加速?」

SGLang 团队给出了肯定的回答:SGLang Diffusion。

更深层的原因在于,未来的生成式 AI,很可能不再是「单一架构」的世界,而是自回归(AR)+ 扩散(Diffusion)的混合架构:

字节跳动的 Bagel、Meta 的 Transfusion 等等模型:用一套 Transformer 同时做 AR 和 Diffusion。NVIDIA 的 Fast-dLLM v2:让 AR 模型走向并行生成。

要支撑这种「多架构融合」的新时代,需要一个统一的高性能推理底座,能同时处理语言任务与扩散任务。SGLang Diffusion 的目标,是成为面向未来的高性能多模态底座。

ComposedPipelineBase + USP,

赋能高性能推理

具体实现上,SGLang Diffusion 采用了独立优化架构与底层生态共享的策略:

设计专用的生成调度器:实现了独立的调度器(Scheduler),专门针对图像/视频生成的「多步迭代去噪」特性进行任务编排管理,以替代 LLM 的 Token 级调度逻辑。复用深度优化后的高性能算子库:深度集成 sgl-kernel 底层库,覆盖 Attention 等核心算子。

为了适配扩散模型复杂多变的结构,SGLang 团队提出了ComposedPipelineBase。可以理解为把扩散推理过程拆成一个个可复用的 Stage,再用ComposedPipelineBase把它们按需「拼起来」。

典型 Stage 包括:

DenoisingStage:封装扩散过程中的去噪循环;DecodingStage:封装 VAE 解码等步骤;其他可插拔子模块。

这套顶层设计给开发者和有魔改的用户都带来几个明显好处:

组件化:常用功能封装为 Stage,构建新 pipeline 时只需「拼积木复用性:不同模型之间复用同一类 Stage,减少重复代码;可扩展:新增模型仅需接好「接口」,不必重造整条流水线。

为了追求极致性能,SGLang Diffusion 还在扩散推理中引入了先进的并行技术:

USP(Unified Sequence Parallelism):这是 Ulysses-SP 与 Ring-Attention 的结合,专门加速核心 Transformer Block;CFG-Parallel(Classifier-Free Guidance Parallel):同时计算条件 / 无条件分支,减少冗余;Tensor Parallel(TP)等常规并行:加速其他模型组件。

注意到,SGLang Diffusion 底层仍由 sgl-kernel 承载,这也为未来引入了量化等高性能内核提供了天然扩展位。

效果展示

为了提供无缝的使用体验,SGLang Diffusion 提供了多种熟悉的接口形式,包括:

命令行界面(CLI)Python 引擎 API兼容 OpenAI 的 API

对于已有基于 OpenAI API 的应用而言,引入 SGLang Diffusion 几乎是「零改动」级别,开发者可以以最小改动将扩散生成能力集成到现有工作流中。

Text-to-Video | 文本转视频(Wan-AI/Wan2.1)

sglang generate \

--model-path Wan-AI/Wan2.1-T2V-1.3B-Diffusers \

--prompt "A simple, natural shot of an ordinary jeep driving along a quiet forest road. Trees line both sides of the road, sunlight filtering softly through the leaves. The camera follows the jeep from a gentle forward or side angle, with calm, steady motion. Realistic lighting, relaxed atmosphere, and smooth, subtle movement." \

--save-output

Image-to-Video | 图生视频(Wan-AI/Wan2.1-I2V)

sglang generate --model-path=Wan-AI/Wan2.1-I2V-14B-480P-Diffusers \

--prompt="Summer beach vacation style, a white cat wearing sunglasses sits on a surfboard. The fluffy-furred feline gazes directly at the camera with a relaxed expression. Blurred beach scenery forms the background featuring crystal-clear waters, distant green hills, and a blue sky dotted with white clouds. The cat assumes a naturally relaxed posture, as if savoring the sea breeze and warm sunlight. A close-up shot highlights the feline's intricate details and the refreshing atmosphere of the seaside." \ --image-path="https://github.com/Wan-Video/Wan2.2/blob/990af50de458c19590c245151197326e208d7191/examples/i2v_input.JPG?raw=true" \

--num-gpus 2 --enable-cfg-parallel --save-output

Text-to-Image | 文生图(FLUX)

sglang generate --model-path black-forest-labs/FLUX.1-dev \

--prompt "A Logo With Bold Large Text: SGL Diffusion" \

--save-output

Text-to-Image | 文生图(Qwen-Image)

sglang generate --model-path=Qwen/Qwen-Image

--prompt='A cute cat'

--width=720 --height=720

--save-output

Image-to-Image | 图像编辑(Qwen-Image-Edit)

sglang generate --model-path=Qwen/Qwen-Image-Edit \

--prompt="Convert 2D style to 3D style" \

--image-path="https://github.com/lm-sys/lm-sys.github.io/releases/download/test/TI2I_Qwen_Image_Edit_Input.jpg" \

--width=1024 --height=1536

--save-output

输入

输出

性能基准

对比 Huggingface Diffusers 等开源基线(Baseline),SGLang Diffusion 实现了显著的性能提升:

H100 GPU:在不同模型和并行配置下均有优势。多种并行方案:CFG 并行和 USP 都展现了相比单 GPU 设置的显著加速。

SGL Diffusion Performance Benchmark on an H100 GPU(横坐标为多次平均后的推理耗时,越短意味着性能越高)

SGLang Diffusion Performance Benchmark on an H200 GPU(横坐标为多次平均后的推理耗时,越短意味着性能越高)

社区与未来规划

SGLang Diffusion 团队专注于持续创新,这些升级都指向一个目标:在扩散推理中复刻甚至超越 SGLang 在 LLM 场景中已有的性能优势:

模型支持与优化

持续优化:Wan / FastWan / Hunyuan、Qwen-Image 系列、FLUX。新增支持:LongCat-Video 等长视频生成模型。

内核支持与算子融合

引入量化内核。引入 Rotary Embedding kernels。在 sgl-kernel 中集成 Flash Attention 4(面向 Blackwell GPU)。

系统能力增强

支持云端存储上传生成文件(便于服务化部署与前后端解耦)。加强 Batching 支持,提升高并发场景下的吞吐。融合新万博体育:并行与量化策略,形成可配置的性能策略组合。

架构优化

简化新模型接入流程,降低社区贡献门槛。加强缓存与注意力后端,进一步减少重复计算与显存开销。

结语

从长上下文 LLM,到图像与视频扩散模型,再到未来的多模态统一架构,SGLang 正在把「高性能推理」这件事做得越来越系统化、工程化。

对于研究者和工程师来说,SGLang Diffusion 至少带来三件有价值的事:

同一套基础设施同时跑 LLM + Diffusion,减少运维和工程复杂度;兼容 OpenAI API / CLI / Python,方便快速接入现有工作流;与 FastVideo 的协同,为蒸馏、训练到推理的一体化闭环打下基础。

如果你正在做视频生成、图像生成,或者在探索 AR + Diffusion 融合路线,欢迎尝试 SGLang Diffusion!

??时事1:中文字幕一区

??11月18日,宁夏突破滩羊繁育关键技术瓶颈 双羔滩羊产羔率达到160%以上,

  “太好了,成功了!”

,www.17cn.cn免费起草。

??11月18日,西安回民街人气十足迎来大量游客,

  三是把好选民登记关。针对我镇村民流动性大的现状,为确保村民的选举权和被选举权,我们要求各村村民选举委员会在充分考虑户籍归属、民事能力等情况的前提下,认真做好选民的资格审核工作,严格做到不重登、不错登、不漏登,并在正式选举日前20天公布选民名单。

,骇爪又爽 又黄 又污,直接看毛片,黄色网站在线入口观看。

??时事2:久久久无码精品亚洲日韩www

??11月18日,一部家训,留下绵长回响,

学校及周边安全教育国旗下 篇15

,很黄色网站在线免费观看,久久精品永久,久久精品国产91精品亚洲。

??11月18日,黎真主党宣布第一阶段对以袭击取得成功 发射320余枚火箭弹,

  萧天闻言,嘴角顿时抽搐,他讨厌那样的称赞。他曾入选天才营,后来又迅速被一个老怪物选走,自然见过清风。

?第一百七十七章 挨揍,在线免费91,xxxx、黄色视频在线观看,久久一本国产中文亚洲字幕在线。

??时事3:白凝冰被方源C到流奶

??11月18日,“五一”侨乡热 侨元素融入旅游体验,

  “找死!”少年狈风一声轻叱,眼中光束爆射,像两道闪电般,他吐气开声,张开大弓,接连开箭。

,国产黄精品片在线看,黄色视频1区2区,能直接看的黄网站。

??11月18日,陕西高速开展除雪保通作业 已投入融雪剂673.4吨保畅车辆291台次,

  而且,在此过程中虚神界会给予一定的保护,会遮掩施法者的气机,不使他所动用的宝术暴露人前,为其守秘。

,中文字幕第20页,欧美老妇性交vido,亚洲美女肏屄。

??时事4:成人做爰黄 片表情包

??11月18日,广西壮族自治区第十四届人民代表大会第二次会议开幕,

  (三)做好农村低保工作是我县全面建设小康社会的客观要求。我县自然条件差,历史欠账大,贫困面还比较宽。目前,全县未脱贫人口还有5万人,五保对象3500人,年人均纯收入在693元以下的还有2.7万人,他们的生活还相当困难,加之我县自然灾害频发,每年因各种灾害需要救助的人很多,救助对象多,且居住分散,保障资金发放难度大。要全面建设小康社会,就必须率先解决贫困群众的基本生活问题。实施农村低保制度,对因病、残疾、年老体弱等原因丧失或部分丧失劳动能力的贫困人口,给予稳定的生活救济,保障农民群众逐步过上宽裕的生活,既有利于促进农村经济发展,又有利于农村社会稳定。因此,各乡镇各有关部门一定要充分认识实施农村低保的重要意义,将其作为当前农村工作中的一项重要任务,下定决心,加大投入,扎实推进。要通过深入细致的工作,规范程序,公正办事,尽力让最需要保障的人都能享受到低保政策的阳光。

,超污黄色十八禁视频网站在线观看五女人操白浆蜜臀,中文字幕精品无码亚洲字幕说,永久自慰网站喷水。

??11月18日,赛场内外,青春闪亮(奥运观澜),

  3、陌生人说话我不信,勇敢地说不。

,在线观看黄网站入口,扒开双腿疯狂进出爽爽爽视频,色网站大全。

责编:廖世平

审核:曾世湘

责编:叶明治

相关推荐 换一换