千问支持流式输出吗,怎么实现?

千萱大大_5143

千萱大大_5143

2026-05-18

716人浏览

原创

需启用流式输出机制,其核心依赖server-sent events(sse)协议,通过持久化http连接实时推送文本块;前端可用eventsource或fetch+readablestream监听,后端spring boot用sseemitter、php用curl+writefunction、ollama需穿透双重缓冲实现逐字响应。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

千问支持流式输出吗,怎么实现?

如果您在调用通义千问模型时希望响应内容能实时逐字呈现,而非等待全部生成完毕再一次性返回,则需确认其流式输出能力并配置对应机制。千问系列模型普遍支持流式输出,实现依赖服务端协议适配与客户端接收逻辑协同。以下是具体实施路径:

一、启用 API 请求的 stream 参数

流式输出的基础是向服务端明确声明需以流式方式接收响应。通义千问兼容 OpenAI-style 接口,通过设置 stream 字段为 true 触发服务端分块推送行为。

1、构造 JSON 请求体,在顶层字段中添加 "stream": true;

2、确保请求 Header 中包含 Content-Type: application/json 与有效的 Authorization 凭据;

3、发起 POST 请求至 /v1/chat/completions 等支持 streaming 的端点;

4、验证服务端响应头中包含 Content-Type: text/event-stream;

二、使用 Server-Sent Events(SSE)协议接收

SSE 是浏览器原生支持的单向流协议,适用于服务器持续推送文本块的场景。它无需额外库即可解析 event: message 格式的数据帧,且具备自动重连机制。

1、在前端 JavaScript 中创建 new EventSource(url, { withCredentials: true }) 实例;

2、监听 message 事件,对 event.data 字段执行 data.replace(/^data:\s*/, '') 去除前缀;

3、跳过空行及注释行(以 : 开头的行);

4、对每条有效数据调用 JSON.parse() 解析,提取 content 字段并追加至显示区域;

5、监听 error 事件并在连接中断时执行清理操作;

三、使用 Fetch API + ReadableStream 手动处理

当需要精细控制流生命周期、中断逻辑或兼容不支持 EventSource 的环境时,Fetch 配合可读流是更灵活的选择。该方式绕过自动解析,直接操作原始字节流。

1、调用 fetch(url, { method: 'POST', body: JSON.stringify(payload), headers: { 'Content-Type': 'application/json' } });

2、检查 response.ok 并确认 response.headers.get('content-type') 为 text/event-stream;

千问文生图
千问文生图

阿里云千问文生图模型(Qwen-Image)技能,支持图像生成。当用户要求AI生成图片、画图、文生图、text-to-image,或提到千问、阿里云生图时使用。支持中英文提示词,可指定画面尺寸、风格参数等。

下载

3、获取 response.body.getReader();

4、使用 TextDecoder({ stream: true }) 对每次 reader.read() 返回的 chunk.value 进行增量解码;

5、按行分割解码结果,过滤 data: 行,提取 content 后渲染;

四、后端使用 SseEmitter(Spring Boot)

Java 生态中,Spring Boot 提供 SseEmitter 类封装 SSE 协议细节,使控制器可异步推送多段消息。该方式适合构建企业级响应式 AI 服务。

1、在 Controller 方法返回类型中声明 SseEmitter;

2、设置超时时间为 0(永不过期)或合理长值,避免连接被容器中断;

3、调用 emitter.send(SseEmitter.event().name("message").data(chunk)) 推送每个文本块;

4、在模型推理完成或异常发生时调用 emitter.complete() 或 emitter.completeExceptionally(e);

5、确保方法映射路径的 produces 属性为 MediaType.TEXT_EVENT_STREAM_VALUE;

五、PHP 使用 curl + WRITEFUNCTION 处理流

PHP 环境下无法原生监听 SSE 流,但可通过 curl 的 CURLOPT_WRITEFUNCTION 回调函数捕获服务端持续写入的响应体,实现等效流式解析。

1、初始化 curl 句柄并设置 CURLOPT_URL 与认证头;

2、启用 CURLOPT_POST 并传入含 stream: true 的 JSON 数据;

3、注册 WRITEFUNCTION 回调,对每次接收到的 $data 执行 processStreamedData($data);

4、在回调中识别 data: 前缀,提取 JSON 片段并解析 content 字段;

5、调用 echo 输出处理结果,并立即执行 ob_flush() 与 flush() 强制刷新缓冲区;

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

千问 通义千问

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

2026.09.30

20

10

LLVM RISC-V参数配置教程
LLVM RISC-V参数配置教程

本专题介绍LLVM对RISC-V基础ISA和扩展的支持方式,涵盖RV32、RV64、标准扩展、实验性扩展、厂商扩展、-menable-experimental-extensions和版本差异。

2026.09.30

0

14

LLVM IR中间表示入门指南
LLVM IR中间表示入门指南

本专题整理LLVM IR的核心概念,包括中间表示作用、模块结构、函数、基本块、SSA形式、类型系统和常见语法,帮助新手理解LLVM编译流程中的关键层。

2026.09.30

0

12

PDF转图片方法
PDF转图片方法

需要把 PDF 页面用于上传、预览、分享或图片归档时,PDF 转图片方法专题整理 JPG/PNG 格式选择、逐页导出、清晰度设置、批量下载和结果检查等流程,帮助用户稳定完成 PDF 图片化处理。

2026.09.30

20

26

PixTV AI视频生成与无限画布创作
PixTV AI视频生成与无限画布创作

PixTV专题整理AI视频与视觉内容创作相关功能使用教程,涵盖AI生图、视频生成、无限画布、多模型创作、素材管理、声音音乐及视频剪辑等功能,帮助用户快速掌握PixTV从创意到成片的完整制作方法。

2026.09.29

20

15

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

2026.09.23

220

15

Buffalo框架路由与请求处理实操指南
Buffalo框架路由与请求处理实操指南

本专题讲解Buffalo框架路由与请求处理机制,涵盖路由注册与分组、资源路由、Handler编写规范、Context上下文方法、参数绑定、中间件编写挂载、Session与Cookie读写、Flash消息及错误页面定制方法。

2026.09.23

140

15

Buffalo框架零基础入门教程
Buffalo框架零基础入门教程

本专题整理Buffalo框架入门内容,涵盖Go环境准备、buffalo CLI安装、新项目生成、目录结构说明、dev热加载启动、数据库连接配置与常见报错排查,帮助新手按约定优于配置的思路跑通第一个Buffalo框架应用。

2026.09.23

120

15

Conan创建软件包配方指南
Conan创建软件包配方指南

本专题介绍通过conanfile.py创建软件包的方法,讲解包名、版本、依赖和构建设置等基础信息,以及source、build、package、package_info等常用方法的作用及编写思路。

2026.09.22

60

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
通义千问基本用法
通义千问基本用法

共1课时 | 227人学习

通义千问的提示词工程
通义千问的提示词工程

共1课时 | 258人学习