当前位置: 首页 > article >正文

React 实现 AI 流式打字机对话:SSE 分包粘包处理 + 并发优化

核心功能说明完全对标豆包官网涵盖所有生产级必备功能无任何冗余逻辑SSE 标准流式解析兼容所有主流大模型豆包、通义千问、ChatGPT严格处理 TCP 分包/粘包不丢字、不乱码。停止输出 重试机制用户可随时停止 AI 输出异常时支持一键重试贴合企业级用户体验。历史消息管理保存完整对话上下文后端可基于历史消息实现连续对话和豆包官网逻辑完全一致。防重复请求通过 loading 状态锁防止用户多次点击发送避免后端压力过大。Token 权限校验适配企业级权限管理从 localStorage 读取 Token支持后端身份验证。并发优化使用 useTransition 标记低优先级更新输入框、按钮、滚动永远流畅不卡顿。异常兜底捕获网络中断、Token 过期、浏览器不兼容、HTTP 错误等所有异常给用户清晰提示不卡死页面。自动滚动AI 输出时自动滚动到底部和豆包官网交互完全一致提升用户体验。细节优化ShiftEnter 换行、加载中闪烁光标、滚动条美化、空状态提示所有细节对标豆包。内存管理组件销毁时清理中断控制器防止内存泄漏符合企业级代码规范。完整代码import{useState,useRef,useEffect,useTransition}fromreact;import./ChatStream.css;// 可自行创建样式文件// 企业级 AI 流式对话组件豆包官网同款constAIChatStream(){// 核心状态管理const[messages,setMessages]useState([]);// 历史消息列表企业级必存const[inputValue,setInputValue]useState();// 输入框内容const[loading,setLoading]useState(false);// 加载状态防重复请求const[error,setError]useState();// 异常提示const[isPending,startTransition]useTransition();// 并发优化防卡顿// 引用管理企业级内存管理核心constabortRefuseRef(null);// 中断控制器引用constchatEndRefuseRef(null);// 滚动到底部引用constinputRefuseRef(null);// 输入框引用聚焦优化// 自动滚动到底部豆包官网同款流畅滚动useEffect((){chatEndRef.current?.scrollIntoView({behavior:smooth,block:end});},[messages]);// 组件销毁清理资源企业级必做防止内存泄漏useEffect((){return(){if(abortRef.current){abortRef.current.abort();}};},[]);// 重试发送企业级异常处理必备constretrySend(lastPrompt){setInputValue(lastPrompt);inputRef.current?.focus();};// 停止输出豆包官网同款停止功能conststopStream(){if(abortRef.current){abortRef.current.abort();setLoading(false);}};// 清空聊天记录企业级基础功能constclearChat(){stopStream();setMessages([]);setInputValue();setError();};// 发送流式请求核心逻辑企业级标准实现constsendStreamasync(){constpromptinputValue.trim();// 防重复请求、空请求企业级校验if(!prompt||loading)return;// 重置状态setLoading(true);setError();setInputValue();// 新增用户消息企业级消息格式对齐后端constnewUserMsg{role:user,content:prompt,timestamp:Date.now()};startTransition((){setMessages(prev[...prev,newUserMsg,{role:assistant,content:,loading:true,timestamp:Date.now()}]);});// 初始化流式核心变量constcontrollernewAbortController();abortRef.currentcontroller;letbuffer;// 分包/粘包缓存核心letfullText;// AI 完整响应内容consttokenlocalStorage.getItem(authToken);// 生产级 Token 存储适配权限校验try{// 发起企业级流式请求对齐后端 SSE 标准constresponseawaitfetch(/api/v1/chat/stream,{method:POST,headers:{Content-Type:application/json,Authorization:Bearer${token},// 企业级权限校验必加X-Request-Id:Date.now().toString(),// 链路追踪企业级监控必备},body:JSON.stringify({prompt,stream:true,messages:messages.map(({role,content})({role,content})),// 携带历史消息上下文对话temperature:0.7,// 企业级参数可控随机性}),signal:controller.signal,// 绑定中断信号});// 企业级 HTTP 异常捕获401/403/429/500 等fetch 不会自动抛错if(!response.ok){consterrMsgresponse.status401?Token 过期请重新登录:请求失败${response.status}${response.statusText};thrownewError(errMsg);}// 浏览器兼容性判断企业级兼容处理if(!response.body){thrownewError(当前浏览器不支持流式交互请升级浏览器);}// 初始化流读取器和解码器避免中文乱码constreaderresponse.body.getReader();constdecodernewTextDecoder(utf-8);// 循环读取流数据核心逻辑while(true){const{done,value}awaitreader.read();// 流结束处理剩余缓存防止最后几个字丢失企业级兜底if(done){if(buffer.trim()){parseSSELine(buffer);}// 更新 AI 消息状态结束 loadingstartTransition((){setMessages(prev{constcopy[...prev];constlastMsgcopy.at(-1);if(lastMsg)lastMsg.loadingfalse;returncopy;});});break;}// 解码并拼接缓存关键不加 stream:true避免中文乱码bufferdecoder.decode(value);// 按换行拆分只处理完整行不完整行留在缓存解决分包/粘包constlinesbuffer.split(\n);bufferlines.pop()||;// 逐行解析 SSE 数据标准格式lines.forEach(lineparseSSELine(line));}}catch(err){// 企业级异常分类处理leterrTip;if(err.nameAbortError){errTip\n\n[已停止输出];}else{errTip\n\n[加载失败${err.message}];setError(err.message);// 显示异常提示支持重试}// 更新异常状态和消息startTransition((){setMessages(prev{constcopy[...prev];constlastMsgcopy.at(-1);if(lastMsg){lastMsg.contenterrTip;lastMsg.loadingfalse;}returncopy;});});}finally{// 清理状态企业级收尾防止内存泄漏setLoading(false);abortRef.currentnull;}// 解析单行 SSE 数据标准 SSE 格式data: xxxfunctionparseSSELine(line){consttrimLineline.trim();// 过滤非标准 SSE 行避免解析报错if(!trimLine.startsWith(data: ))return;// 提取核心数据去掉 data: 前缀constdataStrtrimLine.replace(data: ,).trim();// 流结束标志后端标准返回 [DONE]if(dataStr[DONE])return;try{// 解析 JSON兼容主流大模型格式delta.content / contentconstdataJSON.parse(dataStr);constcontentdata.delta?.content||data.content||;if(content){fullTextcontent;// 并发优化标记为非紧急更新避免卡顿企业级性能优化startTransition((){setMessages(prev{constcopy[...prev];constlastMsgcopy.at(-1);if(lastMsg)lastMsg.contentfullText;returncopy;});});}}catch(e){// 忽略分包导致的不完整 JSON企业级容错不影响整体流程console.warn(SSE 解析警告分包忽略,dataStr);}}};// 回车发送ShiftEnter 换行豆包官网同款交互consthandleKeyDown(e){if(e.keyEnter!e.shiftKey){e.preventDefault();sendStream();}};return(div classNameai-chat-container{/* 聊天头部企业级布局对标豆包 */}div classNamechat-headerh3AI流式对话豆包官网同款/h3button onClick{clearChat}disabled{loading}classNameclear-btn清空记录/button/div{/* 异常提示企业级用户体验 */}{error(div classNameerror-tip{error}button onClick{()retrySend(messages.at(-2)?.content||)}classNameretry-btn重试/button/div)}{/* 聊天消息列表企业级样式区分用户/AI */}div classNamechat-message-list{messages.length0?(div classNameempty-chatp发送消息开始AI对话.../p/div):(messages.map((msg,idx)(div key{${msg.timestamp}-${idx}}className{message-item${msg.role}}div classNamemessage-avatar{msg.roleuser?我:AI}/divdiv classNamemessage-contentdiv classNamecontent-inner{msg.content}/div{/* 加载中光标豆包官网同款闪烁效果 */}{msg.loading(span classNameloading-cursorspan classNamecursor/span/span)}/div/div)))}div ref{chatEndRef}//div{/* 输入区域企业级交互对标豆包 */}div classNamechat-input-areatextarea ref{inputRef}value{inputValue}onChange{(e)setInputValue(e.target.value)}onKeyDown{handleKeyDown}placeholder输入问题按 Enter 发送ShiftEnter 换行...disabled{loading}classNamechat-inputrows{4}/div classNameinput-btn-groupbutton onClick{sendStream}disabled{loading||!inputValue.trim()}classNamesend-btn{loading?发送中...:发送}/button{loading(button onClick{stopStream}classNamestop-btn停止/button)}/div/div/div);};exportdefaultAIChatStream;核心原理1. 为什么必须用 buffer 缓存TCP 传输会出现分包、粘包一行 JSON 被切成 2 次传输多行数据粘在一起直接解析一定会报错buffer 碎片拼接器2. 为什么不能加 { stream:true }decoder.decode(value, { stream: true })会保留未解析完的字节中文必乱码3. 为什么流结束要再解析一次 buffer最后一段数据可能没有换行符会留在缓存里不解析→ 表现最后几个字消失4. SSE 标准格式所有主流 AI 都遵循data: { content: 你 } data: { content: 好 } data: [DONE]生产环境注意事项1. 必须处理分包粘包不加 buffer 缓存线上必崩这是 90% 新手翻车点2. 高频更新必须用 useTransition 优化startTransition((){setText(fullText)})否则输入框、按钮会卡顿3. 必须捕获 HTTP 错误fetch 只有断网才进 catch401/403/429/500 不会报错需要手动判断response.ok4. 必须支持停止输出使用AbortController中断请求否则组件销毁后仍会继续输出5. 浏览器兼容性支持Chrome、Firefox、Edge、Safari 14.1不支持IE、部分老旧微信浏览器6. 避免重复请求加 loading 锁防止用户多次点击发送7. 滚动优化打字机输出时自动滚动到底部使用scrollIntoView或scrollTop8. 异常兜底网络中断、解析失败时给用户提示不要让页面卡死面试必问1. 流式输出为什么会出现解析失败因为 TCP 分包一行 JSON 被切成多段必须用 buffer 拼接完整行才能解析。2. React 为什么要用 useTransition流式输出是高频低优更新会阻塞输入框、点击useTransition 标记为非紧急更新保证交互流畅。3. 如何实现停止输出使用AbortController中断 fetch 请求。4. 中文乱码怎么解决不要使用{ stream:true }直接解码并用 buffer 拼接。

相关文章:

React 实现 AI 流式打字机对话:SSE 分包粘包处理 + 并发优化

核心功能说明 完全对标豆包官网,涵盖所有生产级必备功能,无任何冗余逻辑: SSE 标准流式解析:兼容所有主流大模型(豆包、通义千问、ChatGPT),严格处理 TCP 分包/粘包,不丢字、不乱码。…...

【小白学习大模型】第一天,本地服务器部署大模型

目前部署的Qwen2.5最新结果:(llm_lab) yukeweiinin5880-Virtual-Machine:~/test_qwen$ /home/yukewei/miniconda3/envs/llm_lab/bin/python /home/yukewei/test_qwen/test_qwen2.5_basic.py 正在从本地加载模型,请耐心等待... Failed to load /home/yuke…...

Verdi VC Apps批量模式实战:如何用listRegisters.pl脚本高效提取寄存器列表(附常见报错解决方案)

Verdi VC Apps批量模式实战:如何用listRegisters.pl脚本高效提取寄存器列表(附常见报错解决方案) 在数字IC验证的日常工作中,寄存器列表的提取是一项基础但极其重要的工作。无论是覆盖率分析、寄存器模型生成还是调试效率提升&…...

5分钟掌握SD-PPP:让Photoshop变身AI图像生成工作站的终极指南

5分钟掌握SD-PPP:让Photoshop变身AI图像生成工作站的终极指南 【免费下载链接】sd-ppp A Photoshop AI plugin 项目地址: https://gitcode.com/gh_mirrors/sd/sd-ppp SD-PPP是一款革命性的Photoshop AI插件,它巧妙地将专业级AI图像生成能力无缝集…...

如何用GraphvizOnline在5分钟内创建专业流程图:终极免费可视化工具指南

如何用GraphvizOnline在5分钟内创建专业流程图:终极免费可视化工具指南 【免费下载链接】GraphvizOnline Lets Graphviz it online 项目地址: https://gitcode.com/gh_mirrors/gr/GraphvizOnline 还在为复杂的图表绘制工具而烦恼吗?GraphvizOnlin…...

终极Windows与Office激活指南:5分钟完成智能激活的完整解决方案

终极Windows与Office激活指南:5分钟完成智能激活的完整解决方案 【免费下载链接】KMS_VL_ALL_AIO Smart Activation Script 项目地址: https://gitcode.com/gh_mirrors/km/KMS_VL_ALL_AIO 你是否曾为Windows系统或Office办公套件的激活问题而烦恼&#xff1f…...

sa-token学习(2)

官方文档地址:sa-token sa-token学习(1) cookie & session & localStorage & sessionStorage session共享原理 文章目录 单点登录单点登录的3种模式SSO模式一 共享Cookie同步会话SSO模式二 URL重定向传播会话SSO模式三 Http请求获取会话 单点登录 单…...

春联生成模型-中文-base效果实测:输入‘平安‘、‘富贵‘,对联寓意满满

春联生成模型-中文-base效果实测:输入平安、富贵,对联寓意满满 1. 模型效果初体验 春节将至,家家户户都开始准备贴春联。传统春联创作需要深厚的文学功底,而如今AI技术让这一过程变得简单有趣。今天我们要实测的是一款基于阿里达…...

ESXI系统安装全流程解析:从U盘启动到网络配置

1. 制作ESXI启动U盘:从镜像下载到写入完成 准备一个容量至少8GB的U盘,建议使用USB3.0接口的高速U盘。我实测过多个品牌,闪迪CZ73和金士顿DTSE9在兼容性和速度上表现最好。制作启动盘前记得备份U盘数据,整个过程会清空所有内容。 首…...

FlowState Lab 模型架构可视化与核心模块解读

FlowState Lab 模型架构可视化与核心模块解读 1. 模型整体架构概览 FlowState Lab是一个专门针对复杂波动模式捕捉设计的深度学习模型。通过创新的架构设计,它在金融时间序列预测、物理系统模拟等领域展现出卓越性能。让我们先来看看它的整体架构图: 这…...

2026年揭秘!日照那些让你放心吃海鲜,绝不宰客的宝藏店铺

在旅游热门地日照,海鲜美食一直是吸引游客的一大亮点。但不少游客都曾遭遇过住宿脏乱、海鲜被宰、体验打折等问题,让原本美好的旅行变得糟心。不过,在日照有这样一家宝藏店铺——宗合渔家,能让你放心吃海鲜,享受不被宰…...

QMCDecode:打破音乐格式壁垒的解密技术实现

QMCDecode:打破音乐格式壁垒的解密技术实现 【免费下载链接】QMCDecode QQ音乐QMC格式转换为普通格式(qmcflac转flac,qmc0,qmc3转mp3, mflac,mflac0等转flac),仅支持macOS,可自动识别到QQ音乐下载目录,默认转换结果存储…...

全网疯传「.SKILL」:只要一句话,就能把任何人蒸馏成 AI,前任、老板、乔布斯。。。

不用懂代码、不用学复杂操作,只要一个SKILL,就能把任何人蒸馏成专属AI——同事、老板、前任,甚至乔布斯、张一鸣,都能被你炼入token,随叫随到陪你对话、帮你干活,实用性直接拉满!最近刷X的朋友&…...

DFRobot SEN0344血氧心率模块驱动库详解

1. 项目概述DFRobot_BloodOxygen_S 是 DFRobot 针对 SEN0344 血氧心率传感器模块(基于 MAX30102 芯片)开发的标准驱动库,属于 DFRobot_Sensor 系列统一架构下的专用传感器抽象层。该库并非直接操作 MAX30102 寄存器的底层驱动,而是…...

从欧拉角到旋转矩阵:一步步解析三维空间中的旋转转换

1. 三维旋转的起点:理解欧拉角 想象你手里拿着一个魔方,想要把它从初始状态旋转到任意方向。你会怎么做?大多数人会自然地分三步操作:先左右转动(Z轴),再上下倾斜(Y轴)&a…...

Step3-VL-10B Base版实战指南:Gradio界面源码解读+processing_step3.py定制化修改

Step3-VL-10B Base版实战指南:Gradio界面源码解读processing_step3.py定制化修改 1. 引言:从使用者到开发者 如果你已经用上了Step3-VL-10B的Web界面,上传图片、提问、获取回答,觉得这个多模态模型确实好用,那么恭喜…...

Local Moondream2最佳实践:提升图像理解准确率的预处理方法

Local Moondream2最佳实践:提升图像理解准确率的预处理方法 1. 理解Moondream2的工作原理 Local Moondream2是一个基于1.6B参数的轻量级视觉语言模型,它能够理解图像内容并用英文进行对话。这个模型的核心能力在于将视觉信息转化为语言描述&#xff0c…...

终极网盘直链下载助手:如何一键破解八大网盘限速?

终极网盘直链下载助手:如何一键破解八大网盘限速? 【免费下载链接】Online-disk-direct-link-download-assistant 一个基于 JavaScript 的网盘文件下载地址获取工具。基于【网盘直链下载助手】修改 ,支持 百度网盘 / 阿里云盘 / 中国移动云盘…...

CUDA driver error: invalid argument问题修改

训练qwen2时遇到了这个报错,只需要清理缓存即可。rm -rf ~/.cache/torch/kernels/...

多租户Agent Harness的隔离与配额管理

作者注 各位读者好!我注意到本次技术需求中,存在一处细微的、影响可行性的约束冲突:前面明确要求“根据主题撰写一篇10000字左右的技术博客”,但最后补充的约束里又提到“每个章节字数必须大于10000字”——若严格执行后者,一篇包含5-10个通用技术博客章节的文章,总字数…...

AI Agent Harness Engineering 伦理:当机器拥有自主权

当机器握有「方向盘」:AI Agent 驾驭工程(Harness Engineering)的伦理框架与实践指南 第一部分:引言与伦理觉醒 1.1 引人注目的标题与副题 主标题: 当机器握有「方向盘」:AI Agent 驾驭工程的伦理框架与实践指南 副标题: 从伦理红线到可落地的「安全控制杆」—— 为自…...

Laravel缓存、队列、邮件、文件系统等服务的驱动配置

Laravel核心服务通过驱动机制实现可插拔扩展,缓存、队列、邮件、文件系统均需在config文件和.env中配置对应驱动及参数。在 Laravel 应用中,缓存、队列、邮件和文件系统等核心服务均通过驱动(Driver)机制实现可插拔式扩展。每个服…...

C语言是什么?初学者必看的通俗解释

由于微型计算机越来越普及,C语言成了世界上极为流行、运用颇为广泛的高级程序设计语言当中的一种。C语言是程序语言的根基,要是掌握了C语言,再去学别的语言便容易许多。那么,什么是C语言呢?对于从事编程工作的朋友而言…...

Python 工程化: 用 Copier 打造“自我进化“的项目脚手架

什么是 copier安装QuickStart底层机制创建模板模板辅助函数全局变量配置模板exclude: 排除文件tasks: 项目生成/更新后要执行的命令复制项目更新项目什么是 copier Copier 是一个开源的项目模板生成工具 基于 Jinja2 模板引擎模板支持本地路径 和 Git URL项目可以包含任意文件…...

2026年,这家大型快拼箱源头工厂直销厂家,究竟有何独特之处?

在快拼箱行业蓬勃发展的2026年,众多厂家如雨后春笋般涌现,但衡水贝客科技有限公司(简称贝客房屋)却凭借其独特的优势脱颖而出,成为行业内备受瞩目的大型快拼箱源头工厂直销厂家。接下来,让我们深入探究贝客…...

Betaflight Configurator 深度解析与实用配置指南

Betaflight Configurator 深度解析与实用配置指南 【免费下载链接】betaflight-configurator Cross platform configuration and management application for the Betaflight firmware 项目地址: https://gitcode.com/gh_mirrors/be/betaflight-configurator Betaflight…...

YimMenu终极指南:5步掌握GTA5最强免费防崩溃辅助工具

YimMenu终极指南:5步掌握GTA5最强免费防崩溃辅助工具 【免费下载链接】YimMenu YimMenu, a GTA V menu protecting against a wide ranges of the public crashes and improving the overall experience. 项目地址: https://gitcode.com/GitHub_Trending/yi/YimMe…...

deepin系统更换镜像源

deepin更换镜像源的操作 392 cd /etc/393 ls394 ls395 cd apt/396 ls397 cp sources.list sources.list_backup398 vim sources.list399 apt-get clean400 apt-get update401 apt-get upgrade402 history 20 rootZZM-PC:/etc/apt# 对应上面的vim操作 rootZZM-PC:/et…...

PyTorch 2.8基础教程:从零加载HuggingFace模型并执行一次前向传播

PyTorch 2.8基础教程:从零加载HuggingFace模型并执行一次前向传播 1. 环境准备与快速验证 在开始之前,我们需要确认PyTorch环境已经正确安装并且GPU可用。使用以下命令进行快速验证: python -c "import torch; print(PyTorch:, torch…...

GTE中文嵌入模型一文详解:预训练目标(MLM+ITC)对中文优化原理

GTE中文嵌入模型一文详解:预训练目标(MLMITC)对中文优化原理 1. 什么是GTE中文文本嵌入模型 GTE中文文本嵌入模型,全称是General Text Embedding,是专为中文语义理解深度优化的句子级向量表示模型。它不是简单地把英…...