- 综合排序
- 最热优先
- 最新优先
- 来自专栏王磊的博客
干货：DeepSeek+SpringAI实现流式对话！
，但是大模型的响应速度通常是很慢的，为了避免用户用户能够耐心等待输出的结果，我们通常会使用流式输出一点点将结果输出给用户。 那么问题来了，想要实现流式结果输出，后端和前端要如何配合？ 后端要使用什么技术实现流式输出呢？ ，适合单向实时数据流，我们使用 Spring MVC（基于 Servlet）中的 SseEmitter 对象来实现流式输出。 DOCTYPE html> <html> <head> <title>流式输出示例</title> </head> <body>
流式数据接收演示
startStream()">开始接收数据</button> <div id="output" style="margin-top: 20px; border: 1px solid #ccc; padding: <em>10</em>px2.2K10编辑于 2025-02-14 - 来自专栏h5
基于uniapp+deepseek+vue3跨平台ai流式对话
基于uniapp+vue3集成deepseek-v3实战跨端流式输出AI对话系统。支持暗黑+亮色模式、代码高亮、本地会话存储等功能。支持编译到小程序+h5+app端。 this.historySession : [{role: 'user', content: editorValue}], model: 'deepseek-chat', // deepseek-chat对话模型 deepseek-reasoner推理模型 stream: true, // 流式输出 max_tokens: 8192, // 限制一次请求中模型生成 completion this.historySession : [{role: 'user', content: editorValue}], model: 'deepseek-chat', // deepseek-chat对话模型 endifelectron35+deepseek桌面端ai模板：https://cloud.tencent.com/developer/article/2514843vue3.5+deepseek网页版ai流式对话
2.8K22编辑于 2025-05-06 - 来自专栏h5
基于Flutter3.32+DeepSeek电脑端AI流式对话程序
flutter3-winseek支持侧边栏收缩/展开、上下文多轮对话、代码高亮、本地存储会话、代码块横向滚动、复制代码功能、图片100%宽度渲染、在线图片预览、网络链接跳转、表格功能。 技术栈技术框架：flutter3.32.0+dart3.8.0对话大模型：deepseek-v3流请求：dio^5.8.0+1窗口管理：window_manager^0.5.0托盘管理：system_tray dio插件来请求deepseek api接口，实现流式对话功能。 token 数(默认使用 4096) 'temperature': 0.4, // 严谨采样 越低越严谨(默认1) });基于uniapp+deepseek+vue3跨平台ai流式对话：https 2518214electron35+deepseek桌面端ai模板：https://cloud.tencent.com/developer/article/2514843vue3.5+deepseek网页版ai流式对话
75831编辑于 2025-06-07 - 来自专栏大前端修炼手册
Android 接入 LLM API 的工程实践：从选型到流式对话
这样才真正做到逐 token 流式输出。 ⚠️ 注意：OkHttpClient 的 readTimeout 默认 10 秒，流式请求会被截断。 多轮对话的时候，每次请求都要把完整历史 messages 带上——这意味着对话越长，每次请求的输入 Token 就越多。 1 token ≈ 4 字符 fun estimateTokens( msgs: List<ChatMessage> ) = msgs.sumOf { it.content.length / 4 + 10 = "system" } .takeLast(10) // 保留最近10条return listOfNotNull( systemMsg ) + history } 这个是最粗暴的方案：直接截断，只保留最近 整体架构回顾 把上面的东西串起来，整体分层大概是这样： • UI 层（Composable）：订阅 StateFlow，展示消息列表和流式气泡，处理用户输入 • ViewModel：维护对话状态，管理流式
84210编辑于 2026-04-02 HarmonyOS NEXT 实战：基于 ArkTS 与 DeepSeek API 构建流式对话助手
HarmonyOS NEXT 实战：基于 ArkTS 与 DeepSeek API 构建流式对话助手不同于调用现成SDK，本文将手写原生网络层、解析SSE数据流，并利用ArkUI状态管理实现“打字机”效果 市面上大多教程仅展示http.request请求非流式接口，这在用户体验上存在致命缺陷——用户需等待模型完整生成（往往超10秒）才能看到结果。 string = ''; // 用于处理不完整的消息块 constructor() { this.httpRequest = http.createHttp(); } /** * 发起流式对话请求 上下文长度超限：DeepSeek上下文高达64K，但若对话轮次过多，需实现滑动窗口。可在发送前计算messages中content总长度，截断最早的user/assistant对话。 适配折叠屏，实现对话+文档双栏预览。
29910编辑于 2026-08-09- 来自专栏h5
原创自研Flutter3.41+Dio+WindowManager打造桌面版AI问答系统
基于flutter3.41.5+get+dio+window_manager对接deepseek-chat实战客户端ai流式会话系统。 widget.child, ), ), ], ), ), ], ), ),);flutter3 -ai对话编辑框return Container( width: double.infinity, padding: EdgeInsets.symmetric(vertical: 10.0), child chatStore.historySession : [{'role': 'user', 'content': editorValue}], // deepseek-chat对话模型 deepseek-reasoner 跨端ai应用vite7.2-deepseek流式ai对话|vue3.5+vant4+katex+mermaid智能ai打字会话最新实战Vite7.3+Tauri2.10深度集成DeepSeek桌面端AI
32700编辑于 2026-04-15 - 来自专栏h5
flutter3.32对接deepseek桌面端ai流式对话Exe
2025原创跨平台AI系统Flutter3.32+Dart3.8+Getx+Dio接入DeepSeek-v3搭建客户端流式ai对话模板。支持代码高亮、上下文多轮会话、本地存储对话等功能。 项目特色支持侧边栏收缩/展开支持上下文多轮对话、代码高亮、本地存储会话支持代码块横向滚动、复制代码功能支持图片100%宽度渲染、在线图片预览支持网络链接跳转、表格功能采用自定义无边框窗口、托盘图标项目结构目录基于
33910编辑于 2025-06-05 - 来自专栏Spring AI 进阶之路
Spring AI 进阶之路02：集成SSE实现AI对话的流式响应
在AI对话的场景里，我们问完问题后，只需要静静地听AI把答案一个字一个字“说”出来就行了。AI并不需要中途再听我们说什么。所以，更轻量、更简单的SSE，就是我们这个场景下的完美选择。 head><metacharset="UTF-8"><metaname="viewport"content="width=device-width,initial-scale=1.0"><title>SSE流式对话 flex-grow:1;padding:12px;border:1pxsolid#ccc;border-radius:20px;resize:none;font-size:1em;margin-right:10px 这个过程中，我们：深入理解了SSE技术：它简单、轻量，特别适合服务器向客户端的单向数据推送场景掌握了SpringAI的流式API：通过stream()方法获取响应流，配合响应式编程实现非阻塞处理实现了完整的流式对话系统 ：从后端的SSE管理、流式处理，到前端的实时渲染，构建了一个完整的解决方案流式响应不仅仅是一个技术特性，更是提升用户体验的关键要素。
1.7K02编辑于 2025-11-25 - 来自专栏Spring系列实战
SpringAI 接入混元大模型:流式对话与历史持久化实战
摘要:本文基于SpringBoot3.x+SpringAI1.0,通过OpenAI兼容接口接入腾讯混元大模型,从零搭建企业智能客服的首个流式对话接口。 包含混元API配置、ChatClient调用、SSE流式响应、CDBMySQL对话历史持久化、CLS日志接入的完整链路,附3个新手踩坑案例。 四、流式对话:SSE接口实现客服场景对首响时间极其敏感。同步调用混元要等整句生成,首响3-5秒;流式调用逐Token返回,首响200ms就能开始输出,用户感知"秒回"。 这是流式对话的完整闭环。 }}}returnreplyText;}五、对话历史持久化:CDBMySQL存储流式对话解决了"快"的问题,但客服场景需要"记"——用户关掉会话再打开,历史对话要还在。
41510编辑于 2026-08-12 SSE 长连接复用优化：流式对话并发连接数降低 60%
2026年，流式对话成为大模型交互核心形态，SSE（Server-SentEvents）因轻量、兼容HTTP、易穿透防火墙，成为聚合API流式输出的主流协议。 一、SSE长连接复用核心原理与架构1.1传统SSE架构痛点传统SSE为单会话单连接模式：每轮流式对话建立独立长连接，会话结束后连接关闭或闲置。 :11000060%300ms+6个/域名复用优化SSEN:1（N≤5）4000（降60%）15%≤50ms无（HTTP/2多路复用）二、性能实测数据：连接数、延迟、稳定性2.1测试环境负载：1万并发流式对话 用户即阻塞复用优化SSE（HTTP/2）：单连接承载多会话，单域名无连接数限制，支持千级并发2.3典型场景案例某企业客服流式API（日50万会话，每会话5轮）：传统SSE：日均连接数峰值8万，服务器10 四、总结SSE长连接复用是聚合API流式对话性能优化的核心技术，通过会话绑定、多路复用、连接池管理，将并发连接数降低60%，资源占用下降45%，断流率降至1%以下。
47010编辑于 2026-06-11鸿蒙原生应用实战：从零搭建 AI 应用，集成 MaaS 流式对话
TL;DR速览核心结论：鸿蒙原生+MaaS，能搭出端云协同的AI应用开发底座：ArkTS写逻辑，ArkUI声明式画界面流式对话：MaaS返回分片，边收边渲染不卡壳我的判断：鸿蒙+AI是国产开发者的明确机会窗口 MaaS集成与流式对话怎么落地流式对话是这个教程的技术重点。什么叫流式？大模型生成答案不是一下子全出来，是一个字一个字往外吐。如果等它全生成完再显示，用户会盯着空白屏幕等好几秒。 流式的做法是，模型吐一点，界面显示一点，体验上就像「对方在打字」。落到鸿蒙里，流程大致是这样。 声明式框架在这里把「流式渲染」的成本降到了最低。流式对话有几个实现细节，踩过的人都知道。 二是断线重连，流式中断后是重发整个请求还是从断点续，得提前定好。三是上下文管理，多轮对话要带历史消息，但历史太长费token，怎么裁剪是个平衡活。这些具体实现，以官方文档为准。
15110编辑于 2026-08-31- 来自专栏KisFlow-Golang流式计算框架
Golang框架实战-KisFlow流式计算框架(10)-Flow多副本
KisFlow如果在执行流体中，需要被多个Goroutine来并发使用，可能需要同一个配置的创建多个Flow来匹配多个并发的计算流，所以Flow需要一个创建副本的能力。本章将实现这部分的能力。
50910编辑于 2024-07-19 - 来自专栏福大大架构师每日一题
实时流式工具调用引领智能对话新时代
v0.8.0版本率先打破了这一瓶颈，成功实现了流式响应下的工具调用，即模型生成内容的同时，可以即时触发并执行工具调用。 }, "required": ["location", "format"] } } } ] }' 运行后，模型即时返回天气工具调用请求并等待数据返回，从而实现更智能对话体验 利用流式能力优化前端交互 结合WebSocket、事件流等技术打造实时聊天界面，实现内容增量展示与工具调用同步反馈。 5. 此外，随着模型训练和上下文协议不断优化，结合流式工具调用的智能对话将成为新时代人工智能应用的核心形态，为企业和开发者创造前所未有的价值。 九、总结 Ollama v0.8.0以最尖端的技术变革，实现了“实时流式响应+工具调用”的完美结合，推动智能对话进入一个全新的效率和体验维度。
96510编辑于 2025-06-06 - </template>tauri2-deepseek流式对话 // 使用数组存储chunk内容，提高拼接效率let chunks = []let lastUpdate = 0// 处理流式输出for await (const chunk of completion false}) if (sessionstate.reachBottom) { props.scrollBottom() } }}基于uniapp+deepseek+vue3跨平台ai流式对话 2518214electron35+deepseek桌面端ai模板：https://cloud.tencent.com/developer/article/2514843vue3.5+deepseek网页版ai流式对话来自专栏h5
基于Tauri2+Vue3.5+DeepSeek实战客户端Ai流式对话exe应用
tauri2-vue3-winbot桌面端ai对话支持侧边栏收缩/展开、上下文多轮对话、代码高亮、本地存储会话、图片100%宽度渲染、在线图片预览、网络链接跳转、表格功能。 icon-loading v-else size="18" /> </a-button>
vite7.2-deepseek流式ai对话|vue3.5+vant4+katex+mermaid智能ai打字会话模板
环境变量配置.env自己去申请一个api key，替换掉.env文件里面的key 即可丝滑体验流式对话功能。 vue3+deepseek实现多轮对话/流式输出const completion = await openai.chat.completions.create({ // 单一会话 /* messages finish_reason === 'stop') { // 确保最终内容完整更新 ... }}Okay，以上就是vue3+deepseek实现流式输出ai对话模板的一些知识分享。 bitsdojo_window客户端聊天Exe自研新版Flutter3.32仿微信app聊天|朋友圈模板基于uni-app+vue3实战短视频+聊天+直播app商城基于uniapp+deepseek+vue3跨平台ai流式对话 electron35+deepseek桌面端ai模板vue3.5+deepseek网页版ai流式对话
大模型无限流式输入推理飙升46%！国产开源加速「全家桶」，打破多轮对话长度限制
最近，全新开源的国产SwiftInfer方案，不仅能让LLM处理无限流式输入，而且还将推理性能提升了46%。 在大型语言模型（LLM）的世界中，处理多轮对话一直是一个挑战。 前不久麻省理工Guangxuan Xiao等人推出的StreamingLLM，能够在不牺牲推理速度和生成效果的前提下，可实现多轮对话总共400万个token的流式输入，22.2倍的推理速度提升。 如下图所示，假设窗口大小为10个token，随着生成的token增加（由黄色方块表示），我们在KV缓存中将中间的token踢出，与此同时，始终保持着文本开始的几个token（由蓝色方块表示）。 需要注意的是，StreamingLLM不会直接提高模型能访问的上下文窗口，而是能够在支持流式超多轮对话的同时保证模型的生成效果。 大模型无限输入流推理加速46% 原版本的StreamingLLM可以可靠地实现超过400万个token的流式输入，实现了比带重计算的滑动窗口注意力机制高出22.2倍的速度提升。
对话月薪10万的技术老兵：技术人如何开心工作、快乐赚钱？
如果你还处于迷茫期，如果你也想有更多可能性，如果你想更近一步与安晓辉做交流，现在场主为你提供一次线上与安晓辉零距离对话的机会。 用他的经验和专业规划 让你看到更多技术人的职场可能性！
与OpenAI CEO萨姆·阿尔特曼对话：AGI将在10年后到来
在10年前，我们已经观察到，从2010年开始的这场变革充满了投资热潮，估值爆炸、少数公司占据了风头。但到这个时期后三个季度，人们开始认为这些公司将成为未来的平台级巨无霸。但我不知道应该如何解读这一点。
Vicuna数字孪生再现10年前的自己，跨越10年对话感动无数人
这段网友和童年的自己对话，让人泪目了。 Reddit上的网友，又搞新活了。 他用了自己100个小时的网络足迹数据，训练了一个大语言模型。 也就是说，他可以和自己的数字分身对话了。 用100小时的数据训练了17B的模型，现在他可以和自己的「幽灵」进行对话了 训练这么个大模型，其实并不容易，根据该网友的说法，他前后改进了很多次，并且在花费了许多个深夜来自言自语，才终于训练好了大模型。 Huang写日记的习惯，大约持续了10年以上，这些日记记载了她的梦想、恐惧以及秘密。 日记内容从抱怨家庭作业到与暗恋对象交谈时的目眩神迷....几乎无所不包。 Huang说，「这种特定的互动感觉与正常的交流非常相似，就好像我正在和过去的我，通过这个聊天框进行对话。」 同时，Huang表示：与「young Michelle」对话时，让她发觉来这么多年来自己身上一直不变的部分，也让她想起那些因为生活或者经历而忘记或埋葬的部分。
从0到1教你快速搭建自己的AI智能客服系统：RAG知识库、AI流式对话、Vue聊天助手接入实战
、RAG知识库、智能客服开源项目、AI客服机器人、Vue3AI聊天组件、AISuspendedBallChat、企业知识库问答如果你想把官网文档、产品手册、售后FAQ、工单处理SOP快速接入到一个「能对话 、能查知识库、能流式输出、能嵌入网页」的AI智能客服系统里，AI-Agent-Node是一个非常适合二次开发的开源脚手架。 后端需要会话、上下文、流式响应和工具调用能力。AI-Agent-Node已经把这些基础能力搭好了。 TXTAI代码解释CORS_ORIGIN=*生产环境建议：展开代码语言：TXTAI代码解释CORS_ORIGIN=https://www.your-site.com3.限制上传文件项目中上传接口默认单文件10MB 、最多10个文件。
