跳到主要内容

模型对话台

连接本地或云端大模型的多轮对话,SSE 流式输出。

端点直连数据仅在浏览器与你配置的端点之间传输,不经本站服务器

还没有可用的模型连接。

先到「AI 配置」探测本地模型(Ollama / LM Studio 等)或填入云端 API, 探测成功并保存后回到这里对话。全程浏览器直连,站点服务器不经手。

去AI 配置 →

使用说明

这个工具解决什么问题

用 Ollama、LM Studio 跑了本地模型,或者手里有各家云端的 API Key,但每次对话都要开终端、敲 curl,或者忍受官方客户端的重量级安装。这个对话台把连接这件事交给你上一 步在「AI 配置」里保存好的配置——打开页面就能直接跟本地 7B 模型或者云端 API 聊,中间没有任何一方的服务器经手。

核心能力

多轮流式对话:完整上下文发给模型,回答按 SSE 逐字渲染,边生成边看;生成中可随时点「停止」中止,已生成的部分保留。

OpenAI 兼容通吃:Ollama、LM Studio、Jan、vLLM、llama.cpp server 与各家云端 API 全都暴露同一套接口,填一个地址就能用,本地与云端无缝切换。

常用参数内置:system prompt 设定角色,温度滑杆控制发散程度,max_tokens 限制生成长度;端点不支持流式时自动整段回退,不挑服务端实现。

输出即纯文本:模型回答按纯文本渲染,不解析 HTML——模型输出视为不可信输入,杜绝提示词注入带来的页面安全问题。

使用建议

先跑「AI 配置」把端点调通并保存,回到这里连接会自动带上;换模型或换端点随时点「更换连接」。写作场景把 system prompt 设成固定角色(如「你是简体中文编辑」)能省掉每次重复交代的 token;回答发散就调低温度。对话历史只在当前页面内存里,刷新即清空,重要内容记得及时复制。

常见问题

对话内容会经过你的服务器吗?

不会。页面是纯静态文件,发送请求时由你的浏览器直连你配置的模型端点(本地 Ollama 或云端 API),站点服务器不参与、看不到、也不存储任何对话与密钥。

提示「还没有可用的模型连接」怎么办?

先用「AI 配置」探测并保存连接。Ollama 用户注意需要设置 OLLAMA_ORIGINS 环境变量允许跨域,LM Studio 在服务器页勾选 Enable CORS,具体步骤诊断器的失败引导里都有。

模型输出到一半停了或出现乱码?

生成中可点「停止」手动中止;网络中断时已生成的部分会保留。若端点不支持流式,工具会自动回退为整段返回。模型输出按纯文本渲染,不解析 HTML。

对话历史存在哪里?

只保存在当前页面的内存里,刷新页面即清空,不会写入存储也不会上传。需要留存可在清空前手动复制全文。

SSE 流式日志解析

把流式接口的 data: 行流还原成完整回答与分块明细。

AI 批量处理

多行/CSV 逐条套模板提示词送模型,进度回填导出 CSV。

端点直连

AI 配置

云端预设一键填入,探测本地/云端模型端点并列模型,保存后全站 AI 工具共用。

端点直连

查看更多AI 工具,或浏览全部工具。