Qwen3.8-Flash-Next on any consumer hardware: one-click install for Windows / Linux. Strata inference engine, OpenAI/Anthropic API on localhost, optional image input.
★ 42,671⑂ 4,664👁 202⑃ 2,881● 2,702▤ 66◈ 0
42,671
stars
+444
4,664
forks
202
watchers
2,881
prs
2,702
issues
66
releases
0
discussions
README
在你自己的电脑上运行强大的 AI。 本地聊天、写代码、处理图片。 模型 · 安装 · 硬件 · 工具 · 帮助 · 支持 English · 简体中文 · 日本語 · Deutsch · Français · Español · Português · Polski 免费、开源,由你自己运行。 在桌面上使用 Strata,或搭配你喜欢的编程工具。无需账号。 模型 我们首先推荐 ISTA-DASLab,其次是 Unsloth 和其他提供方,前提是有内存放得下的兼容模型。 Qwen3.8-Flash-Next | 提供方 | 可选项 | | --- | --- | | ISTA-DASLab · 推荐 | Q2\_0, IQ2\_XS, IQ3\_XXS, IQ3\_S。Coder:IQ1\_M,适合写代码。 | | Unsloth | UD-IQ4\_XS, UD-Q4\_K\_XL, UD-Q5\_K\_XL, UD-Q6\_K\_XL, Q8\_0 | | Gyro · agentionai | Gyro-S, Gyro-M。占用内存更少,但速度更慢。 | | 其他选项 | Swift 1.5, NVFP4, OrcaRouter | 比较大小、内存需求和兼容性。 Qwen3.6-35B-A3B Unsloth: UD-Q4_K_XL, UD-Q6_K_XL, Q8_0。这些是目前文档中收录的该模型的版本。 模型指南和兼容性。 DeepSeekV4.1-Flash-1017 可在桌面应用和终端中使用。内存放不下的部分会从 SSD 读取,所以需要大量空闲磁盘空间。 | 版本(ISTA-DAS) | 下载大小 | 所需空闲磁盘 | | --- | ---: | ---: | | 1.75 bpw | 239 GB | 约245 GB | | 2.00 bpw | 257 GB | 约265 GB | | 2.25 bpw | 274 GB | 约280 GB | 支持 NVIDIA RTX 30、40 和 50 系列(Windows 和 Linux)、AMD Radeon AI PRO R9700(Linux)、AMD Ryzen AI Max — Strix Halo(Windows),以及内存 64 GB 或以上的 Apple 芯片 Mac(Mac)。安装程序会下载模型文件和 DeepSeek 引擎,然后启动模型。 sh strata launch --family deepseek41 --model ist-das-2.00bpw --plan 以下为 Strata 0.2.5 上 2.00 bpw 版本的实测结果。“输出”是回答的速度,“提示词”是 Strata 读取你输入内容的速度。 | 硬件 | 输出 | 提示词 | | --- | ---: | ---: | | RTX 5070 12 GB, 64 GB 内存 | 4 到 6 tokens/s | 约 110 tokens/s(4K) | | RTX 3060 12 GB, 46 GB 内存 | 9 到 11 tokens/s | 约 155 tokens/s(4K) | | 1x Radeon AI PRO R9700, 251 GB 内存 | 21 到 25 tokens/s | 320 到 360 tokens/s (8K) | | 4x Radeon AI PRO R9700 | 74 到 77 tokens/s | 400 到 450 tokens/s (8K) | 内存、磁盘和详细信息 · 发行说明 不确定哪个放得下?为你的电脑选择模型。 安装 桌面应用 下载适用于 Windows、Linux 或 Mac 的 Strata → 安装应用,选择模型,就可以开始聊天。每个系统只有一个安装程序。首次启动时,应用会下载适合你显卡的引擎。安装程序帮助。 文件: Strata-0.2.13-windows-x64-setup.exe · Strata-0.2.13-linux-x86_64.AppImage · Strata-0.2.13-macos-arm64.dmg 聊天、文件和实时预览都在一个窗口里。 终端应用 更喜欢终端?安装 Strata,然后运行 strata launch。 安装命令 Linux / Mac sh curl -fsSL https://github.com/Niko1221/Strata/releases/latest/download/install.sh -o install.sh && sh install.sh Windows PowerShell powershell irm https://github.com/Niko1221/Strata/releases/latest/download/install.ps1 | iex 在 Windows 上,安装后请打开一个新的终端。然后运行: sh strata launch 按提示下载并启动模型。终端指南。 模型运行时,随时查看模型和硬件状态。 从源码构建 · Docker · 完整安装指南 硬件 | 支持的硬件 | 指南 | | --- | --- | | NVIDIA GeForce RTX 20 / 30 / 40 / 50 系列 | NVIDIA 安装 | | AMD Radeon RX 7700 / 7800 / 7900、RX 9060 / 9070、AI PRO R9700 | AMD 安装 | | AMD Radeon RX 6800 / 6900 · 实验性 | RX 6000 安装 | | Intel Arc · Linux | Intel 安装 | | Apple Silicon · M1 或更新 | Mac 安装 | | AMD Ryzen AI Max · Strix Halo | Strix Halo 安装 | 工具 Claude Code · Codex CLI · OpenCode · oh-my-pi · pi.dev · Hermes Agent · OpenClaw,也可以通过兼容 OpenAI 和 Anthropic 的 API 使用更多工具。 运行 strata connect,查看你所用工具的设置方法。连接指南。 帮助 全部指南 · 故障排查 · 报告问题 · 基准测试 · 工作原理 · 参与贡献 支持 Strata 帮助本地 AI 保持开放。 GitHub 赞助或一杯咖啡,都能帮助我们在更多硬件上开发和测试。 忠实支持者 感谢每一位支持 Strata 的人。 MIT 许可证 · 致谢和模型许可证 · 隐私 面向 AI 工具和自动阅读器: 技术参考 · 安装说明
Top issues
#3330[Other] Opinion: Strata app should be separate repo from Strata Engine51 comments · 2026-10-20#2197[Engine] Turing (sm_75): make the STRATA_SM75_PERF series the default, with expert mode 8 for i-quant packs47 comments · 2026-10-13#3976[Engine] Layer-major prefill on a CUDA layer split: 32K prompts 2.0x faster, 0.47x drive reads (Qwen3.8-Flash-Next, v0.2.4.2)28 comments · 2026-10-24#4841[Engine] Performance regression with engine 0.1.54/55 on 309025 comments · 2026-10-31#4610[Benchmark] record the host side in the standard report: measured PCIe per card, NUMA, memlock, GPU temperature and power25 comments · 2026-10-29#5031[Engine] Qwen3.8 Flash-Next on two mixed NVIDIA cards (RTX 4090 24 GB + RTX 4080 16 GB)?19 comments · 2026-11-02#4200[Engine] Runtime control is unavailable inspect the private host log17 comments · 2026-10-26#4350[Engine] dsv41 on gfx1100 (HIP, self-built): switching back to a conversation after another one ran fails with "illegal memory access"16 comments · 2026-10-27
Latest release
Strata 0.2.12 v0.2.12 2026-11-07Strata 0.2.12: a tuned DFlash2 drafter, faster prompts on 12 GB cards, Strix Halo and Mac, and tool-call fixes The app and the Terminal are 0.2.12. Control and every engine package are 0.1.58. The update feed is sequence 122. The DGX Spark (linux-aarch64) gets 0.2.12 too. Highlights - 12 GB cards (RTX 3060 class): UD-IQ4_XS-v31 prompts read about 3 times faster, 87 to 264 tokens per second at 2K. - Strix Halo (Windows): prompts x1.24 to x2.14 on UD-IQ4_XS-v31 and UD-Q4_K_XL. - Mac (M5 Max): output +10.3% to +12.7% and prompts +11.7% to +13.9% on UD-Q4_K_XL and UD-IQ4_XS-v31. - Tuned DFlash
相关报道 (9)
note【strata】strataのDFlash2はあまり速くならなかった話【RTX3060×2】2026-11-03搜狐普通人真能跑1-bit大模型了!Strata 0.2.9发布:AMD/NVIDIA/Intel全平台狂飙,32K长文本提速88%2026-10-31搜狐本地AI大模型Strata 0.2.9发布:处理速度提升88%,支持1-bit DeepSeek!2026-10-31黑海洋WikiStrata:用显存+内存+硬盘协同调度,让普通电脑跑 1250 亿参数模型2026-10-26手机新浪网新浪网· - 手机新浪网2026-10-19https://www.80aj.com/开发者Vibe两天产出Strata桌面管理端:本地大模型部署调参监控一站搞定2026-10-16虎嗅AI服务器需求推高存储成本:全球PC出货量下滑,DDR4平台获延长支持2026-10-10Pasquale PillitteriStrata 重写 GitHub 历史,595 条 Claude 署名消失,维护者确认重写2026-10-091717312GB 显存显卡跑 125B Qwen3.8 模型:Strata 登场,单张 RTX 5070 跑出 94 词元 / 秒2026-10-06
News & coverage (12)
Hacker NewsRun Qwen 3.8 Flash Next (125B) on consumer hardware (RTX 4090) at 100T/s▲ 940 · 420 comments · 2026-10-04Hacker NewsStrata: Qwen3.8-Flash-Next (125B Moe) on a 8GB+ Nvidia GPU▲ 5 · 0 comments · 2026-09-28Hacker NewsStrata: Run a 125B-parameter AI model on a normal gaming PC▲ 3 · 1 comments · 2026-09-30noteIs Strata a Game Changer for Local LLMs? Considering Large MoE and Adding GPUs with the RTX 50902026-11-05Startup FortuneOpen-Source Fix Slashes DeepSeek V4.1 Startup Time on Gaming GPUs2026-11-01noteI tried running Strata on an old custom-built PC with a 14-year-old CPU by plugging in an RTX 30602026-10-30NotebookcheckIntel Arc B580 runs 125B AI model nearly 3x faster with XeStrata in new test2026-10-26Pasquale PillitteriStrata rewrites its GitHub history, 595 Claude co-author tags vanish2026-10-09BigGo FinanceRunning a 125B-Parameter LLM on a Home PC: "Strata" Opens a New Frontier for Local AI2026-10-05Open Source For YouOpen-Source Tool Runs AI Locally2026-10-05