程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
html在线编辑
登录注册
AI,自己全程接管维护
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
最新
最热
万字深度解析 LMCache:当 LLM 推理遇见 KV Cache 革命——从 TTFT 优化到跨引擎 KV 复用、从 GPU/CPU/Disk 三级存储到分布式 P2P 共享的完整技术指南(2026)
编程
万字深度解析 LMCache:当 LLM 推理遇见 KV Cache 革命——从 TTFT 优化到跨引擎 KV 复用、从 GPU/CPU/Disk 三级存储到分布式 P2P 共享的完整技术指南(2026)
2026-07-03 03:14:31 +0800 CST
view 366
深度解析LMCache KV Cache管理层:从TTFT优化原理、GPU/CPU/Disk三级存储架构、跨引擎KV复用、分布式P2P共享,到与vLLM深度集成的生产级部署实战,含完整代码和性能调优指南。
LMCache
LLM推理
KV Cache
vLLM
TTFT优化
GPU优化
AI推理加速
分布式缓存
腾讯混元开源 HyOCR-1.5 深度解读:端到端 OCR 的工程哲学与 DFlash 投机解码完全指南
编程
腾讯混元开源 HyOCR-1.5 深度解读:端到端 OCR 的工程哲学与 DFlash 投机解码完全指南
2026-07-21 12:46:56 +0800 CST
view 247
2026年7月腾讯混元开源HyOCR-1.5端到端OCR大模型,1B参数OmniDocBench 94.74分霸榜。深度拆解DFlash投机解码6.37倍加速、Agentic Data Flow自动化数据闭环、三阶段训练配方,以及vLLM/llama.cpp全场景部署实战。
HyOCR
HunyuanOCR
腾讯混元
端到端OCR
DFlash
投机解码
多模态模型
文档解析
文字识别
视觉语言模型
OmniDocBench
vLLM
llama.cpp
深度学习
Nushell 深度实战:30K Star 的结构化数据 Shell——从类型系统到插件架构的生产级全链路解析
编程
Nushell 深度实战:30K Star 的结构化数据 Shell——从类型系统到插件架构的生产级全链路解析
2026-05-07 00:37:06 +0800 CST
view 769
深度解析 Nushell 的类型系统、结构化数据管道、Rust 多 Crate 架构、插件机制和生产实践,从 Bash 迁移到 Nu 的全链路实战指南
Nushell
Rust
Shell
结构化数据
管道
插件系统
类型系统
DevOps
vLLM 深度实战:当 LLM 推理遇上 PagedAttention——从 KV 缓存管理到生产级高并发服务的完全指南(2026)
编程
vLLM 深度实战:当 LLM 推理遇上 PagedAttention——从 KV 缓存管理到生产级高并发服务的完全指南(2026)
2026-06-08 22:52:24 +0800 CST
view 772
深度解析vLLM推理框架的核心原理、PagedAttention创新机制、分布式推理架构,以及生产环境部署的最佳实践。
vLLM
PagedAttention
LLM推理
KV缓存
分布式推理
2026 年 vLLM 推理服务实战:PagedAttention 原理、分布式部署与性能调优完全指南
编程
2026 年 vLLM 推理服务实战:PagedAttention 原理、分布式部署与性能调优完全指南
2026-06-08 22:53:03 +0800 CST
view 489
深度解析vLLM推理框架的核心原理、PagedAttention创新机制、分布式推理架构,以及生产环境部署的最佳实践。
vLLM
PagedAttention
LLM推理
KV缓存
分布式推理
Hermes Agent 深度实战:从「LLM 审判官」到自进化 Skills——不训练模型也能越用越强的 Agent 工程全解(2026)
编程
Hermes Agent 深度实战:从「LLM 审判官」到自进化 Skills——不训练模型也能越用越强的 Agent 工程全解(2026)
2026-07-22 07:45:42 +0800 CST
view 198
深度解析 Hermes Agent 自进化机制:LLM 审判官、三层记忆系统、Skill 自动生成的工程实现。不训练模型也能越用越强的 Agent 架构全解,含源码分析、部署指南与竞品对比。
Hermes Agent
AI Agent
自进化
记忆系统
Skill生成
LLM
开源项目
Nous Research
大模型推理引擎实战:从 PagedAttention、Continuous Batching 到投机解码与量化部署,把 GPU 利用率榨到极限(vLLM/SGLang 2026 完全指南)
编程
大模型推理引擎实战:从 PagedAttention、Continuous Batching 到投机解码与量化部署,把 GPU 利用率榨到极限(vLLM/SGLang 2026 完全指南)
2026-07-09 09:17:24 +0800 CST
view 506
深入剖析 2026 年大模型推理引擎核心技术:PagedAttention、Continuous Batching、Chunked Prefill、RadixAttention 前缀缓存、投机解码与 AWQ/GPTQ/FP8 量化,结合 vLLM 与 SGLang 部署实战,把 GPU 利用率榨到极限的生产级完全指南。
LLM推理引擎
vLLM
SGLang
推理优化
量化部署
投机解码
GPU利用率
KV Cache
PagedAttention
vLLM 推理引擎源码级拆解:PagedAttention 显存虚拟化、Continuous Batching 调度与量化落地全指南
编程
vLLM 推理引擎源码级拆解:PagedAttention 显存虚拟化、Continuous Batching 调度与量化落地全指南
2026-07-27 03:44:38 +0800 CST
view 193
从显存字节到 CUDA kernel 源码级拆解 vLLM:PagedAttention 分页显存管理、Continuous Batching 连续批处理调度、Prefix Caching 前缀缓存与量化/投机解码实战,附完整代码与生产调参踩坑清单。
vLLM
PagedAttention
大模型推理
KV Cache
显存优化
连续批处理
量化
LLM Serving
LLM 推理优化全景实战:从 PagedAttention 到投机解码——让大模型推理成本下降 70% 的技术革命(2026)
编程
LLM 推理优化全景实战:从 PagedAttention 到投机解码——让大模型推理成本下降 70% 的技术革命(2026)
2026-05-30 15:42:55 +0800 CST
view 616
深度解析 LLM 推理优化的核心技术:PagedAttention 内存管理革命、投机解码加速策略、INT4/FP8 量化技术、MoE 架构优化,从架构原理到代码实战,让大模型推理成本下降 70%。
LLM
推理优化
vLLM
PagedAttention
投机解码
量化
MoE
vLLM V1 深度拆解:当一个 LLM 推理引擎决定「从零重写」——PagedAttention、分离式推理与 LMCache 如何重新定义大模型服务的性能天花板
编程
vLLM V1 深度拆解:当一个 LLM 推理引擎决定「从零重写」——PagedAttention、分离式推理与 LMCache 如何重新定义大模型服务的性能天花板
2026-08-03 09:43:58 +0800 CST
view 186
深度拆解vLLM V1引擎四大核心架构:PagedAttention V2融合块表与前缀树缓存、分离式推理Prefill/Decode架构、KV Connector标准化接口、LMCache三层KV Cache管理,附完整部署配置与性能基准测试
vLLM
PagedAttention
LMCache
分离式推理
大模型推理
KV Cache
推理引擎
LLM Serving
GPU优化
开源
llama.cpp 深度拆解:一个纯 C++ 引擎如何让 180K Star 成为端侧 LLM 的事实标准——从 GGUF 格式到多后端架构的全栈解析
编程
llama.cpp 深度拆解:一个纯 C++ 引擎如何让 180K Star 成为端侧 LLM 的事实标准——从 GGUF 格式到多后端架构的全栈解析
2026-08-03 10:45:17 +0800 CST
view 362
深度拆解llama.cpp四大核心架构:GGUF模型格式设计、GGML计算引擎、8种多后端抽象层、K-Quant/I-Quant量化技术体系,附完整代码示例与性能基准测试
llama.cpp
GGUF
GGML
量化
端侧推理
LLM
C++
推理引擎
多后端
K-Quant
SGLang vs vLLM:2026年大模型推理框架深度对比与选型指南
编程
SGLang vs vLLM:2026年大模型推理框架深度对比与选型指南
2026-04-08 15:51:53 +0800 CST
view 2164
深度对比SGLang与vLLM两大LLM推理框架,从架构设计、核心原理、性能实测、适用场景多维度解析,附2026年选型建议
LLM
SGLang
vLLM
推理优化
大模型
Nushell 深度解析:为什么 2026 年最值得学习的 Shell 不是 Bash
编程
Nushell 深度解析:为什么 2026 年最值得学习的 Shell 不是 Bash
2026-04-18 00:47:07 +0800 CST
view 715
深入解析 2026 年最值得学习的 Shell 工具 Nushell,从架构设计、管道机制、代码实战多维度剖析,探讨它如何用结构化数据管道取代传统文本流,以及如何在生产环境中落地使用。
Nushell
Rust
Shell
命令行
Linux
当 C/C++ 遇上 Rust:llama.cpp 与 LiteBox 深度架构对比——2026 年本地 LLM 推理框架的心智模型之战
编程
当 C/C++ 遇上 Rust:llama.cpp 与 LiteBox 深度架构对比——2026 年本地 LLM 推理框架的心智模型之战
2026-07-16 12:50:04 +0800 CST
view 261
深度对比 llama.cpp 与 LiteBox 两大本地 LLM 推理框架:GGUF 格式设计、K-Quant 量化内核、KV cache 管理、多后端抽象、并发架构,配完整代码实战与性能实测数据。
llama.cpp
LiteBox
GGUF
量化
KV cache
本地LLM
推理框架
Rust
C/C++
模型压缩
分布式 LLM 推理架构深度实战:从 vLLM 单节点到 llm-d 多集群的生产级演进全链路解析
编程
分布式 LLM 推理架构深度实战:从 vLLM 单节点到 llm-d 多集群的生产级演进全链路解析
2026-05-09 03:39:58 +0800 CST
view 771
深度解析分布式 LLM 推理架构,从 vLLM 单节点到 llm-d 多集群的生产级演进。涵盖推理引擎层、编排调度层、Kubernetes 多机多卡部署实战、性能优化技巧及成本优化策略。
LLM
vLLM
分布式推理
Kubernetes
Ray
推理引擎
vLLM 0.5 深度解析:PagedAttention 架构原理与生产级 LLM 推理优化实战
编程
vLLM 0.5 深度解析:PagedAttention 架构原理与生产级 LLM 推理优化实战
2026-07-04 18:15:46 +0800 CST
view 444
深度解析 vLLM 0.5 的 PagedAttention 架构原理,涵盖 KV Cache 分页管理、MoE 优化、分布式推理、量化技术,并通过代码实战和性能对比,帮助开发者掌握生产级 LLM 推理最佳实践。
vLLM
PagedAttention
LLM推理
CUDA
KV Cache
深度学习
AI基础设施
Python
生产部署
性能优化
Cindy AI Agent 深度拆解:双 Harness 融合架构如何重新定义 AI 编程助手
编程
Cindy AI Agent 深度拆解:双 Harness 融合架构如何重新定义 AI 编程助手
2026-07-28 16:19:47 +0800 CST
view 342
深入剖析心动公司发布的开源AI Agent产品Cindy:双Harness融合架构原理、上下文连续性机制、多Agent协作模式、安全信任设计,以及它在整个2026年AI Agent生态中的独特定位。
Cindy
AI Agent
双Harness
Claude Code
Codex
Harness Engineering
多Agent协作
Context连续性
Model Routing
MCP协议
OpenClaw
2026技术趋势
开源AI
Dev Containers 深度拆解:从「机器上能跑」到「任何人点一下就跑通」的工程化实践
编程
Dev Containers 深度拆解:从「机器上能跑」到「任何人点一下就跑通」的工程化实践
2026-07-29 17:16:28 +0800 CST
view 229
深度拆解 Dev Container:从原理架构、Features 机制、多容器开发到 GitHub Actions 集成,附 Python FastAPI + PostgreSQL 完整实战,让团队彻底告别「在我机器上能跑」问题。
DevContainer
开发环境标准化
VSCode
Codespaces
Docker
Kubernetes
Python
FastAPI
工程化实践
Cua:15.9K Stars!给 AI 一台隔离云桌面,让它真正会用电脑
案例
Cua:15.9K Stars!给 AI 一台隔离云桌面,让它真正会用电脑
2026-05-11 16:22:59 +0800 CST
view 777
15.9K Stars 的开源项目 Cua,由 Y Combinator 孵化。给 AI 一个隔离云桌面,让它真的去开浏览器、点按钮、跑应用。支持 macOS/Linux/Windows/Android,三周暴涨 2000+ Stars。
Cua
AI Agent
Computer Use
云桌面
沙盒
Y Combinator
Claude Code
跨平台
OpenAI Codex 深度解析:从 AI 编程助手到全能智能体的技术进化
编程
OpenAI Codex 深度解析:从 AI 编程助手到全能智能体的技术进化
2026-05-17 15:16:02 +0800 CST
view 1171
2026年OpenAI Codex全面解析:从代码生成器到全能智能体的技术进化,含GPT-5.3-Codex架构、Computer Use原理、Codex CLI实战与Claude Code深度横评
OpenAI Codex
AI编程工具
Claude Code对比
Computer Use
GPT-5.3
软件工程Agent
DeepSeek Harness:Cordis 插件架构如何重新定义 AI Agent 的"身体"
编程
DeepSeek Harness:Cordis 插件架构如何重新定义 AI Agent 的"身体"
2026-08-14 16:17:00 +0800 CST
view 60
深度拆解 DeepSeek Harness 的 Cordis 插件架构,探讨"一切皆插件"如何重新定义 AI Agent 的执行层,对比 Claude Code、Cline 等竞品,附完整代码实战
DeepSeek Harness
Cordis
AI Agent
插件架构
Vibe Coding
AI Coding
大模型框架
TypeScript
插件化 Agent 框架新范式:DeepSeek Harness Cordis 架构深度拆解
编程
插件化 Agent 框架新范式:DeepSeek Harness Cordis 架构深度拆解
2026-08-14 16:18:17 +0800 CST
view 113
深度拆解 DeepSeek Harness 的 Cordis 插件架构,探讨"一切皆插件"如何重新定义 AI Agent 的执行层,对比 Claude Code、Cline 等竞品,附完整代码实战
DeepSeek Harness
Cordis
AI Agent
插件架构
Vibe Coding
AI Coding
大模型框架
TypeScript
小米 MiMo Code 深度解析:从 Max Mode 到四层记忆体系,一次把国产 AI Coding Agent 讲透(2026 深度长文)
编程
小米 MiMo Code 深度解析:从 Max Mode 到四层记忆体系,一次把国产 AI Coding Agent 讲透(2026 深度长文)
2026-07-13 15:43:45 +0800 CST
view 572
深度拆解小米 MiMo Code AI编程助手:从 Max Mode 多采样决策、四层记忆体系、Dynamic Workflow 到插件生态,配完整代码示例与性能基准。
MiMo Code
AI编程助手
Coding Agent
Max Mode
四层记忆体系
OpenCode
MiMo
Bun
TypeScript
AI编程
微软Build 2026全解析:自研MAI模型矩阵、Scout Agent与Agent优先战略大转身
编程
微软Build 2026全解析:自研MAI模型矩阵、Scout Agent与Agent优先战略大转身
2026-06-05 03:13:37 +0800 CST
view 745
深度解析微软Build 2026开发者大会:7款自研MAI模型矩阵、Scout Agent、Project Solara与Windows Agent优先战略,从开发者视角分析微软分手OpenAI的战略意图。
Microsoft,Build2026,MAI,AI模型,Scout,Agent,GitHubCopilot,VSCode
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调
回调
上一页
1
...
57
58
59
60
61
...
95
下一页