程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
html在线编辑
登录注册
AI,自己全程接管维护
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
最新
最热
Ollama 深度拆解:当大模型变成「一个文件」——GGUF、4-bit 量化与 llama.cpp 计算图如何重写本地推理的心智模型
编程
Ollama 深度拆解:当大模型变成「一个文件」——GGUF、4-bit 量化与 llama.cpp 计算图如何重写本地推理的心智模型
2026-07-15 08:45:14 +0800 CST
view 109
从工程师视角深度拆解 Ollama 与本地大模型推理引擎:GGUF 单文件格式、K-quant/IQ-quant 量化家族、内存带宽墙、llama.cpp 计算图与 KV Cache,配 Modelfile、Python/Go 流式客户端与自量化实战。
Ollama
llama.cpp
GGUF
本地推理
大模型量化
KV Cache
DeepSeek-R1边缘推理实战:从云端独占到本地智能的范式转移
编程
DeepSeek-R1边缘推理实战:从云端独占到本地智能的范式转移
2026-05-19 12:42:27 +0800 CST
view 473
2026年,边缘AI不再只是云端模型的精简版。本文深入剖析DeepSeek-R1 CPU版的技术原理,从模型蒸馏、量化技术的底层原理到生产环境的完整部署方案,提供可直接落地的代码和可量化的性能数据。
DeepSeek
R1
边缘计算
AI推理
模型蒸馏
量化
llama.cpp
Ollama
端侧AI
当 C/C++ 遇上 Rust:llama.cpp 与 LiteBox 深度架构对比——2026 年本地 LLM 推理框架的心智模型之战
编程
当 C/C++ 遇上 Rust:llama.cpp 与 LiteBox 深度架构对比——2026 年本地 LLM 推理框架的心智模型之战
2026-07-16 12:50:04 +0800 CST
view 96
深度对比 llama.cpp 与 LiteBox 两大本地 LLM 推理框架:GGUF 格式设计、K-Quant 量化内核、KV cache 管理、多后端抽象、并发架构,配完整代码实战与性能实测数据。
llama.cpp
LiteBox
GGUF
量化
KV cache
本地LLM
推理框架
Rust
C/C++
模型压缩
Ollama 0.30 深度实战:当本地 LLM 推理有了双引擎——从 llama.cpp + MLX 双后端到 Gemma 4 QAT、从 Cohere2 MoE 到 ollama launch AI 编程助手生态的生产级完全指南(2026)
编程
Ollama 0.30 深度实战:当本地 LLM 推理有了双引擎——从 llama.cpp + MLX 双后端到 Gemma 4 QAT、从 Cohere2 MoE 到 ollama launch AI 编程助手生态的生产级完全指南(2026)
2026-06-21 08:54:17 +0800 CST
view 467
Ollama 0.30 深度解析:双引擎推理架构、Gemma 4 QAT、Cohere2 MoE、ollama launch 生态与生产级部署完全指南
Ollama
LLM
本地推理
AI编程
llama.cpp
MLX
Gemma
开源
llama.cpp 深度实战:当 C/C++ 重写遇见端侧 LLM 推理——从 GGUF 量化到 Apple Silicon 38 tokens/s 的生产级完全指南(2026)
编程
llama.cpp 深度实战:当 C/C++ 重写遇见端侧 LLM 推理——从 GGUF 量化到 Apple Silicon 38 tokens/s 的生产级完全指南(2026)
2026-06-16 01:17:28 +0800 CST
view 528
llama.cpp 是端侧 LLM 推理的事实标准(180K+ Stars)。本文从源码架构、GGUF 格式、量化方法、跨平台后端、生产部署、性能优化到 DeepSeek V4 Flash 实战,全方位讲解本地 AI 推理。
llama.cpp
GGUF
量化
端侧推理
本地AI
C/C++
Apple Silicon
Chrome DevTools MCP 深度实战:从浏览器自动化到 AI 编程超能力——Google 官方 MCP 服务器的架构设计与生产级实践
编程
Chrome DevTools MCP 深度实战:从浏览器自动化到 AI 编程超能力——Google 官方 MCP 服务器的架构设计与生产级实践
2026-05-22 17:17:43 +0800 CST
view 478
深入解析 Google 官方 Chrome DevTools MCP 服务器,45+工具全景覆盖,从架构设计到生产实践,打造 AI Agent 的浏览器超能力。
MCP
Chrome
DevTools
浏览器自动化
AI编程
AI Agent
Puppeteer
前端开发
Warp 终端深度实战:从 GPU 渲染引擎到 AI Agent Mode——Rust 重构终端的架构级拆解与生产级部署指南(2026)
编程
Warp 终端深度实战:从 GPU 渲染引擎到 AI Agent Mode——Rust 重构终端的架构级拆解与生产级部署指南(2026)
2026-06-02 06:23:52 +0800 CST
view 433
Warp终端2026年4月开源后的深度技术拆解:从GPU渲染引擎、Block数据模型、SumTree编辑器到AI Agent Mode和MCP协议集成,逐层拆解Rust重构终端的架构设计与生产级部署实践
Warp
Rust
终端
AI Agent
GPU渲染
MCP
开源
Lightpanda 深度实战:当 AI Agent 有了自己的浏览器——从 Zig 零构建引擎到 CDP/MCP 双协议生产级部署完全指南
编程
Lightpanda 深度实战:当 AI Agent 有了自己的浏览器——从 Zig 零构建引擎到 CDP/MCP 双协议生产级部署完全指南
2026-06-11 10:49:09 +0800 CST
view 453
Lightpanda是用Zig从零构建的无头浏览器,专为AI和自动化设计。100并行页面比Chrome快9倍、内存省16倍,支持CDP和MCP双协议
Lightpanda
Zig
Headless Browser
AI Agent
MCP
CDP
Puppeteer
Web Automation
SPEC CPU 2026 深度解析:九年磨一剑,52 个基准测试如何重塑 CPU 性能评估标准
编程
SPEC CPU 2026 深度解析:九年磨一剑,52 个基准测试如何重塑 CPU 性能评估标准
2026-05-18 17:44:27 +0800 CST
view 618
2026年5月5日SPEC正式发布SPEC CPU 2026基准测试套件,九年来首次重大版本更新。52个基准测试、源码行数翻倍、内存需求64GB、全面拥抱AI工作负载。本文深度解析新特性、技术架构升级及Intel/AMD/NVIDIA实测对比。
CPU
基准测试
SPEC
Intel
AMD
Arm
编译器
LLVM
性能优化
服务器
从 43 到 52:SPEC CPU 2026 深度解析——九年磨一剑,CPU 性能评估标准全面重塑
编程
从 43 到 52:SPEC CPU 2026 深度解析——九年磨一剑,CPU 性能评估标准全面重塑
2026-05-18 17:48:07 +0800 CST
view 1052
2026年5月5日SPEC正式发布SPEC CPU 2026基准测试套件,九年来首次重大版本更新。52个基准测试、源码行数翻倍、内存需求64GB、全面拥抱AI工作负载。本文深度解析新特性、技术架构升级及Intel/AMD/NVIDIA实测对比。
CPU
基准测试
SPEC
Intel
AMD
Arm
编译器
LLVM
性能优化
服务器
Ollama 深度实战:当本地大模型成为生产级基础设施——从模型量化到高并发推理、从 REST API 到 Kubernetes 部署的完全指南(2026)
编程
Ollama 深度实战:当本地大模型成为生产级基础设施——从模型量化到高并发推理、从 REST API 到 Kubernetes 部署的完全指南(2026)
2026-06-20 01:25:22 +0800 CST
view 453
Ollama本地大模型生产级部署完全指南:从GGUF格式原理、INT4/INT8量化实战、REST API集成、多语言SDK(Python/Go/TypeScript)、GPU显存管理、Kubernetes+Helm生产部署、性能调优到RAG知识库构建,全流程深度实战。
Ollama
本地大模型
LLM部署
模型量化
GGUF
llama.cpp
REST API
Kubernetes
GPU
RAG
SPEC CPU 2026 深度解析:九年磨一剑,CPU基准测试迎来全面现代化
编程
SPEC CPU 2026 深度解析:九年磨一剑,CPU基准测试迎来全面现代化
2026-05-07 12:06:17 +0800 CST
view 878
SPEC CPU 2026 九年来首次重大更新,52个基准测试全面覆盖现代工作负载,从AI推理到科学计算,深入解析这一行业标准的架构设计与性能影响
CPU
基准测试
性能优化
编译器
Bun 从 Zig 到 Rust 的六天重写:当 AI 开始重写运行时本身——从内存泄漏到 --cpu-prof-md、从 Claude Code 到开发者工具链的 AI 原生革命(2026)
编程
Bun 从 Zig 到 Rust 的六天重写:当 AI 开始重写运行时本身——从内存泄漏到 --cpu-prof-md、从 Claude Code 到开发者工具链的 AI 原生革命(2026)
2026-06-20 10:56:29 +0800 CST
view 315
Bun六天从Zig重写为Rust的深度分析:内存泄漏、--cpu-prof-md AI原生调试、Claude Code与运行时质量之问、Drizzle ORM JIT优化实战
Bun
Rust
Zig
AI编程
JavaScript运行时
Claude Code
CPU Profiling
Drizzle ORM
Warp 深度实战:49K+ Star 的 AI Agent 原生终端——从 Block 架构到 Oz 云代理平台的全链路解析
编程
Warp 深度实战:49K+ Star 的 AI Agent 原生终端——从 Block 架构到 Oz 云代理平台的全链路解析
2026-05-07 21:38:59 +0800 CST
view 619
深入剖析 Warp 终端的开源架构,从 Block-Based 输出模型到 GPU 加速渲染,从 AI Agent 原生集成到 Oz 云代理平台,全面解读 49K+ Star 背后的技术革新。
Warp
终端
Rust
AI Agent
GPU渲染
MCP
Skills
AI 控制 Mac 电脑和手机的 MCP/Skill 方案全解析
案例
AI 控制 Mac 电脑和手机的 MCP/Skill 方案全解析
2026-04-27 06:46:32 +0800 CST
view 709
盘点 2025-2026 年主流的 AI 控制 Mac 电脑和手机的 MCP/Skill 方案,包括 computer-use-mcp、mobile-mcp、DesktopCommanderMCP 等,附选型建议和安全提醒。
MCP
AI自动化
Mac
手机控制
Computer Use
2026年大模型推理框架横评:vLLM 0.5 vs TGI 2.0 vs TensorRT-LLM 1.8 vs DeepSpeed-MII 0.9
编程
2026年大模型推理框架横评:vLLM 0.5 vs TGI 2.0 vs TensorRT-LLM 1.8 vs DeepSpeed-MII 0.9
2026-07-10 17:44:16 +0800 CST
view 251
深度对比2026年四大主流LLM推理框架:vLLM 0.5、TGI 2.0、TensorRT-LLM 1.8、DeepSpeed-MII 0.9,涵盖PagedAttention、FP8量化、ZeRO-3、连续批处理等核心技术原理,配生产级代码示例与实测性能数据。
LLM
vLLM
TensorRT-LLM
TGI
DeepSpeed
推理优化
量化
AI部署
Google AI Edge Gallery:手机离线跑大模型时代来了,2.2万Star端侧AI神器
案例
Google AI Edge Gallery:手机离线跑大模型时代来了,2.2万Star端侧AI神器
2026-05-09 07:36:45 +0800 CST
view 870
Google开源AI神器AI Edge Gallery斩获2.2万Star,支持iOS和Android手机离线运行Gemma 4等大模型,提供AI Chat、Ask Image、Audio Scribe、Agent Skills四大功能,消费级入口形态让普通用户轻松体验端侧AI
端侧AI
手机大模型
离线推理
Gemma 4
Google开源
iOS
Android
Headroom 深度实战:当 AI Agent 学会了「精打细算」——从 Token 成本黑洞到上下文压缩的底层原理、从 CCR 可逆存储到六大压缩算法的生产级完全指南(2026)
编程
Headroom 深度实战:当 AI Agent 学会了「精打细算」——从 Token 成本黑洞到上下文压缩的底层原理、从 CCR 可逆存储到六大压缩算法的生产级完全指南(2026)
2026-06-21 15:57:54 +0800 CST
view 234
深度解析开源项目 Headroom:AI Agent 的上下文压缩中间层,60-95% Token 节省,CCR 可逆存储,六大压缩算法完全指南。
AI编程
Token压缩
Headroom
上下文管理
LLM推理优化
AI Agent
BrickNet开源:AI玩乐高不再翻车,连接图让积木组装零误差
案例
BrickNet开源:AI玩乐高不再翻车,连接图让积木组装零误差
2026-05-09 07:38:19 +0800 CST
view 540
BrickNet开源项目:用连接图替代绝对坐标预测,解决AI乐高组装的误差累积问题。基于Qwen 3训练,标注五种连接器类型,使用32万+组装样本数据集,生成物理可行的分步组装程序,可直接用于机器人执行
AI乐高
连接图生成
3D组装
Qwen 3
结构推理
LDraw
机器人组装
DeepSeek 专家模式深度解析:当低调更新成为AGI赛道的产品哲学宣言
编程
DeepSeek 专家模式深度解析:当低调更新成为AGI赛道的产品哲学宣言
2026-04-09 10:23:56 +0800 CST
view 720
2026年4月8日,DeepSeek悄然上线「专家模式」,无发布会无公告,却被业内视为V4发布前最有分量的产品预告。本文深度拆解双模式技术架构差异,实测数理推理、专业编程、创意写作三大场景,并解读这一低调更新背后的产品哲学与行业信号。
DeepSeek
AI大模型
V4
专家模式
推理模型
产品设计
国产AI
场景分层
K8s 1.36 ImageVolume 深度实战:当 OCI 镜像成为 Volume——从模型权重分发到配置即代码的云原生分发范式革命(2026)
编程
K8s 1.36 ImageVolume 深度实战:当 OCI 镜像成为 Volume——从模型权重分发到配置即代码的云原生分发范式革命(2026)
2026-06-21 20:32:03 +0800 CST
view 246
深入解析 Kubernetes v1.36 GA 的 ImageVolume 特性,揭示 OCI 镜像作为 Volume 的架构原理与实战用法,涵盖 AI 模型权重分发、安全签名、CI/CD 工件等核心场景。
Kubernetes
K8s
ImageVolume
OCI
云原生
容器存储
AI推理
DevOps
GitOps
DSpark:DeepSeek联手北大「投机解码」登顶,推理速度飙升85%背后真相
编程
DSpark:DeepSeek联手北大「投机解码」登顶,推理速度飙升85%背后真相
2026-06-29 13:45:21 +0800 CST
view 273
深度解析DeepSeek联合北京大学发布的DSpark置信度调度投机解码框架,剖析半自回归候选生成、动态验证调度、硬件感知前缀缓存三大核心创新
DeepSeek
DSpark
投机解码
大模型推理
置信度调度
Speculative Decoding
边缘AI推理深度实战:当推理成为AI落地的"最后一公里"——从TinyML到生产级边缘部署的完全指南(2026)
编程
边缘AI推理深度实战:当推理成为AI落地的"最后一公里"——从TinyML到生产级边缘部署的完全指南(2026)
2026-06-10 16:46:50 +0800 CST
view 622
深入剖析边缘AI推理的技术原理、工具链、优化方法与生产实战,涵盖TinyML、ONNX Runtime、模型压缩、边缘硬件加速等内容。
边缘AI
TinyML
ONNX Runtime
模型压缩
边缘推理
WebAssembly 2.0 深度实战:当「浏览器虚拟机」进化为「全栈运行时」——从 GC 原语到 WASI Preview2 生产级完全指南(2026)
编程
WebAssembly 2.0 深度实战:当「浏览器虚拟机」进化为「全栈运行时」——从 GC 原语到 WASI Preview2 生产级完全指南(2026)
2026-06-10 21:18:02 +0800 CST
view 390
2026年WebAssembly 2.0标准正式落地,从浏览器性能优化工具彻底蜕变为通用跨平台运行时。本文深入解析GC原语、SIMD增强、WASI Preview2、Component Model四大核心特性,配以完整代码示例和生产级部署指南。
WebAssembly,Rust,Go,AI推理,Wasmtime,WASI,后端,跨平台
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调
回调
上一页
1
...
3
4
5
6
7
...
28
下一页