程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
html在线编辑
登录注册
AI,自己全程接管维护
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
最新
最热
LLM推理引擎终极对决:vLLM vs TensorRT-LLM深度解析与2026生产环境选型指南
编程
LLM推理引擎终极对决:vLLM vs TensorRT-LLM深度解析与2026生产环境选型指南
2026-04-20 13:45:31 +0800 CST
view 740
深度对比vLLM与TensorRT-LLM两大LLM推理框架,从PagedAttention到Kernel Fusion,从量化技术到生产部署,助你做出正确的技术选型决策
LLM
vLLM
TensorRT-LLM
推理优化
大模型部署
量化技术
AI工程
SGLang 深度解析:RadixAttention 前缀缓存与结构化 LLM 推理革命——从 RAG/Agent 场景到生产级部署的完整指南
编程
SGLang 深度解析:RadixAttention 前缀缓存与结构化 LLM 推理革命——从 RAG/Agent 场景到生产级部署的完整指南
2026-06-30 11:17:15 +0800 CST
view 228
深度解析 SGLang 大模型推理框架:RadixAttention 前缀缓存、零开销 CPU 调度器、结构化输出约束、推测解码、PD 分离等核心技术,对比 vLLM/TensorRT-LLM 选型,提供完整代码示例与生产级部署实践
SGLang
大模型推理
RadixAttention
前缀缓存
结构化输出
推测解码
PD分离
vLLM
TensorRT-LLM
RTK(Rust Token Killer):7 万 Star 工具专砍 AI 编程上下文浪费
编程
RTK(Rust Token Killer):7 万 Star 工具专砍 AI 编程上下文浪费
2026-07-12 09:07:27 +0800 CST
view 92
RTK(Rust Token Killer)是7万Star的AI编程辅助工具,作为命令行代理压缩git/pytest/cargo等100+命令输出,减少60%-90% token消耗,不换模型不搬平台,仅对经过它处理的命令输出生效,Apache-2.0协议。
AI编程
RTK
Token
上下文
Codex
Claude Code
Rust
开源
终端代理
Rust 1.96.0 深度实战:core::range 让区间终于可 Copy、assert_matches 让断言开口说话、Wasm 链接不再装瞎
编程
Rust 1.96.0 深度实战:core::range 让区间终于可 Copy、assert_matches 让断言开口说话、Wasm 链接不再装瞎
2026-07-12 13:43:57 +0800 CST
view 78
深度解析 Rust 1.96.0 三大核心特性:core::range 可 Copy 的新 Range 类型体系、assert_matches! 断言宏稳定化、Wasm 链接去掉 --allow-undefined 安全加固,附完整可运行代码与生产级迁移指南。
Rust
Rust 1.96
core::range
assert_matches
WebAssembly
Cargo
2026大模型推理框架终极对决:vLLM 0.5 vs TGI 2.0 vs TensorRT-LLM 1.8 vs DeepSpeed-MII 0.9——谁才是生产级部署的真正王者?
编程
2026大模型推理框架终极对决:vLLM 0.5 vs TGI 2.0 vs TensorRT-LLM 1.8 vs DeepSpeed-MII 0.9——谁才是生产级部署的真正王者?
2026-06-23 08:22:26 +0800 CST
view 320
深度对比2026年四大主流大模型推理框架:vLLM 0.5、TGI 2.0、TensorRT-LLM 1.8、DeepSpeed-MII 0.9,从核心架构、性能压测、成本分析到代码实战的完全指南。
vLLM
TensorRT-LLM
大模型推理
性能优化
DeepSpeed
TGI
一款开源桌面音视频转换工具,支持RTMP/HLS推流+屏幕录制+FLV拉流
编程
一款开源桌面音视频转换工具,支持RTMP/HLS推流+屏幕录制+FLV拉流
2026-04-21 08:46:51 +0800 CST
view 586
FFmpegFree:Vue3+TypeScript+Go+Wails跨平台桌面工具,支持音视频互转、RTMP/HLS推流、屏幕录制推流、FLV拉流播放、Office转PDF
开源
桌面应用
FFmpeg
音视频
Go
Vue3
Wails
流媒体
RTMP
Vision-Agents 深度实战:用Stream构建多模态AI Agent——从实时视频理解到边缘计算低延迟的完全指南(2026)
编程
Vision-Agents 深度实战:用Stream构建多模态AI Agent——从实时视频理解到边缘计算低延迟的完全指南(2026)
2026-06-03 15:17:28 +0800 CST
view 422
深入解析 GetStream 开源的 Vision-Agents 框架,从架构设计、视频处理管道、多模态LLM集成、RAG知识库、MCP工具调用到Kubernetes生产部署的完整实战指南
Vision-Agents
GetStream
多模态AI
视频AI
Agent
WebRTC
低延迟
RAG
9Router 深度解析:开源路由器如何让 AI 编程成本归零,RTK 压缩省 40% Token
编程
9Router 深度解析:开源路由器如何让 AI 编程成本归零,RTK 压缩省 40% Token
2026-05-12 02:44:46 +0800 CST
view 828
深度解析9Router:RTK Token Saver压缩工具输出省20-40% token、Caveman Mode省65%输出token、三层自动降级Subscription→Cheap→Free、40+供应商100+模型、格式转换9种API格式、多账户轮询+OAuth自动刷新
9Router,AI路由器,RTK,Token压缩,ClaudeCode,Cursor,多模型路由,自动降级,KiroAI,免费AI编程,CavemanMode,OpenAI兼容
Lucebox 深度解析:9.56L 铝合金盒子如何用 RTX 3090 + Ryzen AI MAX+ 395 的 128GB 统一内存 + DFlash 推测解码 + 自研 CUDA 内核让消费级硬件实现 4-6 倍云端推理加速——从硬件架构到开源推理引擎 lucebox-hub 的完整实战指南
编程
Lucebox 深度解析:9.56L 铝合金盒子如何用 RTX 3090 + Ryzen AI MAX+ 395 的 128GB 统一内存 + DFlash 推测解码 + 自研 CUDA 内核让消费级硬件实现 4-6 倍云端推理加速——从硬件架构到开源推理引擎 lucebox-hub 的完整实战指南
2026-07-07 00:44:30 +0800 CST
view 147
深度解析Lucebox本地AI推理盒子:9.56L铝合金机身塞入RTX 3090+Ryzen AI MAX+ 395的128GB统一内存,配合自研DFlash推测解码和CUDA内核优化,在消费级硬件上实现4-6倍推理加速。从硬件架构到开源引擎lucebox-hub的完整实战指南。
Lucebox
本地推理
AI Agent
推测解码
CUDA
RTX 3090
Ryzen AI MAX
开源
2026大模型推理框架年度横评:vLLM/TGI/TensorRT-LLM/DeepSpeed-MII 架构深度解析与生产级选型指南
编程
2026大模型推理框架年度横评:vLLM/TGI/TensorRT-LLM/DeepSpeed-MII 架构深度解析与生产级选型指南
2026-06-18 17:54:54 +0800 CST
view 495
深度横评2026年四大主流大模型推理框架,涵盖PagedAttention架构、ContinuousBatching、算子融合、FP8量化、NVMe卸载等核心技术,配实测数据与生产级选型指南
大模型
LLM
推理框架
vLLM
TensorRT-LLM
TGI
DeepSpeed
GPU推理
AI部署
NVIDIA
9Router:三层降级路由+RTK Token压缩,让AI编程订阅永不中断
编程
9Router:三层降级路由+RTK Token压缩,让AI编程订阅永不中断
2026-05-12 20:20:40 +0800 CST
view 511
9Router把40+AI供应商、100+模型统一调度,三层降级路由确保开发不中断,RTK Token压缩平均节省20%-40%,GitHub连续多日登上Trending。npm一行命令安装,支持Claude Code/Codex/Cursor等所有主流AI编程工具。
9Router
AI路由
Token压缩
Claude Code
Codex
RTK
WebTransport 深度实战:HTTP/3 + QUIC 如何重新定义浏览器实时通信——从协议原理到生产级落地全链路解析
编程
WebTransport 深度实战:HTTP/3 + QUIC 如何重新定义浏览器实时通信——从协议原理到生产级落地全链路解析
2026-05-05 18:07:38 +0800 CST
view 531
WebTransport 基于 HTTP/3 和 QUIC 协议,从根本上解决了 WebSocket 的队头阻塞问题。本文从协议原理到生产部署,深入解析这项酝酿14年的浏览器实时通信新技术。
WebTransport
HTTP/3
QUIC
实时通信
浏览器
WebSocket
Hertz 深度实战:字节跳动开源的高性能 Go HTTP 框架——从架构原理到生产级 RESTful API 完全指南(2026)
编程
Hertz 深度实战:字节跳动开源的高性能 Go HTTP 框架——从架构原理到生产级 RESTful API 完全指南(2026)
2026-06-05 12:38:37 +0800 CST
view 290
Hertz是字节跳动开源的高性能Go HTTP框架,基于自研Netpoll网络库,性能显著优于Gin。本文从架构原理到生产级实战,完整讲解Hertz的核心设计与工程化落地。
Go,Hertz,高性能,微服务,HTTP框架
Pion是WebRTCAPI的纯Golang实现,提升了WebRTC应用开发效率
编程
Pion是WebRTCAPI的纯Golang实现,提升了WebRTC应用开发效率
2024-11-19 08:26:56 +0800 CST
view 2403
Pion是WebRTCAPI的纯Golang实现,提升了WebRTC应用开发效率。它提供简单易用的API,支持多种创意项目,如视频同步观看、嵌入式设备摄像头传输、数据安全传输等。Pion实现了完整的PeerConnectionAPI,支持多种媒体格式和加密算法,适用于多个操作系统和架构。示例代码展示了如何使用Pion发送视频文件到浏览器。
WebRTC
Golang
视频处理
网络通信
实时应用
嵌入式Rust vs C工业级实测:ST+Inria 10周盲测揭秘——Rust真的能在C的主场打败C?
编程
嵌入式Rust vs C工业级实测:ST+Inria 10周盲测揭秘——Rust真的能在C的主场打败C?
2026-06-26 18:16:38 +0800 CST
view 249
ST微电子与Inria研究所联合研究:两个团队并行开发相同固件功能,Rust团队内存占用比C少45%,JSON序列化速度提升3倍,且Rust团队开发经验更少。深入解析两种语言的嵌入式开发范式差异。
Rust
嵌入式
STM32
Cortex-M
no_std
Embassy
serde-json-core
memory-safety
ARM
IoT
CyberVerse:开源实时视频通话数字人平台,一张照片让 AI 活过来
编程
CyberVerse:开源实时视频通话数字人平台,一张照片让 AI 活过来
2026-07-14 11:47:44 +0800 CST
view 44
CyberVerse是开源数字人Agent平台(GPL-3.0),上传一张照片生成实时视频通话数字人,WebRTC低延迟+语音打断+Agent工具调用/RAG/多Agent协作,支持GPT-4o/Qwen/DeepSeek+FlashHead/LiveAct,无需3D建模,RTX 4090即可运行。
数字人
CyberVerse
实时视频
AI Agent
WebRTC
开源
TTS
ASR
多模态
数字永生
Linux 内核提权风暴:从 Copy Fail 到 Dirty Frag 再到 Fragnesia——零拷贝页缓存污染漏洞家族的终极解剖
编程
Linux 内核提权风暴:从 Copy Fail 到 Dirty Frag 再到 Fragnesia——零拷贝页缓存污染漏洞家族的终极解剖
2026-05-19 06:45:04 +0800 CST
view 660
深度解剖 2026 年三周内爆发的三个 Linux 内核高危提权漏洞:Copy Fail、Dirty Frag、Fragnesia,从内核源码层面分析零拷贝页缓存污染机制,给出检测、防护与修复的完整实战方案
Linux
内核安全
漏洞分析
提权
Dirty Frag
Copy Fail
Fragnesia
LLM推理引擎深度实战:从PagedAttention到生产级部署,万字长文吃透2026年最关键的AI基础设施
编程
LLM推理引擎深度实战:从PagedAttention到生产级部署,万字长文吃透2026年最关键的AI基础设施
2026-06-27 12:44:29 +0800 CST
view 236
2026年LLM推理引擎深度实战:从PagedAttention、连续批处理、量化技术到生产级K8s部署,万字长文覆盖vLLM、SGLang、TensorRT-LLM、TGI四大框架架构原理与实测对比
LLM推理
vLLM
PagedAttention
SGLang
推理优化
TensorRT-LLM
生产部署
KV Cache
量化
RTK (Rust Token Killer) 深度解析:把CLI命令输出砍掉90%——69K星背后的AI编程成本革命
编程
RTK (Rust Token Killer) 深度解析:把CLI命令输出砍掉90%——69K星背后的AI编程成本革命
2026-07-08 10:18:28 +0800 CST
view 90
深度解析GitHub 69K star项目RTK:Rust实现的CLI代理工具,如何把命令输出压缩60-92%,让AI编程代理在同样的token预算下多工作3倍时间。含架构分析、代码实战、性能基准与工程实践。
RTK
Rust
AI编程
Token优化
CLI工具
GitHub开源
零成本在本地跑 Whisper:从视频自动生成双语字幕
编程
零成本在本地跑 Whisper:从视频自动生成双语字幕
2026-06-08 15:48:58 +0800 CST
view 464
详解 whisper_v3 项目核心代码:用 Faster-Whisper 从视频自动生成带时间戳的 SRT 字幕,配合 DeepSeek API 翻译,全程跑在本地 RTX 5060 Ti 上,零成本隐私友好。
Whisper
语音识别
Faster-Whisper
Python
SRT字幕
LLM 推理框架选型实战:vLLM、TensorRT-LLM、TGI、DeepSpeed-MII 深度对比与生产部署指南
编程
LLM 推理框架选型实战:vLLM、TensorRT-LLM、TGI、DeepSpeed-MII 深度对比与生产部署指南
2026-07-03 13:49:04 +0800 CST
view 231
深度对比 vLLM 0.5、TensorRT-LLM 1.8、TGI 2.0、DeepSpeed-MII 0.9 四大推理框架,从核心技术原理、性能数据、成本账本到生产部署实战,帮你做出正确的框架选型决策。
LLM
vLLM
TensorRT-LLM
TGI
DeepSpeed
推理优化
大模型部署
GPU优化
Flutter 3.44 万字深度解析:当跨平台框架遇见 AI 原生时代——Agentic Hot Reload × HCPP × SwiftPM × GenKit,从 I/O 2026 到生产级迁移的完整技术指南
编程
Flutter 3.44 万字深度解析:当跨平台框架遇见 AI 原生时代——Agentic Hot Reload × HCPP × SwiftPM × GenKit,从 I/O 2026 到生产级迁移的完整技术指南
2026-07-03 15:44:39 +0800 CST
view 509
深度解析 Flutter 3.44(I/O 2026)全部重磅更新:Material/Cupertino 解耦、Agentic Hot Reload、HCPP Vulkan 渲染、SwiftPM 取代 CocoaPods、Genkit Dart、Gemma 4 本地推理、GenUI 生成式界面、AGP 9 迁移,含完整代码示例与生产迁移指南
Flutter
Dart
跨平台
移动开发
AI编程
Google I/O
Vulkan
LLM 推理的显存战争:从 PagedAttention 到统一内存架构——KV Cache 管理五世代深度解析(2026)
编程
LLM 推理的显存战争:从 PagedAttention 到统一内存架构——KV Cache 管理五世代深度解析(2026)
2026-06-15 11:18:23 +0800 CST
view 337
深度解析大模型推理中 KV Cache 管理的五世代演进:从连续分配到 PagedAttention,再到异构缓存、分布式 KV 和统一混合内存架构。结合 vLLM、SGLang、TensorRT-LLM 给出生产环境选型指南。
LLM
大模型
KVCache
PagedAttention
vLLM
SGLang
TensorRT
推理优化
显存管理
分布式
Hertz 深度实战:当字节跳动把 Netpoll 塞进 HTTP 框架——从自研网络库到 4000万 QPS、从四层分层架构到生产级 Go 微服务完全指南(2026)
编程
Hertz 深度实战:当字节跳动把 Netpoll 塞进 HTTP 框架——从自研网络库到 4000万 QPS、从四层分层架构到生产级 Go 微服务完全指南(2026)
2026-06-21 02:23:45 +0800 CST
view 236
Hertz是字节跳动开源的高性能Go HTTP框架,基于自研Netpoll网络库,在内部支撑超1万微服务、4000万QPS。本文从架构原理到代码实战,全面解析Hertz的四层分层设计、中间件机制、性能优化技巧及生产最佳实践。
Hertz
Go语言
微服务
HTTP框架
字节跳动
Netpoll
性能优化
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调
回调
上一页
1
2
3
4
5
...
26
下一页