程序员茄子
全部
编程
代码
资讯
案例
综合
联系我们
NPU 相关技术文章
php
mysql
shell
go
vue
css
api接口对接
支付接口对接
Intel OpenVINO 2026.3 深度拆解:让 300 亿参数 MoE 模型跑进 16GB 内存的工程实践
编程
Intel OpenVINO 2026.3 深度拆解:让 300 亿参数 MoE 模型跑进 16GB 内存的工程实践
2026-08-09 03:16:31
深度拆解 Intel OpenVINO 2026.3:MoE 模型磁盘卸载(16GB 运行 30B MoE)、FP8 量化、NNCF、持续批处理、至强 6+ AMX 加速、Omni 多模态流水线等核心新特性,含可运行代码与十大生产踩坑清单。
OpenVINO
Intel
AI推理
模型部署
LLM
MoE
FP8量化
持续批处理
异构计算
NPU
CPU优化
边缘AI推理首次超越云端训练:从模型压缩到NPU优化的全栈技术实战
编程
边缘AI推理首次超越云端训练:从模型压缩到NPU优化的全栈技术实战
2026-07-31 12:14:22
深度解析边缘AI推理市场首次超越云端训练的技术突破:W4A16混合精度量化、NPU架构设计、算子融合与KV Cache优化、端云协同架构实战,以及1-bit模型、端侧MoE等前沿趋势。
边缘计算
AI推理
NPU
模型量化
端云协同
XY-Serve 深度实战:当昇腾 NPU 终于学会「驯服动态负载」——从元原语分解、Token级调度到 Attention/Linear 双内核优化的完整工程指南(2026)
编程
XY-Serve 深度实战:当昇腾 NPU 终于学会「驯服动态负载」——从元原语分解、Token级调度到 Attention/Linear 双内核优化的完整工程指南(2026)
2026-07-21 08:20:26
华为联合清华大学开源的 XY-Serve 论文被 ASPLOS 2026 录用,解决了 NPU 上高效运行动态 LLM 负载的核心挑战。吞吐量提升95%,Attention 内核提速21.5%,Linear 内核提速14.6%。
XY-Serve
华为昇腾
NPU
LLM推理
Meta-Attention
虚拟填充
动态负载
ASPLOS
AI基础设施
万字深度解析 HAMi:当 KubeCon EU 2026 把 GPU 调度器推向云原生 AI 基础设施舞台中央——从异构算力虚拟化到 K8s 生产级部署的完整技术指南(2026)
编程
万字深度解析 HAMi:当 KubeCon EU 2026 把 GPU 调度器推向云原生 AI 基础设施舞台中央——从异构算力虚拟化到 K8s 生产级部署的完整技术指南(2026)
2026-07-02 17:16:43
深度解析 HAMi 项目在 KubeCon EU 2026 的亮相,涵盖异构算力虚拟化原理、K8s 生产部署实践、性能优化与监控体系
HAMi
GPU调度
Kubernetes
云原生
AI基础设施
KubeCon
异构算力
NPU
CNCF
vGPU
2026年端侧AI千亿参数突破深度解析:从量化技术到NPU架构,手机如何跑赢云端大模型
编程
2026年端侧AI千亿参数突破深度解析:从量化技术到NPU架构,手机如何跑赢云端大模型
2026-04-22 03:52:11
深度解析2026年端侧AI千亿参数突破的技术原理:从INT4量化到MoE架构,从存算一体NPU到动态内存优化,揭示手机如何跑赢云端大模型的核心工程密码。
AI
端侧AI
大模型
量化
NPU
大家都在搜索什么?
devops
易支付
一个官网+多少钱
统一接受回调
统一回调
python
sub
node
宝塔日志
mysql
shell
ElasticSearch
css
vue
api接口对接
2025
支付接口对接
go
php
php回调