今天看啥
专栏 RSS订阅(公众号)
温馨提示:订阅专栏后我们将尽力更新;开通 稳定极速订阅 可获得稳定更新保障,并降低更新延迟;无人订阅的专栏有可能不会更新
程序化API访问方法
基础API: 未开通,请先订阅专栏再开通
高级API: 未开通,请先订阅专栏再开通
扩展API接口一: 未开通,请先订阅专栏再开通
提交新专栏
专栏 二维码
今天看啥Skill
TodayRss-海外RSS稳定源
今天看啥
公众号rss, 微信rss, 微信公众号rss订阅, 稳定的RSS源
他们也喜欢这个专栏
 • 
RSS订阅
今天看啥  ›  专栏  ›  GiantPandaLLM
专注于大语言模型,CUDA,编译器,工程部署和优化等多个方向技术分享。我们不仅坚持原创,也规范转载知乎大佬们的高质量博文。希望在传播知识、分享知识的同时能够启发你,在人类通往AGI的道路上互相帮助(・ω\x26lt;)☆
免责声明:本专栏仅为信息导航参考,不代表原文立场或观点。 原专栏内容版权归原作者所有,如您为原作者并希望删除该专栏,请通过 【版权申诉通道】联系我们处理。
需要稳定、低延迟更新,可开通 RSS 稳定极速订阅 ,获得稳定更新保障并降低更新延迟
PyTorch博客翻译 Accelerating Generative AI Part III: D...
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
关于CUTLASS Grouped GEMM中Alignment参数的分析
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
基于CUTLASS CuTe分析cp.async的Prefetch行为
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
【DistServe 博客翻译】通过PD分离实现LLM服务中的最大有效吞吐量
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
NVIDIA GPU Prefetch行为分析
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
一个Dispatch Dtype引起的fp8 quant kernel性能问题
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
全能高手&科学明星,上海AI实验室开源发布『书生』科学多模态大模型Intern-S1 | WAIC ...
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
LMCache + SGLang Feature 解读
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
SGLang v4.8.0 13x8 H800 DGX SuperPod 节点的PD分离性能研究
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
如何利用pytorch memory snapshot进行显存分析
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
现代GPU体系结构Cache Operators行为研究
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
一起聊聊Nvidia Blackwell新特性之低比特GEMM
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
FlashInfer集成TensorRT-LLM cubin kernel技术分析
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
CUTLASS CuTe GEMM细节分析(三)——Swizzle<B, M, S>模板参数的取值
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
简单了解下CUDA Green Context
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
CUTLASS CuTe GEMM细节分析(一)——ldmatrix的选择
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
CUTLASS CuTe GEMM细节分析(二)——TiledCopy与cp.async
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
关于Pingpong和Cooperative的一些感性理解
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
【博客转载】使用CUDA driver API在运行时加载CUDA kernel (文末送书)
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  · 
从 0 手撕 LLM 分布式训练:DP, ZeRO, TP, PP, CP, EP
GiantPandaLLM  ·  公众号  · 3D  ·  1 年前  ·