Tag: 分布式系统
All the articles with the tag "分布式系统".
-
MLSys26 - Charon: a unified and fine-grained simulator for large-scale LLM training and inference
解析面向大规模大语言模型训练与推理的细粒度仿真框架 Charon，系统梳理其算子图级建模、拓扑感知通信与计算重叠减速处理等核心设计，并结合多种 GPU 架构及万卡集群验证其在性能预测与推理配置寻优上的精确度与实际收益。
-
OSDI 2022 - Orca: A Distributed Serving System for Transformer-Based Generative Models
OSDI 2022 Orca 论文阅读笔记，梳理迭代级调度、选择性批处理与生成式模型分布式推理服务的系统设计。
-
OSDI 2018 - Ray: A Distributed Framework for Emerging AI Applications
OSDI 2018 论文阅读笔记：Ray — 面向新兴 AI 应用的分布式计算框架。
-
arXiv 2024 - Characterization of Large Language Model Development in the Datacenter
arXiv 2024 论文阅读笔记，概括数据中心内大语言模型开发负载、故障、资源利用与调度优化机会。