NCCL 集合通信算子总结

NCCL（NVIDIA Collective Communications Library）主要提供面向多 GPU / 多机场景的集合通信（collective communication）能力，常用于深度学习训练中的梯度同步、参数分发和结果聚合。核心集合通信算子┌─────────────────

查看全文

Claude Code 上手：把 AI 写进你的终端工作流

介绍使用姿势

查看全文

操作系统基础知识

操作系统基础知识

查看全文

Atop 监控工具

Atop 是一款强大的系统监控工具，支持记录历史系统状态，非常适合排查过去某个时间点的 IO 写高问题。以下是使用 atop 查看历史监控数据的方法：查看 atop 历史记录文件默认情况下，atop 会将监控数据按小时保存到 /var/log/atop/ 目录（文件名格式为 atop_YYYYMMD

查看全文

大模型的训练效率

大模型的训练效率

查看全文

GPU 常见故障及排查方法

GPU 常见故障及排查方法

查看全文

Nvidia 相关命令集合

Nvidia Command

查看全文

Conda 安装与使用

官网: https://docs.conda.io/projects/conda/en/stable/user-guide/getting-started.html

查看全文

稀疏特征和密集特征

在机器学习中，特征是指对象、人或现象的可测量和可量化的属性或特征。特征可以大致分为两类：稀疏特征和密集特征。稀疏特征和密集特征稀疏特征和密集特征是机器学习和深度学习中常见的两种特征类型，它们有不同的存储方式和处理方法。稀疏特征（Sparse Feature） 指的是特征值大部分为0的特征，例如文本数

查看全文

Python 使用记录

Python from getting started to giving up

查看全文