Lossy网络的RoCE方案——IRN_lvyilong316-ChinaUnix博客

技术之美

首页　| 　博文目录　| 　关于我

lvyilong316

博客访问： 3748212
博文数量： 216
博客积分： 0
博客等级：民兵
技术积分： 7480
用户组：普通用户
注册时间： 2013-01-23 18:56

个人简介

将晦涩难懂的技术讲的通俗易懂

文章分类

全部博文（216）

RDMA（1）
NCCL（8）
服务器硬件（1）
AI infra（11）
网络安全（3）
容器技术（5）
spdk（1）
SDN（0）
论文（2）
论文（0）
网络大二层（1）
性能优化（6）
虚拟化（22）

qemu-kvm（5）
体系结构（5）
dpdk（23）
链接、装载与库（2）
python（1）
内核网络（13）
分布式存储（1）
Nginx（1）
经典算法（1）
学习生活（1）
Web（2）
网络编程（8）
疑难杂症（5）
Linux系统使用（5）
算法（2）
ASP.NET（1）
linux系统编程（28）

epoll（7）
Linuc/unix（36）

内核（17）
C/C++（18）
未分配的博文（2）

文章存档

2025年（8）

2024年（11）

2023年（9）

2022年（4）

2021年（12）

2020年（8）

2019年（18）

2018年（19）

2017年（9）

2016年（26）

2015年（18）

2014年（54）

2013年（20）

我的朋友

最近访客

推荐博文

Lossy网络的RoCE方案——IRN

发布时间：2025-01-17 23:34:26

背景 RDMA 在高性能计算（HPC）社区中长期以来一直被用于使用基于credit的流量控制的专用 Infiniband 集群，以确保网络无丢包(lossless)。由于在这类集群中数据包丢失很少，因此 RDMA Infiniband 传输（在 NIC 上实现）并未设计为高效地从数据包丢失中恢复。当接收方收到乱序数据包时，它会.........【阅读全文】

阅读(624) | 评论(0) | 转发(0)

GPU Direct相关技术和原理

发布时间：2024-12-22 13:38:11

......【阅读全文】

阅读(1964) | 评论(0) | 转发(0)

AllReduce 相关算法

发布时间：2024-09-22 20:37:10

AllReduce 算法通信过程：1. AllGather 阶段。优点：带宽利用率高，因为在每个通信步骤中，所有节点都在同时发送和接收数据。缺点：延迟较高，尤其是当节点数量较多时，由于需要进行 2*(N-1) 次通信。Tree AllReduce：采用树状拓扑结构进行通信通信过.........【阅读全文】

阅读(1877) | 评论(0) | 转发(0)

RDMA高级特性

发布时间：2024-09-01 12:17:34

将多块非连续的MR拼接成一个VA连续的MR如上图所示，我们之前创建了3个常规得MR：MR1(green), MR2(purple), MR3(red)，现在我们想从这三个MR中各抽取一部分拼接起来形成一个新的连续的MR：第一块是MR1(v0-v1)部分，第二块是MR2(v2-v3)部分，第三块是MR3(v4-v5)部分。这个新的MR有一个新的base VA地址，长度是3个.........【阅读全文】

阅读(1348) | 评论(0) | 转发(0)

大模型训练中的Adam算法和相关优化

发布时间：2024-08-18 17:03:39

大模型训练中的Adam算法和相关优化——lvyilong316 想要了解Adam（adaptive moment estimaation，自适应矩估计）算法，必须先了解一阶矩和二阶矩。一阶原点矩一阶原点矩就是期望，更简单来说就是平均值。比如现在有5个数，分别是1、2、3、4、5，它们的期望计算方式如下.........【阅读全文】

阅读(737) | 评论(0) | 转发(0)

给主人留下些什么吧！~~

吻的感觉适2025-07-18 23:22

https://txc.qq.com/products/762843/blog/2022630
https://txc.qq.com/products/762814/blog/2022624
https://txc.qq.com/products/762833/blog/2022632
https://txc.qq.com/products/762839/blog/2022631
https://txc.qq.com/products/762835/blog/2022633
https://txc.qq.com/products/762845/blog/2022634
https://txc.qq.com/products/762810/blog/2022636
https://txc.qq.com/products/762848/blog/2022637
https://txc.qq.com/products/762843/blog/2022638
https://txc.qq.com/products/762814/blog/2022639
https://txc.qq.com/products/762839/blog/2022640
https://txc.qq.com/products/762833/blog/2022642
https://txc.qq.com/products/762810/blog/2022644
https://txc.qq.com/products/762843/blog/2022645
https://txc.qq.com/products/762814/blog/2022647
https://txc.qq.com/products/762833/blog/2022648
https://txc.qq.com/products/762843/blog/2022650

回复　　| 　举报

Tabi_star2025-04-15 14:58

Tabi_star：跪求大佬继续更新，PKU博一，导师让我魔改NCCL，本人太菜源码看不懂一点儿，大佬的博客应该是全网NCCL版本最新最详细的源码解读，能不能毕业全靠大佬了

我爱博主

回复　　| 　举报

Tabi_star2025-03-13 21:08

跪求大佬继续更新，PKU博一，导师让我魔改NCCL，本人太菜源码看不懂一点儿，大佬的博客应该是全网NCCL版本最新最详细的源码解读，能不能毕业全靠大佬了

回复　　| 　举报

zf8292024-11-13 13:41

zf829：您好，请教大神一个问题，设备直通给VM时，中断到底会不会导致VM_EXIT吗，如果会，那VIRTIO直通时还会导致IO性能下降吧？“当透传设备产生中断时，vfio_msihandler ISR执行，该函数不做实际的服务程序处理，仅仅通过eventfd_signal激活irqfd_inject，然后最终调用deliver_posted_interrupt向虚机注入中断，中断号即为虚机配置透传设备时的中断号。” 这段描述在代码上我也仔细看了，逻辑肯定是对的，但另一方面我还是不确定中断到底会不会导致VM_EXIT

这里的中断主要是指数据包收发的中断

回复　　| 　举报

zf8292024-11-13 11:35

您好，请教大神一个问题，设备直通给VM时，中断到底会不会导致VM_EXIT吗，如果会，那VIRTIO直通时还会导致IO性能下降吧？“当透传设备产生中断时，vfio_msihandler ISR执行，该函数不做实际的服务程序处理，仅仅通过eventfd_signal激活irqfd_inject，然后最终调用deliver_posted_interrupt向虚机注入中断，中断号即为虚机配置透传设备时的中断号。” 这段描述在代码上我也仔细看了，逻辑肯定是对的，但另一方面我还是不确定中断到底会不会导致VM_EXIT

回复　　| 　举报

留言热议

请登录后留言。

登录注册

感谢所有关心和支持过ChinaUnix的朋友们

16024965号-6