[통신-연산 겹침] — DAKER에서 자세히 보기

2026.09.21 13:11 73 Views

Inductor simple_overlap가 기본 켜지며 컴파일된 분산 학습에서 집단통신과 연산을 자동으로 겹칩니다.


핵심만 먼저 정리합니다.

• torch.compile 분산 학습에서 기본 overlap

• 집단통신과 compute 자동 겹침

• 프로파일로 겹침 구간 확인


자세히 보기: https://daker.ai/community/post-muaq924w-244dc4a6