Performances des LLM et voies PCIe : points clés à considérer
Envisagez-vous d’installer un second GPU pour les LLM ?
Comment les voies PCIe affectent les performances des LLM? Cela dépend de la tâche. Pour l’entraînement et l’inférence multi-GPU, la baisse de performance est significative.