SPDM тип перевірки захоплює помилку паралельного тензора — ця хитрість дуже тонка

На конференції PyTorchCon Europe 2026 Едвард Янг пояснив складнощі тензорного паралелізму, запропонувавши виявлення помилок за допомогою типу SPDM під час перевірки типів. У виступі представлено стабільність torch.compile з підтримкою динамічних форм, інтеграцію FSDP/DDP для зменшення комунікацій, нові інструменти кількісного зменшення з INT4/FP8, оновлення TorchRec/TorchServe, а також нативну підтримку Apple Silicon та AMD ROCm і оновлення засобів безпеки. Внески спільноти включають torchao, torchchat, а в майбутньому зосереджено на ефективному автоматичному диференціюванні, розріджених обчисленнях та глибокій інтеграції з фреймворками тренування LLM.