Результати пошуку для "USTC"
2026-05-25 09:38

Huawei, USTC і Пекінський університет досягли прискорення на 58% на Ascend A3 для тренування MoE-моделей

Згідно з Beating, дослідники з Huawei, Університету науки і технологій Китаю (USTC) та Пекінського університету представили HyperParallel-MoE — фреймворк компіляторного планування для чипів Ascend A3. Він зменшує затримку в модулях обчислень MoE експертів на 36%, досягаючи 58% загального прискорення обробки даних (у 1,49–1,58 раза швидше) у кластерах із 256 вузлами, що запускають моделі у стилі DeepSeek із 671 млрд параметрів, тоді як швидкість тренування за один крок зросла на 8–9%.