3 декабря в Китае начала работу самая масштабная в мире распределённая вычислительная инфраструктура для задач искусственного интеллекта. Платформа под названием Future Network Test Facility объединила дата-центры в 40 городах в единое вычислительное пространство, способное функционировать почти с той же эффективностью, что и монолитные суперкомпьютеры.
Новая система построена на базе высокоскоростных оптоволоконных соединений. Протяжённость сети превысила 55 тыс. км, что эквивалентно полуторному охвату экватора. Несмотря на удалённость узлов на расстояние до 2000 км, производительность системы практически не страдает.
По оценке руководителя проекта Лю Юньцзе, представляющего Китайскую инженерную академию, эффективность платформы достигает 98 %. Это означает, что потери вычислительных ресурсов при распределённой обработке минимальны.
Наиболее ощутимый результат от внедрения инфраструктуры проявляется в задачах обучения крупных языковых моделей. При разработке ИИ с параметрами в сотни миллиардов обучение требует более 500 тыс. итераций. На новой платформе каждая из них занимает около 16 секунд.
В случае отсутствия распределённой архитектуры продолжительность итерации увеличивается как минимум на 20-25 %, что в итоге может затянуть весь цикл на месяцы.
Комплекс функционирует в непрерывном режиме и способен одновременно поддерживать работу 128 разнородных сетей. Система обрабатывает свыше 4000 параллельных задач. В числе применений — не только генеративные ИИ-модели, но и телемедицинские решения с возможностью удалённой диагностики, а также промышленные сценарии, где требуется оперативная обработка больших потоков данных в реальном времени.
Проект развивался в рамках национальной инициативы «Восточные данные — западные вычисления». Она направлена на перенос основных мощностей в регионы с пониженной стоимостью электроэнергии.
Идея была впервые озвучена в 2013 году и с тех пор получила приоритетный статус в государственной стратегии научно-технологического развития. Параллельно с этим Китай инвестирует в разработку фотонных и квантовых чипов, которые в будущем могут заменить или дополнить нынешние архитектуры, ещё сильнее ускорив работу распределённых систем.
