ByteDance создаёт ИИ-модель на 10 трлн параметров

Китайская компания ByteDance ведёт разработку модели искусственного интеллекта, которая может содержать 10 трлн параметров. Сейчас система находится на этапе предварительного обучения, сообщает Ferra.

Если оценка подтвердится, модель окажется более чем втрое крупнее китайской Kimi K3 от Moonshot AI, у которой 2,8 трлн параметров. По оценкам отрасли, у Anthropic Mythos 5 может быть около 8 трлн параметров, а у Fable 5 — около 5 трлн.

Параметры представляют собой числовые настройки, которые модель получает в процессе обучения и использует для обработки данных и выполнения задач. Их количество показывает масштаб системы, но не гарантирует её возможностей. Модель ByteDance сейчас проходит этап предварительного обучения.