🔥 Вот так выглядят серьезные, первоклассные инвестиции в ИИ
Компания Cerebras Systems, владеющая уникальным суперкомпьютером Andromeda, открыла доступ для стартапов.
Разработчики утверждают, что производительность системы больше 1 эфлопс на «разреженных» вычислениях, а при FP16-вычислениях достигает 120 Пфлопс.
Возможно, этот компьютер первый в мире, обеспечивающий практически идеальное линейное масштабирование при работе с GPT-моделями (GPT-3, GPT-J, GPT-NeoX и так далее). То есть при каждом удвоении числа комплексов CS-2 время обучения моделей уменьшается почти в два раза.
При таком уровне вычислений стартап может обучить, например, Stable Diffusion с нуля ~ за 5 часов (при наличии хорошей масштабируемой инфраструктуры).
Компания Cerebras Systems, владеющая уникальным суперкомпьютером Andromeda, открыла доступ для стартапов.
Разработчики утверждают, что производительность системы больше 1 эфлопс на «разреженных» вычислениях, а при FP16-вычислениях достигает 120 Пфлопс.
Возможно, этот компьютер первый в мире, обеспечивающий практически идеальное линейное масштабирование при работе с GPT-моделями (GPT-3, GPT-J, GPT-NeoX и так далее). То есть при каждом удвоении числа комплексов CS-2 время обучения моделей уменьшается почти в два раза.
При таком уровне вычислений стартап может обучить, например, Stable Diffusion с нуля ~ за 5 часов (при наличии хорошей масштабируемой инфраструктуры).