СЕО OpenAI Японии заявил, что GPT-Next будет в 100 раз более продвинутой, чем предыдущие модели
На слайде его презентации говорится, GPT Next выйдет в этом году.
Скорее всего 100-кратное улучшение, вероятно, относится не только к увеличению вычислительных ресурсов, а к усовершенствованиям в архитектуре и эффективности обучения, что в сумме дает эффективное увеличение вычислительной мощности на два порядка величины (2 OOMs).
Предполагается, что GPT-4 NEXT, который выйдет в этом году, будет использовать уменьшенную версию под названием Strawberry, обученную на примерно таких же вычислительных ресурсах, как GPT-4, но с эффективной вычислительной мощностью в 100 раз больше.
На слайде его презентации говорится, GPT Next выйдет в этом году.
Скорее всего 100-кратное улучшение, вероятно, относится не только к увеличению вычислительных ресурсов, а к усовершенствованиям в архитектуре и эффективности обучения, что в сумме дает эффективное увеличение вычислительной мощности на два порядка величины (2 OOMs).
Предполагается, что GPT-4 NEXT, который выйдет в этом году, будет использовать уменьшенную версию под названием Strawberry, обученную на примерно таких же вычислительных ресурсах, как GPT-4, но с эффективной вычислительной мощностью в 100 раз больше.