Смелое предложение от Meta* AI: а что, если сама нейросеть и есть компьютер?
Не агент поверх операционной системы, не модель, вызывающая инструменты, а система, где вычисление, память и ввод/вывод объединены в одном латентном состоянии.
Эта их идея называется Neural Computers (NC).
Они реализуют её через видеомодели, где нейросеть симулирует работающий компьютер изнутри, без внешней операционной системы.
Результаты пока скромные, модель воспроизводит внешний вид интерфейса и короткие цепочки команд, но символические вычисления остаются слабым местом.
Получится ли? вопрос открытый. Но сама постановка задачи интересная.
*запрещенная в России организация.
Не агент поверх операционной системы, не модель, вызывающая инструменты, а система, где вычисление, память и ввод/вывод объединены в одном латентном состоянии.
Эта их идея называется Neural Computers (NC).
Они реализуют её через видеомодели, где нейросеть симулирует работающий компьютер изнутри, без внешней операционной системы.
Результаты пока скромные, модель воспроизводит внешний вид интерфейса и короткие цепочки команд, но символические вычисления остаются слабым местом.
Получится ли? вопрос открытый. Но сама постановка задачи интересная.
*запрещенная в России организация.