Запускаем Kimi K3 хоть на тостере — мощнейшую нейронку Китая сжали с помощью AirLLM и приспособили вообще для любого железа.
Даже если у вас слабый комп, сможете развернуть монстра, который рубится с Fable 5 и GLM-5.2 на равных.
• Нейронка в данном варианте берет задачу и дробит ее для достижения лучшей эффективности и расхода токенов.
• Работает даже на 8 ГБ оперативной памяти.
• Сама модель на 2,78 трлн параметров.
• Весь движок весит всего 176 КБ.
• За счет дробления может отвечать чуть-чуть медленнее, но вообще не теряет точности и объективности.
😶😶😶😶😶😶😶😶😶
Юзаем имбу — тут.
Даже если у вас слабый комп, сможете развернуть монстра, который рубится с Fable 5 и GLM-5.2 на равных.
• Нейронка в данном варианте берет задачу и дробит ее для достижения лучшей эффективности и расхода токенов.
• Работает даже на 8 ГБ оперативной памяти.
• Сама модель на 2,78 трлн параметров.
• Весь движок весит всего 176 КБ.
• За счет дробления может отвечать чуть-чуть медленнее, но вообще не теряет точности и объективности.
😶😶😶😶😶😶😶😶😶
Юзаем имбу — тут.