Fix_and_go


Гео и язык канала: Россия, Русский
Категория: Технологии


Тестирование, лайф, кодинг

Связанные каналы  |  Похожие каналы

Гео и язык канала
Россия, Русский
Категория
Технологии
Статистика
Фильтр публикаций


Федеративное обучение обычно звучит как ”данные остаются на телефоне”, но у этой идеи есть неприятный потолок: слабое железо, нестабильная доступность устройств и месяцы ожидания одного обучения.

Google Research предлагает перевернуть схему. Телефоны по-прежнему шифруют и отправляют примеры, но сама тренировка переезжает на сервер в Trusted Execution Environments. Это защищённые области, где код можно удалённо аттестовать: внешняя сторона проверяет, какая программа выполняется, а оператор сервера не видит внутреннее состояние.

Самая интересная часть здесь не просто ”данные зашифрованы”. Устройство заранее задаёт политику доступа, политики публикуются в прозрачном логе Rekor, а ключи выдаются только тем серверным задачам, которые этой политике соответствуют. То есть доверять приходится не обещанию компании, а проверяемой цепочке: код, сборка, доступ к данным и набор допустимых результатов.

Для ML-инженера это любопытный компромисс между чистым on-device training и обычным централизованным обучением. Можно использовать более мощные серверы, гибко выбирать расписание участия устройств и не подстраивать весь процесс под то, когда телефоны вообще доступны. В Google пишут, что старые FL-модели обучались 1–2 месяца, а новая система уже заметно ускоряет этот цикл; Gboard использует её для моделей предсказания следующего слова на английском и японском.

Ограничение тоже честное: TEE не превращает систему в математически доказанную крепость. Остаются аппаратные ограничения и побочные каналы, а безопасность зависит от корректности железа, прошивок и реализации DP. Но направление занятное: приватность здесь пытаются сделать не свойством рекламного текста, а объектом внешней проверки.

Основнччой источник

Велкам


Яндекс выложил в опенсорс YTsaurus Flow, который уже работает в Маркете, Рекламе и антифроде. Самая интересная цифра: в Рекламе через него проходит больше 100 ГБ данных и миллионы событий в секунду.

Flow обрабатывает события сразу по мере поступления, а не ждёт, пока накопится очередная партия. Каждое событие учитывается ровно один раз, без потерь и дублей, а при сбоях нагрузка переезжает на доступные серверы.

В Рекламе технология почти убрала задержку подготовки данных для дообучения части моделей: раньше это занимало больше 10 часов. Маркет использует Flow для оперативной статистики, антифрод ищет подозрительные действия. Лицензия Apache 2.0.

https://habr.com/ru/companies/yandex/articles/1087470
https://github.com/ytsaurus/ytsaurus/tree/main/yt/yt/flow

Велкам




Видео недоступно для предпросмотра
Смотреть в Telegram
Mistral Large 4 внутри компании называют Le Chonk, и это не случайное прозвище: модель собрали на 1,05 трлн параметров. Активными при этом остаются 49 млрд, потому что это MoE.

Модель мультимодальная, держит контекст до 1 млн токенов и уже доступна через API в режиме public preview. Название отсылает к мему Le Chaton Fat, где несколько месяцев назад шутили о гигантской модели Mistral.

По собственным тестам Mistral, Large 4 стала новой открытой SOTA для США и Европы. Особенно хорошо она показывает себя в кодинге, кибербезопасности и финансах, а в детекции объектов на изображениях обходит некоторые закрытые фронтирные модели.

Обучение заняло около двух месяцев на 4 000 Nvidia Grace Blackwell. Веса обещают выпустить 27 октября.

https://mistral.ai/news/mistral-large-4

Велкам


Мем локальный.
Для тех кто решил первую домашку в deep learning school


Видео недоступно для предпросмотра
Смотреть в Telegram
Ai2 выпустила открытую AstaBrief 8B, модель для научных отчётов, которая пишет связный текст и ставит ссылку на источник рядом с каждым фактом.

Интересная деталь: сама модель ничего не ищет. Ей нужно передать вопрос и найденные фрагменты статей. Дальше она отбирает нужное, собирает отчёт и генерирует его целиком за один проход. Это быстрый режим сервиса Asta, где альтернативой выступает Thinking с Claude под капотом.

На 200 вопросах по информатике AstaBrief получила 87 баллов в среднем: 90,2 за полноту ключевых элементов, 89 за точность ответа, 90,5 за точность ссылок и 78,2 за их полноту. Ai2 называет результат сопоставимым с конвейером на Claude и агентом DR Tulu. В.

https://allenai.org/blog/astabrief
https://asta.allen.ai/
https://github.com/allenai/ai2-scholarqa-lib/tree/main/api/scholarqa/lite
https://huggingface.co/allenai/AstaBrief_8B

Велкам


Видео недоступно для предпросмотра
Смотреть в Telegram
Велкам


Яндекс неожиданно оказался среди мировых лидеров по использованию ИИ: приложения с Алисой AI вошли в топ-15 по месячной аудитории.

Это обновлённый рейтинг a16z самых популярных consumer AI-сервисов. И он хорошо показывает реальную картину: люди пользуются не только отдельными чат-ботами, но и обычными приложениями, где нейросеть уже встроена внутрь. Таких сервисов становится всё больше, и ИИ постепенно растворяется в привычных продуктах.

Вот такие пИИроги.

https://www.a16z.news/p/top-100-consumer-ai-apps-seventh

Велкам




Видео недоступно для предпросмотра
Смотреть в Telegram
В Factorio собрали языковую модель на 6,4 млн параметров, и это не декоративная схема для скриншота: она действительно считает ответы прямо на игровых комбинаторах.

Для конструкции понадобилось около 105 тысяч комбинаторов, 200 тысяч проводов и 8 тысяч ламп. Последние здесь не просто подсвечивают завод, а участвуют в вычислениях и выводе результата.

Модель заранее обучили, но инференс полностью идёт внутри Factorio. Поэтому с ней можно переписываться прямо в игре, правда, диалог будет очень неторопливым. Впечатляет уже сам факт, что кто-то посмотрел на языковую модель и решил: а давайте соберём её из логики и проводов.

Инструкция и схема: https://github.com/RomOSTiny/factorio-transformer/blob/main/HOW_TO_USE.md

Велкам


Видео недоступно для предпросмотра
Смотреть в Telegram


Юру Борисова выдвигают на Оскар за главную мужскую роль в фильме Artificial про OpenAI. Неожиданный поворот для истории, которую многие ждали скорее как биографию Сэма Альтмана.

Фильм уже показали на Нью-Йоркском кинофестивале, и первые отзывы очень сильные. Критики сравнивают его с Социальной сетью, только про начало эпохи AI, а саму картину называют лучшей работой Луки Гуаданьино за последние 10 лет.

Борисов играет Илью Суцкевера, и, судя по отзывам, это не второстепенная роль для галочки. История начинается с его учёбы у Джеффри Хинтона, проходит через Google и создание OpenAI, а затем приводит к конфликту с Сэмом Альтманом.

Интересно, что Neon, дистрибьютор фильма, делает ставку именно на Борисова. Теперь осталось дождаться самого фильма и понять, не слишком ли критики заранее разогнали ожидания.

Велкам


Видео недоступно для предпросмотра
Смотреть в Telegram
Запуск FireFox нормального человека


Подписка за $200 у Anthropic по токенам может выглядеть как тариф примерно на $2485 API-расходов. И это только половина доступного лимита. У OpenAI в том же сравнении Astra даёт эквивалент на $2897.

SemiAnalysis считали исключительно количество токенов по API-ценам. Стоимость одной задачи и сбросы лимитов в расчёт не включали, так что это не сравнение реальной себестоимости работы.

На моделях среднего уровня разрыв ещё заметнее: Opus 5.5 даёт примерно в 5 раз больше API-эквивалента, чем GPT 6.1 Sol. Если учитывать новые лимиты и скорость моделей, настроение пользователей OpenAI можно описать коротко: 😭

https://newsletter.semianalysis.com/p/anthropic-subscriptions-offer-5x

Велкам






Claude Opus 5.5 за три дня нашёл два полупроводника, которые могут пригодиться для следующего поколения памяти. Над задачей работали 90 агентов, а эксперименты с материалами ещё продолжаются.

Идея в том, чтобы получить лучшее сразу от двух типов магнитных материалов. У ферромагнетиков спины электронов хорошо отсортированы, но они создают сильное поле, мешают соседним ячейкам и переключаются медленно. У антиферромагнетиков суммарного поля почти нет, а переключение может быть в тысячу раз быстрее, но состояние сложнее прочитать.

Материалы класса Luttinger-compensated обещают нулевое суммарное поле при сохранении нужной сортировки спинов. Это потенциально означает более плотную и быструю память.

Первое соединение агенты придумали с нуля. Авторы не нашли его в прошлых работах, но синтезировать материал, похоже, будет непросто. Второе относится к семейству.

Велкам


Поразительная выдержка

Велкам


пока мы дрыхли Маск триллионером стал(((


Кто тебе в старости кусок кода подаст?

Велкам

Показано 20 последних публикаций.