Forwarded from Нейродвиж
This media is not supported in your browser
VIEW IN TELEGRAM
Научные статьи теперь можно читать без боли — и для этого не придётся скачивать PDF или мучить нейронку промптами 😮
Открываем нужную работу на arXiv и меняем в адресе
Идеальный чит-код для студентов👌
Открываем нужную работу на arXiv и меняем в адресе
arxiv на quickarxiv — cервис превратит академическое полотно в аккуратную страницу с понятным объяснением, иллюстрациями и короткой выжимкой главного.Идеальный чит-код для студентов
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥1
Forwarded from Machinelearning
Главный результат: PC-ALM смог обучать нейросети глубиной до 1000 слоёв, используя только локальные взаимодействия между соседними слоями.
Обычное глубокое обучение почти полностью опирается на backpropagation: ошибка считается на выходе сети, после чего градиенты передаются назад через все слои.
PC-ALM работает иначе.
Каждый слой рассматривается как локальная динамическая система, которая пытается уменьшить собственную ошибку предсказания. Вместо глобального прохода градиента используются:
- локальные ошибки предсказания
- множители Лагранжа
- расширенный лагранжиан
- локальная динамика состояний
- PI-регуляция внутри каждого слоя
Метод вырос из predictive coding — подхода, популярного в NeuroAI. В predictive coding каждый слой постепенно корректирует своё состояние так, чтобы уменьшать рассогласование с соседними слоями.
Проблема в том, что в очень глубоких сетях такие сигналы плохо распространяются: информация об ошибке с выхода сети затухает раньше, чем достигает внутренних слоёв.
PC-ALM добавляет специальные двойственные переменные — по сути дополнительные нейроны, представляющие множители Лагранжа. Они помогают передавать сигнал ошибки через большое число слоёв.
Авторы связывают этот подход с классической работой Яна Лекуна 1988 года, где множители Лагранжа для многослойной сети можно связать с градиентами функции потерь.
В результате получается обучение, где глобальная задача оптимизации раскладывается на множество локальных динамических процессов.
Особенно хорошо PC-ALM показал себя на очень глубоких и узких сетях, где обычный predictive coding начинает ломаться.
Помимо NeuroAI, подход может быть интересен для нейроморфного железа: там локальные вычисления и физическая динамика потенциально дешевле классического backpropagation на GPU.
Блог: https://pub.sakana.ai/pc-alm/
Статья: https://arxiv.org/abs/2605.31022
Код: https://github.com/SakanaAI/pc-alm
Please open Telegram to view this post
VIEW IN TELEGRAM
👍1
Forwarded from Ekaterina Trofimova
Рады поделиться нашей новой работой! Вместе с Денисом Зуенко @zuenko и Ильвирой Хайдаровой мы опубликовали в IEEE Access статью Oil Spill Segmentation in SAR Data Using ViT-UNet: Performance and Practical Insights.
Работа посвящена системе для сегментации нефтяных пятен на радарных снимках (SAR). Задача критична для экологического мониторинга океана. Особенность подхода — гибридная архитектура ViT-UNet, где skip-connections идут не только с глубоких слоёв энкодера (как обычно делают), а сразу с четырёх уровней (2, 5, 8, 11), каждый из которых улавливает свой масштаб: от шумоподавления до глобального контекста состояния моря. Такая топология при абсолютно том же числе параметров и FLOPs даёт прирост mIoU почти на 5 п.п. по сравнению с «глубокой» версией той же модели.
Отдельным вкладом является ручные правки разметки популярного публичного бенчмарка SOS (больше трети масок в нём содержали систематические ошибки: с ложными срабатываниями, пропущенными пятнами и неточными границами).
Работа посвящена системе для сегментации нефтяных пятен на радарных снимках (SAR). Задача критична для экологического мониторинга океана. Особенность подхода — гибридная архитектура ViT-UNet, где skip-connections идут не только с глубоких слоёв энкодера (как обычно делают), а сразу с четырёх уровней (2, 5, 8, 11), каждый из которых улавливает свой масштаб: от шумоподавления до глобального контекста состояния моря. Такая топология при абсолютно том же числе параметров и FLOPs даёт прирост mIoU почти на 5 п.п. по сравнению с «глубокой» версией той же модели.
Отдельным вкладом является ручные правки разметки популярного публичного бенчмарка SOS (больше трети масок в нём содержали систематические ошибки: с ложными срабатываниями, пропущенными пятнами и неточными границами).
Forwarded from ODS Events
Привет!
Рады сообщить, что🦜 ODS совместно с Международным университетом информационных технологий запустили соревнование по написанию кода ИИ-агентами - SWE MERA Challenge.
Соревнование пройдет в три этапа:
✅ на первом этапе участникам с помощью любых агентов предстоит решить представленные задания на своей стороне;
✅ на последующих этапах то же самое нужно будет делать уже в изолированном окружении.
⭐️Для Топ-3 участников будет дана возможность представить свою работу на конференции по программной инженерии ICSE 2027!
Присоединяйтесь к соревнованию по 🔗ссылке!
Рады сообщить, что
Соревнование пройдет в три этапа:
⭐️Для Топ-3 участников будет дана возможность представить свою работу на конференции по программной инженерии ICSE 2027!
Присоединяйтесь к соревнованию по 🔗ссылке!
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from Заметки Computer Vision инженера
This media is not supported in your browser
VIEW IN TELEGRAM
Надо скзать что софт в эдж девайсах просто летит с какой-то суперсветовой скоростью. Я тут понял что в Qualcomm добавили поддержку моделей для роботов на NPU даже на дешевый/средний класс устройств.
Просто вау.
Изначально хотел проверить а можно ли VLM запускать на OAK4, а нашёл что там уже можно и VLA достаточно сложные. Короче вместо меди оказалось что-то поинтереснее.
https://youtu.be/Lyif8HH0Dn0
Теперь надо понять где это использовать:)
Просто вау.
Изначально хотел проверить а можно ли VLM запускать на OAK4, а нашёл что там уже можно и VLA достаточно сложные. Короче вместо меди оказалось что-то поинтереснее.
https://youtu.be/Lyif8HH0Dn0
Теперь надо понять где это использовать:)
Forwarded from эйай ньюз
This media is not supported in your browser
VIEW IN TELEGRAM
Вас тоже напрягают записывальщики митингов, которых все сейчас таскают по созвонам? (меня да, особенно пока мы в stealth режиме). А ведь еще часто записывают, ничего мне не говоря, через wispr или granola.
Как и следовало ожидать нашлись люди, которые придумали продукт для противостояния этому.
Локально крутится LLM, которая адверсариально натренирована против wispr и прочих voice2text моделей. Она в риалтайме добавляет adversarial noise к вашему аудиостриму, который ломает распознавалки речи на другой стороне.
Из минусов - это сейчас иногда превращает вашу речь в что-то, что трудно распарсить и человеку, кек))
Теперь voice2text модели придется регулярно перетренировывать, чтобы они были робастными к таким атакам!
Ну а вообще респект ребятам, довести до ума, убрать явный шум и будет полезный продукт, для поддержания privacy звонков.
Сам продукт
@ai_newz
Как и следовало ожидать нашлись люди, которые придумали продукт для противостояния этому.
Локально крутится LLM, которая адверсариально натренирована против wispr и прочих voice2text моделей. Она в риалтайме добавляет adversarial noise к вашему аудиостриму, который ломает распознавалки речи на другой стороне.
Из минусов - это сейчас иногда превращает вашу речь в что-то, что трудно распарсить и человеку, кек))
Теперь voice2text модели придется регулярно перетренировывать, чтобы они были робастными к таким атакам!
Ну а вообще респект ребятам, довести до ума, убрать явный шум и будет полезный продукт, для поддержания privacy звонков.
Сам продукт
@ai_newz
Forwarded from эйай ньюз
Media is too big
VIEW IN TELEGRAM
BFL выпустили FLUX 3 Action для управления роботами
BFL дообучили основу видеомодели FLUX 3 на записях работы роботов, где кадры с камер синхронизированы с положениями суставов и действиями. Модель на 7B учится совместно восстанавливать из шума будущие кадры и последовательность движений.
По текстовой задаче, текущим кадрам и состоянию робота она предсказывает движения суставов и захвата вместе с их визуальным результатом. Робот исполняет часть команд, получает новые кадры и пересчитывает следующие движения.
На симуляционном RoboLab-120 заняли первое место с 42.9% успешных попыток против 36.8% у Cosmos 3 Nano на 16B. Под нового робота нужно дообучение. Веса под FLUX Community License, код под Apache 2.0.
Техрепорт
Веса
Код
@ai_newz
BFL дообучили основу видеомодели FLUX 3 на записях работы роботов, где кадры с камер синхронизированы с положениями суставов и действиями. Модель на 7B учится совместно восстанавливать из шума будущие кадры и последовательность движений.
По текстовой задаче, текущим кадрам и состоянию робота она предсказывает движения суставов и захвата вместе с их визуальным результатом. Робот исполняет часть команд, получает новые кадры и пересчитывает следующие движения.
На симуляционном RoboLab-120 заняли первое место с 42.9% успешных попыток против 36.8% у Cosmos 3 Nano на 16B. Под нового робота нужно дообучение. Веса под FLUX Community License, код под Apache 2.0.
Техрепорт
Веса
Код
@ai_newz
Forwarded from эйай ньюз
HapticVLA_IROS2026_poster_A0.pdf
5 MB
HapticVLA: как научить робота чувствовать без датчиков касания?
Одна из ключевых задач Physical AI заключается в том, чтобы научить роботов взаимодействовать с физическим миром, в том числе контролировать силу захвата и аккуратно работать с хрупкими предметами.
В нашей работе HapticVLA, выполненной в Лаборатории интеллектуальной космической робототехники Сколтеха под руководством Дмитрия Тетерюкова, мы предложили использовать тактильные сенсоры только во время обучения. Сначала модель учится с их помощью, а затем полученные знания переносятся в VLA-модель, которая работает без датчиков касания.
В экспериментах HapticVLA достигла 86,7% успешных выполнений на трёх задачах с предметами разной степени хрупкости: пластиковой банкой, вафлями и яйцами.
Наш подход позволяет использовать тактильную информацию для обучения роботов без необходимости оснащать их дополнительными сенсорами при реальном применении.
Я начал работу над HapticVLA после поступления на совместную магистерскую программу AI Robotics Яндекса и Сколтеха. Параллельно с учёбой исследование заняло около полугода.
Статья на arxiv
—
Спасибо Мише за годные инсайды прямиком с IROS! На самом деле очень сложно с нуля за полгода сделать проект, который залетит и будет принят на топовую конфу, поэтому это мощно!
Накидайте Мише реакций за эксклюзив и пишите вопросы в комменты, пока он там на месте.
@ai_newz
Одна из ключевых задач Physical AI заключается в том, чтобы научить роботов взаимодействовать с физическим миром, в том числе контролировать силу захвата и аккуратно работать с хрупкими предметами.
В нашей работе HapticVLA, выполненной в Лаборатории интеллектуальной космической робототехники Сколтеха под руководством Дмитрия Тетерюкова, мы предложили использовать тактильные сенсоры только во время обучения. Сначала модель учится с их помощью, а затем полученные знания переносятся в VLA-модель, которая работает без датчиков касания.
В экспериментах HapticVLA достигла 86,7% успешных выполнений на трёх задачах с предметами разной степени хрупкости: пластиковой банкой, вафлями и яйцами.
Наш подход позволяет использовать тактильную информацию для обучения роботов без необходимости оснащать их дополнительными сенсорами при реальном применении.
Я начал работу над HapticVLA после поступления на совместную магистерскую программу AI Robotics Яндекса и Сколтеха. Параллельно с учёбой исследование заняло около полугода.
Статья на arxiv
—
Спасибо Мише за годные инсайды прямиком с IROS! На самом деле очень сложно с нуля за полгода сделать проект, который залетит и будет принят на топовую конфу, поэтому это мощно!
Накидайте Мише реакций за эксклюзив и пишите вопросы в комменты, пока он там на месте.
@ai_newz
Получи до 500 тысяч рублей за разработку мобильной игры-тренажера для людей, использующих протезы
https://codenrock.com/contests/motorika-kod-dvizheniya
https://codenrock.com/contests/motorika-kod-dvizheniya
Forwarded from Machinelearning
This media is not supported in your browser
VIEW IN TELEGRAM
Sakana AI и Токийский университет представили SAIL.
Модель получает несколько примеров выполнения задачи и предлагает траекторию.
Её проверяют в симуляторе, другая модель смотрит видео и отмечает, где робот перестал продвигаться к цели. Затем система меняет неудачный участок и пробует снова. На физический манипулятор отправляют только выбранную траекторию.
В симуляции робот выполнял шесть разных задач. Одна попытка выбрать движение приводила к успеху в 25% случаев. Когда SAIL могла проверить и улучшить до 45 вариантов, успех вырос до 73%. Затем метод испытали на настоящем роботе: в одной задаче он справился 5 раз из 6.
Пока это проверка на одной физической задаче, но идея наглядная: дать модели больше попыток *до* движения робота, не переобучая её.
Блог - https://pub.sakana.ai/sail/
Статья - https://arxiv.org/abs/2603.08269
@ai_machinelearning_big_data
#Sakana
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from RuCode Festival
💚 У ИИ-талантов появился ещё один повод побороться за победу!
В этом году Сбер — партнёр фестиваля RuCode — поддерживает номинацию «ИИ-таланты» в рамках Премии RuCode.
Номинация создана для студентов, которые не ограничиваются учебными заданиями, а разрабатывают собственные проекты и проводят исследования в области искусственного интеллекта.
Именно такие ребята двигают сферу ИИ вперёд: пробуют новые подходы, находят нестандартные решения и уже во время учёбы вносят свой вклад в развитие технологий.
🏆 Победители и призёры получат дополнительные подарки от Сбера!
⏰ До 18 октября принимаем заявки на Премию RuCode.
👉 Подробности и регистрация
В этом году Сбер — партнёр фестиваля RuCode — поддерживает номинацию «ИИ-таланты» в рамках Премии RuCode.
Номинация создана для студентов, которые не ограничиваются учебными заданиями, а разрабатывают собственные проекты и проводят исследования в области искусственного интеллекта.
Именно такие ребята двигают сферу ИИ вперёд: пробуют новые подходы, находят нестандартные решения и уже во время учёбы вносят свой вклад в развитие технологий.
🏆 Победители и призёры получат дополнительные подарки от Сбера!
⏰ До 18 октября принимаем заявки на Премию RuCode.
👉 Подробности и регистрация
Forwarded from Нейродвиж
Убийца платных генераторов картинок уже здесь — вышла открытая модель FLUX 3 Image Klein, которая выдает качество тяжеловесных флагманов и спокойно крутится на домашнем железе 🍆
Малышка на 5,6B параметров летает даже на 8 ГБ видеопамяти, но выдаёт нативное 4K, попиксельный эдитинг и уделывает Qwen Image 2.1. Поддержка ComfyUI и кванты уже из коробки.
Забираем веса бесплатно и идем прогревать видеокарты на Hugging Face😠
Малышка на 5,6B параметров летает даже на 8 ГБ видеопамяти, но выдаёт нативное 4K, попиксельный эдитинг и уделывает Qwen Image 2.1. Поддержка ComfyUI и кванты уже из коробки.
Забираем веса бесплатно и идем прогревать видеокарты на Hugging Face
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from CodeCamp
This media is not supported in your browser
VIEW IN TELEGRAM
Ночное-полезное: разбираемся с Arduino прямо в браузере — нашел бесплатный интерактивный тренажёр для изучения 😒
В Learn Arduino можно собирать виртуальные схемы, подключать датчики, моторы и светодиоды, писать код и сразу смотреть, как всё работает. При этом сам проект собрали с помощью Claude Opus 5.5.
Красота🤩
В Learn Arduino можно собирать виртуальные схемы, подключать датчики, моторы и светодиоды, писать код и сразу смотреть, как всё работает. При этом сам проект собрали с помощью Claude Opus 5.5.
Красота
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from DLS — новости
Хотим напомнить про наше новое мероприятие — Diffusion Week 2026!
Это серия онлайн-лекций о диффузионных моделях от DLS, которая пройдет с 29 октября по 6 ноября, в рамках которой мы разберём основы и углубимся в актуальные направления исследований: видеодиффузия, world models, интерпретируемость и ускорение диффузионных моделей. Полное расписание уже доступно на сайте.
Вступайте в чат Diffusion Week и подключайтесь к трансляциям!
Да! Параллельно мы запустим соревнование по мультиконцептной персонализации.
Задача: научить модель генерировать несколько заданных объектов на одном изображении, не смешивая их между собой. Соревнование пройдёт в трёх треках, все детали опубликуем чуть позже
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from эйай ньюз
Media is too big
VIEW IN TELEGRAM
FreeVideo запускает MiniMax H3 на домашней видеокарте
Заявленный минимум для генерации видео составляет 8 GB VRAM и 16 GB оперативки. FreeVideo работает плагином для ComfyUI, поддерживает LoRA, первый и последний кадры, а также референсы. Для Windows есть установщик, который сам подтягивает окружение и модели.
В основе 8-шаговая VDN-H3 с гибридным attention. Движок распределяет веса между видеопамятью, оперативкой и диском, подгружая нужные части по ходу генерации.
Для 8 GiB VRAM и 16 GiB RAM авторы приводят 13,8 секунды на шаг генерации, но это серверная H200 с искусственным лимитом памяти. Замера полного ролика на домашней 8 GB карте в документации нет. На Windows RTX 5060 Ti с 16 GB VRAM и 32 GB RAM генерирует 10 секунд видео в 768p за 486 секунд.
Код и установка
VDN
Замеры
@ai_newz
Заявленный минимум для генерации видео составляет 8 GB VRAM и 16 GB оперативки. FreeVideo работает плагином для ComfyUI, поддерживает LoRA, первый и последний кадры, а также референсы. Для Windows есть установщик, который сам подтягивает окружение и модели.
В основе 8-шаговая VDN-H3 с гибридным attention. Движок распределяет веса между видеопамятью, оперативкой и диском, подгружая нужные части по ходу генерации.
Для 8 GiB VRAM и 16 GiB RAM авторы приводят 13,8 секунды на шаг генерации, но это серверная H200 с искусственным лимитом памяти. Замера полного ролика на домашней 8 GB карте в документации нет. На Windows RTX 5060 Ti с 16 GB VRAM и 32 GB RAM генерирует 10 секунд видео в 768p за 486 секунд.
Код и установка
VDN
Замеры
@ai_newz
Forwarded from Machinelearning
🔎 Google выпустила EmbeddingGemma 2: мультимодальный поиск прямо на устройстве
Модель переводит текст, код, изображения, видео и аудио в единое векторное пространство. Например, позволяет найти нужный снимок по текстовому описанию.
Всего 740 млн параметров:
• 270 млн для текста;
• 170 млн для изображений;
• 300 млн для аудио.
Нужные модули можно подключать отдельно. В оптимизированном запуске на Pixel 11 Pro полная модель использует около 567 МБ активной RAM, текстовая часть около 191 МБ.
Лицензия Apache 2.0 допускает коммерческое использование. Практическое применение: локальный поиск по документам и медиа без отправки данных в облако.
https://deepmind.google/models/gemma/embeddinggemma/
@ai_machinelearning_big_data
#Gemma #Google
Модель переводит текст, код, изображения, видео и аудио в единое векторное пространство. Например, позволяет найти нужный снимок по текстовому описанию.
Всего 740 млн параметров:
• 270 млн для текста;
• 170 млн для изображений;
• 300 млн для аудио.
Нужные модули можно подключать отдельно. В оптимизированном запуске на Pixel 11 Pro полная модель использует около 567 МБ активной RAM, текстовая часть около 191 МБ.
Лицензия Apache 2.0 допускает коммерческое использование. Практическое применение: локальный поиск по документам и медиа без отправки данных в облако.
https://deepmind.google/models/gemma/embeddinggemma/
@ai_machinelearning_big_data
#Gemma #Google