Constraint Decay: хрупкость LLM-агентов при генерации бэкенд-кода
Новое исследование на arXiv (arXiv:2605.06445) выявило фундаментальную проблему современных LLM-агентов: они отлично справляются с генерацией кода по расплывчатым спецификациям, но резко теряют качество при добавлении жёстких структурных ограничений — архитектурных паттернов, схем БД и ORM-маппингов.
Авторы провели систематическую оценку на 80 задачах генерации с нуля и 20 задачах добавления фич для восьми веб-фреймворков. Использовалась двойная проверка: end-to-end поведенческие тесты и статические верификаторы. Результат — феномен «распада ограничений» (constraint decay): при накоплении структурных требований успешные конфигурации теряют в среднем 30 процентных пунктов по прохождению ассертов, а слабые падают почти до нуля.
Анализ чувствительности к фреймворкам показал разительные различия: агенты успешно работают с минималистичными и явными фреймворками (Flask), но значительно хуже справляются с convention-heavy средами (FastAPI, Django). Основной источник ошибок — дефекты слоя данных: неверная композиция запросов и runtime-нарушения ORM.
Исследование подчёркивает, что совместное выполнение функциональных и структурных требований остаётся ключевым открытым вызовом для кодовых агентов.
#Ai #LLM #Research #Backend #Agents
Новое исследование на arXiv (arXiv:2605.06445) выявило фундаментальную проблему современных LLM-агентов: они отлично справляются с генерацией кода по расплывчатым спецификациям, но резко теряют качество при добавлении жёстких структурных ограничений — архитектурных паттернов, схем БД и ORM-маппингов.
Авторы провели систематическую оценку на 80 задачах генерации с нуля и 20 задачах добавления фич для восьми веб-фреймворков. Использовалась двойная проверка: end-to-end поведенческие тесты и статические верификаторы. Результат — феномен «распада ограничений» (constraint decay): при накоплении структурных требований успешные конфигурации теряют в среднем 30 процентных пунктов по прохождению ассертов, а слабые падают почти до нуля.
Анализ чувствительности к фреймворкам показал разительные различия: агенты успешно работают с минималистичными и явными фреймворками (Flask), но значительно хуже справляются с convention-heavy средами (FastAPI, Django). Основной источник ошибок — дефекты слоя данных: неверная композиция запросов и runtime-нарушения ORM.
Исследование подчёркивает, что совместное выполнение функциональных и структурных требований остаётся ключевым открытым вызовом для кодовых агентов.
#Ai #LLM #Research #Backend #Agents
👏1
💗 Lovable запускает Lovable Cloud и Lovable AI — полноценный бэкенд и ИИ-функции по текстовому запросу
Lovable представил два новых продукта: Lovable Cloud (встроенный бэкенд) и Lovable AI (добавление ИИ-возможностей в приложения). Теперь разработчики могут создавать полнофункциональные fullstack-приложения с базой данных, аутентификацией, файловым хранилищем и AI-интеграциями без ручной настройки инфраструктуры — просто описывая желаемое на естественном языке.
Lovable Cloud автоматически разворачивает бэкенд: поддержка социальных приложений, платформ с постами и комментариями, систем инвентаризации, инструментов для совместной работы и обучающих курсов. Встроены масштабирование, безопасность на уровне строк и аутентификация. Бесплатный тариф покрывает до $25/мес. использования.
Lovable AI, работающий на моделях Google Gemini, позволяет добавлять в приложения генерацию контента, чат-ботов, анализ тональности, поиск по документам, перевод, генерацию изображений (Nano Banana) и автоматизацию задач — без управления API-ключами и биллингом. Бесплатно на 2 недели для всех пользователей.
#Lovable #AI #fullstack #development #backend
Lovable представил два новых продукта: Lovable Cloud (встроенный бэкенд) и Lovable AI (добавление ИИ-возможностей в приложения). Теперь разработчики могут создавать полнофункциональные fullstack-приложения с базой данных, аутентификацией, файловым хранилищем и AI-интеграциями без ручной настройки инфраструктуры — просто описывая желаемое на естественном языке.
Lovable Cloud автоматически разворачивает бэкенд: поддержка социальных приложений, платформ с постами и комментариями, систем инвентаризации, инструментов для совместной работы и обучающих курсов. Встроены масштабирование, безопасность на уровне строк и аутентификация. Бесплатный тариф покрывает до $25/мес. использования.
Lovable AI, работающий на моделях Google Gemini, позволяет добавлять в приложения генерацию контента, чат-ботов, анализ тональности, поиск по документам, перевод, генерацию изображений (Nano Banana) и автоматизацию задач — без управления API-ключами и биллингом. Бесплатно на 2 недели для всех пользователей.
#Lovable #AI #fullstack #development #backend
👍1💯1