Возглавил направление AI Core & Bitrix Robotics в Битрикс24

Вартанян уже рассказал, что Битрикс24 открыл лабораторию робототехники
Тот Валера, который приезжал ковырять нутро и мозги пациента, это я
Робота зовут Марта, это гуманоид AgiBot X2

На видео Марта сама встаеет с пола, держит толчок, здоровается по имени, показывает сердечко и прощается
Пульта нет, управление передано агентному харнесу, ничего не записано заранее
Ей говорят голосом, она решает, что сделать, и делает

Мозги Марты подключены к омни-модели, она даёт низкую задержку и живой голос, с Мартой приятно разговаривать
Сверху агентный харнес, тот же, на котором мы последние месяцы собирали Коворк и BitrixGPT, промпты, скиллы, память о людях, инструменты и интеграция в Битрикс24

Только вместо bash и git у неё шаг, разворот, жест, камера
Через харнес получилось не просто дёргать робота командами
Марта понимает, кто перед ней, о чём её попросили и получилось ли сделать

Производитель отдаёт железо, ходьбу, баланс и набор жестов
Остальное делаешь сам, вот примерный набор что надо сделать, собрать, протестировать, и часть запихнуть на пк внутрь робота

VAD понимает, когда человек начал и закончил говорить
STT переводит речь в текст
TTS отвечает голосом
AEC подавление эха, чтобы Марта не слышала и не перебивала саму себя
Hardware Bridge мост к железу робота: камеры, лидар, микрофон, динамик, жесты, ходьба
Face Recognition узнаёт людей по лицу и помнит, кто есть кто
Object Detection видит предметы на всех камерах и знает, на каком они расстоянии
Mapping строит карту помещения по лидару и камере глубины
Localization понимает, где она стоит на этой карте
Orientation знает, куда повёрнута и куда смотрит
Lidar Obstacle Avoidance видит препятствия лидаром и обходит их
То есть всё, что превращает ходячее железо в робота, с которым можно работать

Робот отдаёт данные с датчиков и выполняет команды, а мозги пока живут на отдельном компьютере
Следующий шаг: перенести их на борт, на Jetson Orin внутри робота

Самое сложное сейчас
Научить Марту понимать, где она находится
Камеры, стерео, глубина, карта помещения есть, а быстрой и честной локализации из них пока не собрали
Бывает, она уверена, что стоит у окна, а стоит у стола
На видео она уже находит меня по детекциии лиц меня и идёт к столу, но пока не с первого раза
Когда начнёт уверенно знать, где стоит, "подойди ко мне к столу" станет рабочим сценарием

Мне это напоминает GPT в 2023, готовых бизнес-кейсов ещё нет, интерес уже есть
Будем строить место, где роботы и люди работают вместе, внутри экосферы Битрикс24

Дальше буду рассказывать, как учим Марту ориентироваться и какие грабли собрали по пути

Stay tuned!

Небольшой сюрприз для всех вас этим вечером🔥

Мы запускаем отдельный сервис видеозвонков.

В этот раз - для всех, а не для работы.

Если вам надоел Zoom - попробуйте этот свежак!

P.S. Это полностью новые видеозвонки - простые, быстрые, красивые. Открытое тестирование начинаем сегодня!

Скоро эта технология заменит старые звонки в Битрикс24 с кучей новых плюшек.

👉А пока приглашаем вас попробовать.

Презентация новых Бизнес-процессов 2.0. В прямом эфире 28 октября 🔥

Раньше сквозной процесс клеили из кусков по разным разделам. Теперь это одна схема: от заявки до закрытия. С ИИ, который знает, как устроена работа именно у вас.

28 октября в 11:00 мск представим на эфире:

🔵 что в ИИ-автоматизации Битрикс24 уже доступно
🔵 как собрать бизнес-процесс по текстовому описанию через Коворк/Код или собственного ИИ-агента
🔵 как связать Битрикс24 с оборудованием и сервисами, созданными вайбкодингом. Без отдела разработки и сложных ТЗ

Будет полезно:

🧩️️️️️️ Руководителям и владельцам: масштабируйтесь без расширения штата.
🧩 Менеджерам и специалистам: станьте первыми, кто освоит новый инструмент.

Всем участникам бонус — персональная консультацию по внедрению ИИ-решений в компанию.

👉Хочу на презентацию

UPD❗️

17:53: Разработчики PHP уже выпустили исправления. Сейчас мы готовим и тестируем обновление серверов облачного Битрикс24. Просим набраться терпения - наша команда постарается сделать все настолько быстро, насколько это вообще возможно.

Для защиты ваших данных временные ограничения пока сохраняются. Они могут затрагивать формы, сделки в CRM, письма и бизнес-процессы.

Будем возвращать функции поэтапно после установки исправлений и проверок безопасности. О восстановлении сообщим отдельно. Напоминаем, что это крайняя мера, на которую мы пошли для сохранения в безопасности ваших данных.

_____

Уточняем, что сейчас происходит в облачном Битрикс24

В предыдущем посте мы предупредили о серьезных уязвимостях, найденных сегодня в языке программирования PHP. Чтобы максимально защитить ваши данные, мы вводим временные ограничения в работе облака Битрикс24.

Они могут затрагивать, к примеру, работу с формами и файлами. Могут быть и другие сложности с работой. Это не авария, а осознанная крайняя мера.

Безопасность ваших данных для нас — основной приоритет на время устранения угрозы. Понимаем, что ограничения мешают вашей работе. Введение таких ограничений необходимо — мы не можем рисковать безопасностью!

17:00 МСК — время ожидаемого выпуска исправлений разработчиками PHP, а не срок восстановления всех функций. После этого потребуется время на установку и проверку.

О восстановлении работы сообщим отдельно 🙌

Всё снова работает. Спасибо, что были с нами эти несколько часов 💙

Облачный Битрикс24 работает в обычном режиме: файлы загружаются, все функции на месте. Мы установили обновления на наши серверы и проверили, что всё работает безопасно.

Знаем, что сегодняшний день дался многим непросто.
Спасибо за Ваше терпение и понимание 😊

Ограничение было неприятным, но необходимым. Уязвимости в PHP были критическими, и для нас было важно, чтобы ваши данные оставались в безопасности, пока мы закрывали угрозу.

🖥 Если у вас коробочный Битрикс24 или сайт на «1С-Битрикс: Управление сайтом»
На вашем сервере PHP нужно обновить отдельно. Обновление Битрикс через SiteUpdate эту задачу не решает. Исправления вошли в версии PHP 8.5.12, 8.4.27, 8.3.36 и 8.2.35.

Перешлите эту инструкцию системному администратору, обслуживающему партнёру или хостингу: https://habr.com/ru/news/1097474/