На международной конференции AI Journey 2024 Сбер продемонстрировал значительные достижения в области искусственного интеллекта, представив как обновлённую нейросеть для создания видео Kandinsky 4.0 Video, так и целое семейство роботов-помощников, а также новый умный гаджет для удалённой диагностики — электронный стетоскоп.
Kandinsky 4.0 Video — новый уровень генерации видеоконтента
Сбер презентовал бета-версию модели Kandinsky 4.0 Video, которая позволяет создавать реалистичные видеоролики по текстовому описанию или стартовому кадру. Модель может использоваться как обычными пользователями для создания анимаций, так и профессионалами (дизайнерами, маркетологами, мультипликаторами) для разработки клипов и трейлеров.
Андрей Белевцев, старший вице-президент Сбербанка: «Мы значительно улучшили качество и скорость генерации видео, открывая новые возможности для творчества. Kandinsky 4.0 Video позволит каждому выразить свои идеи в видеоформате, и мы уверены, что искусственный интеллект будет решать всё больше задач, приближая технологии к уровню восприятия и создания информации, как у человека.»
Теперь модель генерирует видеоролики продолжительностью до 12 секунд в HD-качействе (1280×720) по любому текстовому запросу или стартовому кадру. Также доступны разные соотношения сторон для различных нужд пользователей. Улучшено качество изображения: высокая чёткость, контраст и реалистичность движений объектов.
Команда также представила версию Kandinsky 4.0 Video Flash, которая генерирует видео в разрешении 480p за 15 секунд. Основанная на диффузионном трансформере с 5 млрд параметров, модель использует передовые алгоритмы для эффективного обучения.
Сначала доступ к новой версии получат специалисты из креативных индустрий через платформу fusionbrain.ai, где можно генерировать полноценные мини-фильмы. Для широкой аудитории модель станет доступна в первом квартале 2025 года.
Семейство роботов-помощников Сбера
Сбер также представил на AI Journey целое семейство роботов-помощников, разработанных в Центре робототехники. Эти роботы объединяют различные технологии искусственного интеллекта и предназначены для выполнения разнообразных задач, от развлечений до тестирования новых алгоритмов.
Топа — робот-аниматроник, который напоминает избушку на курьих ножках из русских сказок. Разработанный с помощью специалистов «Союзмультфильма», он уже делает первые шаги и совершенствуется с каждым днём. В будущем Топа научится бегать, прыгать и танцевать, а его уникальный голос был создан с помощью нейросети SymFormer, генерирующей музыкальные партии и озвучивающей их с помощью виртуальных синтезаторов.
Куба — маленький робот-аниматроник, который исследует алгоритмы ходьбы и динамического равновесия, а также помогает тестировать методы машинного обучения с подкреплением. Он уже прошёл свою первую стометровку и продолжает развиваться, чтобы стать идеальным ходоком.
Краб — двурукий робот-помощник, использующий AI-технологии на основе архитектуры диффузионного трансформера. Этот робот способен манипулировать предметами: он может убирать со стола, брать вещи и складывать их в контейнер. Интересно, что пользователи могут добавлять объекты на стол, и Краб самостоятельно спланирует траекторию своих «рук», чтобы взять эти предметы и поместить их в контейнер. Краб может работать как в режиме автономного AI, так и в режиме телеуправления.
Слон — ещё один робот-помощник, который понимает запросы человека и выполняет поставленные задачи, такие как перенос предметов. Слон может вести диалог, отвечая на вопросы, и корректировать свои действия, если допустил ошибку. В основе робота — большая языковая модель, которая помогает ему анализировать запросы и планировать действия, используя данные с камер и сенсоров.
Алексей Гонноченко, директор Центра робототехники Сбербанка, отметил: «Наши роботы — это шаг в сторону создания универсальных помощников, которые смогут выполнять задачи как в быту, так и на производстве. С уникальной AI-начинкой они адаптируются к любым ситуациям и взаимодействуют с окружающим миром и людьми на интуитивном уровне.»
Также на AI Journey Сбер представил робособаку, которая может выполнять трюки в стиле паркур, преодолевая препятствия, больше её размера. Робот обучается в виртуальной среде с использованием метода обучения с подкреплением, а затем применяет эти знания в реальной жизни, планируя свои действия с учётом внешних условий.
Сбер активно разрабатывает роботов для автоматизации различных операций, таких как складская логистика, манипуляции в кассово- инкассаторских центрах и мобильный мониторинг. Эти разработки открывают новые горизонты для применения робототехники в самых разных областях.
Новый умный гаджет для удаленной диагностики: электронный стетоскоп от Сбера
На конференции AI Journey Сбер также показал инновационное решение для медицины — умный электронный стетоскоп, предназначенный для дистанционной диагностики и мониторинга здоровья. Этот гаджет был продемонстрирован Президенту России Владимиру Путину в рамках презентации новейших технологий.
Электронный стетоскоп позволяет врачам проводить дистанционную диагностику, прослушивая дыхание и сердечные тоны пациента. Устройство компактно и оснащено Bluetooth для беспроводной передачи данных, что делает его удобным для использования в условиях телемедицины. Пациенты могут записывать аудио данные и отправлять их врачу через мобильное приложение, получая консультацию без необходимости личного визита в медицинское учреждение.
Это устройство особенно полезно для диагностики таких распространённых заболеваний, как ОРВИ и сердечно-сосудистая недостаточность, позволяя быстро и эффективно получать медицинскую помощь, не выходя из дома. С помощью стетоскопа можно получить точные рекомендации от врача в удобное время, без лишних поездок и ожидания.
Сбер продолжает развивать телемедицинские технологии, стремясь улучшить доступность и качество медицинской помощи с использованием современных AI-решений.
Фото: Telecom Times, пресс-материалы.
