Новости Сбера на AI Journey: прогнозирование медицинских диагнозов и создание видео с помощью ИИ

Сбер провел дискуссию со школьниками, рассказал об ИИ-системе прогнозирования медицинских диагнозов, ИИ-модели для классификации ESG-рисков, нейросети для генерации видео Kandinsky Video и о создании заставок для СберБанк Онлайн с помощью Kandinsky 3.0 на конференции AI Journey. Об этом сообщает пресс-служба компании.

Школьный трек AI Journey открылся дискуссией с юными талантами

Школьный трек международной конференции «Путешествие в мир искусственного интеллекта» (AI Journey) открылся дискуссией AI for everyone («Искусственный интеллект для каждого»). Первый заместитель председателя правления Сбербанка Александр Ведяхин пообщался с юными талантами – девушками, которые реализуют свои проекты в области искусственного интеллекта (ИИ).

В процессе диалога участницы рассказали о своих историях успеха и о вызовах, с которыми сталкивались, что повлияло на выбор AI и IT как направления для развития. Так, участница из Башкортостана в свои 15 лет уже разрабатывает сайты интернет-магазинов и новостных порталов. Она финалистка конкурса AI Challenge (его проводят Сбер и альянс в сфере ИИ) по направлению «Медицина», в котором её команда решала задачу определения инфаркта миокарда по сигналам ЭКГ.

ИТ-путешествие другой девушки из Казахстана, финалистки AI Challenge в треке «Производство», тоже началось с разработки сайтов. Потом она сделала приложение для трекинга заболевших растений и разработала алгоритм анализа заказов для определения срыва поставок на конкурсе.

Участница из Москвы, двукратная победительница AI Challenge, занимается генерацией музыки и 3D-объектов с помощью моделей ИИ, а также проектирует метавселенную.

Участница из Свердловской области работает над исследовательским проектом по нейросетям и учится использовать их в профессиональной работе журналиста.

Наконец, участница из Иркутской области, которой всего 10 лет, реализовала уже несколько проектов в робототехнике. Она мечтает создать робота для решения экологических проблем, например, для тушения пожаров или сбора мусора.

Девушки рассказали о том, как они справляются с трудностями при проектировании сервисов на основе искусственного интеллекта, и посоветовали тем, кто только начинает свой путь, не бояться сложных задач и всегда стремиться к большему. Александр Ведяхин согласился, что любой проект в сфере искусственного интеллекта начинается с интереса к этой теме и веры в себя.

– Должен быть интерес – большой, яркий, живой интерес к этой сфере. Второе – это вера в себя и понимание того, что ты сможешь найти ответ на любой вопрос, решить любую задачу. Нерешаемых проблем нет. Какой смысл повторять то, что уже сделали другие? Надо делать всегда что-то новое. И мы, как Сбер, все так думаем. Базовые знания – здесь без этого никуда, потому что одного интереса и веры в себя недостаточно. Дальше – это постоянное саморазвитие и отслеживание новостей в мире искусственного интеллекта. Поэтому необходима постоянная насмотренность, понимание, изучение, движение вперёд, – заявил Александр Ведяхин.

Школьный трек AI Journey Junior проходит в онлайн-режиме. Он предназначен для учащихся средних и старших классов, которые интересуются искусственным интеллектом. На нём можно узнать, как ИИ меняет мир к лучшему, дарит крутые возможности и помогает совершать удивительные открытия. От экспертов индустрии ребята получат знания о том, как устроены графы и большие языковые модели, как создать свой сериал и написать сказку с помощью ИИ, связать с искусственным интеллектом своё профессиональное будущее, создать ИИ-стартап или эффективно использовать, созданные Сбером, нейросеть Kandinsky или сервис GigaChat. Все дискуссии AI Journey Junior доступны на сайте конференции.

Ученые Сбера создали систему моделирования и прогнозирования диагнозов

Лаборатория по искусственному интеллекту (ИИ) Сбера разработала медицинское решение, которое моделирует состояние здоровья пациентов по данным их электронных медицинских карт. Об этом рассказал Александр Ведяхин в рамках международной конференции AI Journey.

Специалисты банка адаптировали современную нейросетевую архитектуру Transformers для работы с последовательностями диагнозов пациентов. Данный подход позволил получить формальное представление медицинских профилей пациентов в виде эмбеддингов (embedding – вложение, числовой вектор признаков), полезных для множества научных и практических задач.

Это решение открывает возможности для моделирования треков дальнейшего развития состояний пациентов. Такое свойство модели проверено в задаче предсказания следующего диагноза и подтверждено высокими метриками в эксперименте на публичном датасете медицинских записей MIMIC-III (открытая база данных с информацией о пациентах, поступивших в отделения интенсивной терапии крупного медицинского центра).

– Это уже не первое прорывное MedTech-решение Сбера и наших компаний-партнёров. В России всё шире применяются разработанные Сбером AI-сервисы: компьютерное зрение для расшифровки медицинских изображений (КТ, рентген, маммография), автоматическое заполнение врачебной документации (из голоса – в текст), диагностика заболеваний и другие. Мы также изучаем возможности прогностических моделей, которые работают с медицинскими данными. Как показывает практика, такие решения могут быть востребованы не только в медицине, но и в смежных областях. Это ещё один вклад в сохранение человеческих жизней и развитие здравоохранения, – заявил Александр Ведяхин.

Модель Сбера имеет потенциал применения и в страховом скоринге. С помощью данной модели удастся получить значимый прирост в точности оценки страховых рисков относительно традиционных методов, а это новые возможности для персонализации тарифов и сокращения издержек. Сейчас модель работает с историческим данными, следующим этапом будет обучение её работе в онлайне с данными, получаемыми от клиентов для принятия решения в момент обращения.

Также в ходе исследования предложен H2D-метод (Harbinger Disease Discovery) поиска предвестников заболеваний, позволяющий автоматически генерировать гипотезы о взаимосвязях между болезнями. Так, благодаря нему удалось обнаружить сильную зависимость между группой психологических расстройств и раком молочной железы у женщин. Достоверность этой гипотезы подтверждается в смежных научных исследованиях. В результате учёные сформировали новый набор гипотез о предвестниках пяти наиболее распространённых видов онкозаболеваний. Метод H2D поможет врачебному и научному сообществу в поиске новых направлений медицинских исследований.

Научная работа опубликована в высокорейтинговом международном журнале IEEE Journal of Biomedical and Health Informatics. Текст публикации и исходный код выложены в открытый доступ.

Сбер открыл доступ к ИИ-модели для классификации ESG-рисков

Специалисты лаборатории искусственного интеллекта и дирекции по ESG Сбербанка разработали удобный инструмент для оценки ESG‑рисков компаний – открытую NLP-модель ESGify. Об этом рассказал Александр Ведяхин в рамках международной конференции по искусственному интеллекту AI Journey 2023.

Модель на основе технологии NLP (Natural Language Processing) позволяет обрабатывать и структурировать текстовую информацию, поддерживает русский и английский языки. Для обучения модели был использован датасет (набор данных) из 2,5 тысячи уникальных текстов об ESG-рисках. Для повышения качества была проведена двухэтапная проверка результатов разметки датасета.

Классификатор разработан на основе риск-ориентированного подхода. Модель способна соотнести любой текст из открытых источников с определённым видом реализовавшегося риска либо указать на его отсутствие. Таким образом, сервис помогает решить вопрос анализа ESG‑рисков на основе публичной информации в условиях отсутствия стандартизированных данных по компаниям.

Сервис встраивается в любые продукты или механизмы по оценке ESG-рисков. Классификация ESG-рисков помогает развитию ESG-практик в Data Science и бизнес-сообществах. ИИ-модель Сбера может помочь оценить инвестиционную привлекательность бизнеса с учётом ESG-рисков, а также помочь в проверке поставщиков, контрагентов и клиентов на соответствие ESG-принципам. Сервис также будет полезен консалтинговым компаниям и аналитическим агентствам.

– Сбер одним из первых в России внедрил ESG-принципы во все аспекты своей деятельности и уже несколько лет делится своей экспертизой, инновационными инструментами и сервисами с бизнесом и регионами, чтобы помочь им в ESG-трансформации. Оптимизировать процессы работы с ESG-рисками помогает наша AI-модель, которая автоматически определяет типы рисков. ESGify имеет продвинутую иерархию: модель способна классифицировать тексты по 47 экологическим, социальным и управленческим темам. Она непрерывно обучается и развивается. Планируется, что в будущем сервис сможет не только классифицировать риски, но и определять их значимость, – рассказал Александр Ведяхин.

Сбер представил первую в России нейросеть для генерации полноценного видео Kandinsky Video

Сбер представил нейросеть Kandinsky Video. Это первая в России генеративная модель для создания полноценных видеороликов по текстовому описанию. Модель генерирует видеоряд продолжительностью до восьми секунд с частотой 30 кадров в секунду. Об этом в ходе международной конференции AI Journey рассказал Александр Ведяхин.

Архитектура Kandinsky Video состоит из двух ключевых блоков: первый отвечает за создание ключевых кадров, из которых складывается структура сюжета видео, а второй – за генерацию интерполяционных кадров, которые позволяют достичь плавности движений в финальном видео. В основе двух блоков лежит новая модель синтеза изображений по текстовым описаниям Kandinsky 3.0.

Формат сгенерированного видео представляет собой непрерывную сцену с движением как объекта, так и фона. Именно это отличает видеоролики, синтезированные моделью Kandinsky Video, от анимационных видеороликов, в которых динамика достигается за счёт моделирования пролёта камеры относительно статичной сцены. Нейросеть создаёт видеоролики с разрешением 512х512 пикселей и различным соотношением сторон. Модель обучена на датасете из более чем 300 тысяч пар «текст-видео». Генерация видео занимает до трёх минут.

– Недавно мы обучили Kandinsky создавать анимационные видео по текстовому описанию, а уже сегодня представляем модель совершенно другого уровня – первую в России модель по генерации полноценных видеороликов по тексту. Это важный вклад в развитие российских генеративных нейросетей. У пользователей появится ещё больше возможностей для креатива и реализации своих творческих задумок любой направленности. Люди смогут создавать уникальные видеоролики абсолютно бесплатно. Наша модель, как и большинство других в линейке Сбера, будет доступна в open source. Мы верим, что искусственный интеллект сможет открыть перед людьми новые супервозможности и создать инструменты, которыми они будут пользоваться для решения своих задач, – говорит Александр Ведяхин.

Ранее у активных пользователей Kandinsky 2.2 в тестовом режиме появилась возможность создания анимационных видеороликов. По одному запросу можно создать видео длиной в четыре секунды с выбранным эффектом анимации, с частотой 24 кадра в секунду и разрешением 640х640 пикселей. Пользователи нейросети Kandinsky 3.0 также могут создавать видеоролики по текстовому описанию в режиме анимации.

Оценить возможности нейросети Kandinsky Video можно на платформе fusionbrain.ai и в Telegram-боте, где можно оставить заявку на доступ.

Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке учёных из института искусственного интеллекта AIRI на объединённом датасете Sber AI и компании SberDevices. В апреле 2023 года сервис на базе нейросети Kandinsky 2.1, стал самым быстрорастущим в мире. Он набрал один миллион уникальных пользователей всего за четыре дня после выхода.

В СберБанк Онлайн можно создавать свои заставки с Kandinsky 3.0

В свежем обновлении СберБанк Онлайн на Android-смартфонах можно реализовать свой творческий потенциал и сгенерировать заставки для входа в приложение с помощью нейросети Сбера Kandinsky. Об этом было объявлено на международной конференции «Путешествие в мир искусственного интеллекта» (AI Journey).

Нарисовать можно до пяти заставок, они будут чередоваться при каждом входе в приложение. Причём каждая из них будет уникальной, ведь генерации нейросети никогда не повторяются.

Создание изображения занимает от нескольких секунд до пары минут. Пользователю нужно придумать текстовое описание (промпт) того, что он хочет увидеть на картинке, а далее нейросеть всё сделает сама. Чем подробнее будет запрос, тем точнее и качественнее получится итоговое изображение. Для Kandinsky нет ничего невозможного: модель способна создавать изображение на бесконечное количество тем. Коты-космонавты, сказочные герои или новогодние пейзажи, мир волшебства и магии, советская живопись или киберпанк – весь полёт фантазии теперь может оказаться на заставке СберБанк Онлайн.

– Нейросеть Kandinsky – это удивительный новый клиентский опыт, возможность привнести в СберБанк Онлайн свои эмоции и индивидуальность. Интеграция искусственного интеллекта бесконечно расширила спектр доступных заставок, теперь его определяет исключительно фантазия наших клиентов. Напомню, что, помимо шедевров от Kandinsky, в качестве заставки можно установить любимое фото, пейзаж от Русского географического общества или картину из Третьяковской галереи, изображения обитателей подводного мира, фото объектов под микроскопом и многое другое, – говорит вице-президент, директор департамента цифровых каналов B2C Сбербанка Алексей Круглов.

Сервис генерации заставок доступен на главном экране по «•••» – «Заставки от Kandinsky» (или по слову «Заставки» в поисковой строке). Чтобы воспользоваться им, нужно обновить мобильное приложение на устройствах Android до версии 14.18 и выше.

По инф. Телеинформа

• Расскажите об этом своим друзьям!

• Давайте приготовим баклажаны «под шубой»
  
  Селедку «под шубой» знают практически все, а вот баклажаны «под шубой» - нет. Давайте восполним этот пробел. Блюдо можно приготовить и для угощения здесь и сейчас, и также для зимних заготовок.
• Какие заготовки можно сделать в декабре
  
  Консервировать в декабре можно и нужно плоды айвы. Из нее можно приготовить вкуснейшие компоты, цукаты, желе, варенье и другие сладости. Также для консервации зимой сгодятся апельсины и лимоны. Для переработки оптимально подойдут поздние сорта айвы, собранные в конце октября — начале ноября, дозревшие во время недолгого хранения.
• Как ухаживать за недотрогой и Ванькой мокрым, то есть за бальзамином
  
  Немногим растениям удается долго удерживаться на пике популярности. Одним из рекордсменов, которому удается оставаться желанным гостем подоконников уже около ста лет, является бальзамин комнатный. Секрет в том, что в домашних условиях уход за этим растением не затруднит даже хозяев-новичков, а продолжительное, обильное и яркое цветение мало кого оставит равнодушным.
• Снег на даче пригодится, а как его удержать?
  
  Немало дачников строят различные ограждения, чтобы задержать на своем участке снег. Зачем они это делают?
• Как избавить дачу от мышей
  
  Большой проблемой дачников зимой являются мыши. Грызуны могут подпортить собранный урожай, принести опасные заболевания. Как же бороться с мышами на даче?
• Что в начале зимы делать дачникам в своем саду
  
  В начале декабря дачникам рекомендовали убрать с деревьев фрукты, которые остались на них с осени. Такой совет дала ученый-агроном и ландшафтный дизайнер Анастасия Коврижных.
• Сорта винограда, которым зима… ну почти нипочем
  
  Виноград – очень многим нравится эта культура. Но не для всех российских регионов она подходит. Есть ведь очень холодные территории. Но и виноград нынче боевой, морозостойкий. Иному и тридцатиградусные морозы нипочем.
• Дачные растения с целебными свойствами
  
  На участке можно вырастить немало растений, которые не только порадуют своими плодами, но и помогут в лечении разных болезней. Наверное, их нужно запомнить?
• Чем на даче может помочь березовый деготь
  
  Чуть ли не кaждый огородники мучается на своём участке с тем или иным врeдителем. То мыши наносят огромный урон, но кроты в нeкоторых регионах вспахивают всю дачу, то зайцы за зиму объeдают кору на деревьях. Избавиться от всех вредителей может помочь одно нaтуральное средство.
• Ваш интерьер освежит колумнея
  
  В сравнении сo свoими ближайшими рoдственниками – сенпoлией, стрептoкарпyсoм, глoксинией или кoлерией, эта представительница рoда геснериевых не так пoпyлярна y цветoвoдoв-любителей. А жаль... Красивoцветyщая лианка колумнея спoсoбна стать yкрашением любoгo интерьера и эффектно его освежить.
• Дачнику всегда пригодится узнать побольше о теплоизоляционных материалах
  
  Сохранить тепло в помещении и сэкономить на энергоресурсах хозяевам помогут теплоизоляционные материалы. Это разумное решение при строительстве или ремонте дома. На рынке наиболее востребованы около 5-7 разновидностей стройматериалов этой категории. Все они имеют сильные и слабые стороны.
• Что делать на участке в холодное время года: сад
  
  На зимние месяцы активность у садоводов снижается, наступает время подготовки к многочисленным  праздникам. Но для настоящих любителей сада и в этот период найдется немало работы, особенно если позволяет погода.
• Особенности ухода за комнатными растениями в ноябре
  
  Наступил ноябрь. В этом месяце есть свои тонкости ухода за комнатными растениями. Кому-то из них понадобится тепло, а другим наоборот прохлада. Многим в отопительный сезон необходим будет душ.
• Когда проводить генеральную уборку сада?
  
  Есть два лагеря садоводов. Одни наводят порядок осенью в страхе болезней и вредителей, чтобы чисто было, да и «некогда весной будет убираться». Вторые ограничиваются минимумом осенней уборки. Я принадлежу к последним.
• В чем польза мульчирования?
  
  Что такое мульча? Для чего необходимо мульчирование? В чем отличие хорошей и прокисшей мульчи? Ответы на эти вопросы обязательно пригодятся садоводам и огородникам.
• Ноябрьские тезисы для садовода и огородника
  
  Ноябрь в разгаре. В связи с приходом последнего осеннего месяца не лишними будут советы садоводам и огородникам, что же нужно делать и наоборот не делать в этот период.
• Как приготовить баклажаны по-итальянски
  
    Если на участке растут баклажаны, огородников интересуют и способы их приготовления. Например, баклажаны можно приготовить по-итальянски. Фаршированные мясом с зеленью, запеченные под томатным пюре и сыром в духовке. Такие баклажаны получаются сытными и очень вкусными.
• Как в домашних условиях ухаживать за стромантой
  
    Приобретая строманту, нужно быть готовым к тому, что ухаживать за ней придется каждый день. В теплое время года лучше всего для такого цветка подходит температура воздуха от 22 до 25 °C, а зимой следите за тем, чтобы в комнате не было прохладнее 18 °C.
• Ноябрьские дела садоводов и огородников
  
    Наступил ноябрь. Что надо сделать любителям шести соток в саду и на огороде в этом месяце обязательно, а что можно перенести на весну? А если на дачу удастся выбраться всего лишь один раз или два? Ответы на эти злободневные вопросы даны ниже.
• Популярный домашний цитрус - кумкват
  
    Многие цветоводы-любители хотят, чтобы их зеленые питомцы не только радовали глаз, но и приносили практическую пользу, например давали съедобные плоды. Одно из таких плодоносящих растений, получивших в последнее время довольно широкое распространение – кумкват. Это цитрус, выращиваемый в домашних условиях.