Яндекс позволит партнёрам вместе обучать нейросети и раздельно хранить данные

2 минуты на чтение
Яндекс позволит партнёрам вместе обучать нейросети и раздельно хранить данные

GigaChat Max кратко объясняет суть статьи

Яндекс, Институт системного программирования имени В. П. Иванникова РАН и Сеченовский Университет впервые применили федеративное машинное обучение в России для медицинских задач. Этот подход позволяет участникам проекта коллективно обучать модели, не передавая свои данные друг другу. Это открывает новые возможности для сотрудничества в области искусственного интеллекта, особенно для компаний, работающих с чувствительными данными. В рамках проекта была создана нейросеть, способная выявлять фибрилляцию предсердий по данным электрокардиограмм с высокой точностью. Для обучения использовались данные из двух независимых источников. В будущем клиенты Yandex Cloud смогут использовать федеративное машинное обучение для участия в совместных проектах без риска передачи чувствительных данных.

Яндекс вместе с Институтом системного программирования имени В. П. Иванникова РАН и Сеченовским Университетом первыми в России на практике применили федеративное машинное обучение для задач медицины.

Его также называют совместным, поскольку оно предназначено для проектов, где есть несколько участников с собственными наборами данных, или датасетами. Федеративный подход позволяет участникам коллективно обучать модели, никому не передавая свои данные.

Это открывает новые возможности для партнёрств в сфере искусственного интеллекта. Теперь в них смогут участвовать компании из отраслей, где имеют дело с чувствительной информацией: например, финансов, медицины или промышленности.

Как это работает

  • Сперва модель обучается на каждом из датасетов участников проекта. На центральный сервер передаются не сами датасеты, а результаты их обработки — к примеру, изменения в весах модели. Именно на них затем обучается глобальная модель.
  • Таким образом, датасеты на протяжении всего процесса обучения не покидают контуры организаций — и никто, кроме владельцев, не может получить к ним доступ.

Яндекс, ИСП РАН и Сеченовский Университет Минздрава России, используя федеративный подход, создали нейросеть, которая по данным электрокардиограмм выявляет фибрилляцию предсердий — одну из наиболее распространенных патологий сердца. Технология делает это с высокими показателями чувствительности и специфичности. Для обучения использовались два независимых датасета с электрокардиограммами: от Сеченовского университета и от ИСП РАН. Оба партнёра провели раунды обучения на своей стороне, а затем передали результаты в общий контур.

Проект реализовали эксперты центра технологий для общества Yandex Cloud. За техническую составляющую проекта отвечали инженеры Yandex Cloud и ИСП РАН. В Yandex Cloud продумали этапы реализации, предложили стек технологий, создали унифицированную среду для обучения и рассчитали необходимый объём ресурсов. В ИСП РАН разработали модель и адаптировали её под опенсорсный фреймворк федеративного обучения. Сеченовский Университет дал экспертную оценку качества модели.

В будущем воспользоваться федеративным машинным обучением смогут клиенты Yandex Cloud. Новый подход позволит участвовать в совместных проектах организациям, которые раньше не могли сотрудничать из-за рисков, связанных с передачей чувствительных данных. Это, в свою очередь, повысит качество итоговых моделей — чем больше партнёров в проекте, тем больше данных для обучения. Кроме того, федеративный метод будет полезен и партнёрам, которых разделяют большие расстояния — например, когда речь идёт о трансграничной передаче данных.

Читать первым в Telegram-канале «Код Дурова»

Важные новости коротко — от GigaChat Max 
1-bg-изображение-0
img-content-1-изображение-0

GigaChat Max: коротко о главном

Как изменился Код Дурова вместе с GigaChat Max?

Узнай о всех возможностях в FAQ-статье 
23484bbe-fefa-48fc-8014-f479ecd27d2b-изображение-0eb477000-97fc-431c-b2c1-2f97267adc9f-изображение-1

GigaChat Max: коротко о главном

Объём рынка рекламы в Telegram-ботах превысит 1 млрд рублей

Полная версия 
e4bbb405-68bb-41dd-972a-a2753a58b3f0-изображение-08b21ebbf-e63b-4a57-9ab3-e70962aed85c-изображение-1f827baea-bbf1-4dd7-8a80-c1ce52260738-изображение-2

GigaChat Max: коротко о главном

Это самый дешёвый электромобиль в мире — Slate Truck

Полная версия 

Реализовано через GigaChat Max 

Сейчас читают
Карьера
Блоги 344
Газпромбанк
Т-Банк
билайн
МТС
X5 Tech
Сбер
Яндекс Практикум
Ozon Tech
Циан
Банк 131