Полный текст
«Сбер» анонсировал семейство генеративных моделей Kandinsky WM 1.0, предназначенных для синтеза видео с реалистичной физикой. Эти ролики используются для обучения систем Physical AI — беспилотного транспорта, промышленных роботов и другого оборудования, взаимодействующего с материальным миромДо этого обучение таких систем было сложным и дорогим, поскольку сбор реальных видео с камер стоит огромных денег, аварии или отказы оборудования вообще нельзя снять без риска, а генерированные другими нейросетями ролики страдали искажениями геометрии, «пластилиновыми» объектами и нарушением перспективыРазработчики под руководством Дениса Димитрова дообучили Kandinsky 5.0 Video Lite на нескольких миллионах реальных записей с камер роботов, дронов и промышленных объектов. Это резко снизило число типичных артефактов. Теперь Kandinsky WM генерируют физически корректные пятисекундные клипы, отображающие манипуляции с предметами, дорожные сцены и производственные процессы. Материал пригоден для тренировки систем компьютерного зрения и симуляторов📸 Дмитрий Матвеев@ruhard