Alibaba Group представили EMO: нейросеть для анимации лиц и липсинка
EMO представляет собой Audio2Video модель, которая создаёт выразительные портретные видео только из изображения и звука. Оно фиксирует едва уловимые выражения лица и движения головы, создавая реалистичные ролики с пением или речью.
В отличие от традиционных методов, EMO использует прямой подход к преобразованию аудио в видео, отказываясь от 3D-моделей и ориентиров. Это означает более плавные переходы и более естественные экспрессии.
Alibaba Group представили EMO: нейросеть для анимации лиц и липсинка
EMO представляет собой Audio2Video модель, которая создаёт выразительные портретные видео только из изображения и звука. Оно фиксирует едва уловимые выражения лица и движения головы, создавая реалистичные ролики с пением или речью.
В отличие от традиционных методов, EMO использует прямой подход к преобразованию аудио в видео, отказываясь от 3D-моделей и ориентиров. Это означает более плавные переходы и более естественные экспрессии.
What distinguishes the app from competitors is its use of what's known as channels: Public or private feeds of photos and videos that can be set up by one person or an organization. The channels have become popular with on-the-ground journalists, aid workers and Ukrainian President Volodymyr Zelenskyy, who broadcasts on a Telegram channel. The channels can be followed by an unlimited number of people. Unlike Facebook, Twitter and other popular social networks, there is no advertising on Telegram and the flow of information is not driven by an algorithm. Meanwhile, a completely redesigned attachment menu appears when sending multiple photos or vides. Users can tap "X selected" (X being the number of items) at the top of the panel to preview how the album will look in the chat when it's sent, as well as rearrange or remove selected media. On Feb. 27, however, he admitted from his Russian-language account that "Telegram channels are increasingly becoming a source of unverified information related to Ukrainian events." Although some channels have been removed, the curation process is considered opaque and insufficient by analysts. Official government accounts have also spread fake fact checks. An official Twitter account for the Russia diplomatic mission in Geneva shared a fake debunking video claiming without evidence that "Western and Ukrainian media are creating thousands of fake news on Russia every day." The video, which has amassed almost 30,000 views, offered a "how-to" spot misinformation.
from vn
