EMO: Emote Portrait Alive – Biểu Cảm Nhân Vật Với AI Độc Đáo

EMO: Emote Portrait Alive là một khuôn khổ mới cho việc tạo video chân dung biểu cảm, phát triển bởi Linrui Tian, Qi Wang, Bang Zhang, và Liefeng Bo từ Viện Tính toán Thông minh, Nhóm Alibaba. Dự án này cho phép tạo ra video avatar biểu cảm với các biểu cảm khuôn mặt đa dạng và các tư thế đầu khác nhau chỉ từ một ảnh chân dung tham chiếu và âm thanh giọng nói. Giúp tạo nhân vật nói chuyện hoặc hát, với khả năng duy trì nhân dạng nhân vật qua thời gian dài. Đồng thời hỗ trợ nhiều ngôn ngữ cũng như phong cách chân dung khác nhau. 

Bạn có thể xem một số video demo ở bên dưới

Với một bức ảnh chân dung kèm tệp âm thanh, EMO có thể tự tạo ra video có thời lượng tối đa là 1 phút 30 giây. Điều đáng chú ý là sự chân thực của các video tạo ra bởi EMO, với chuyển động và biểu cảm khuôn mặt hoàn toàn trùng khớp với file âm thanh đầu vào.

Theo chia sẻ, EMO được huấn luyện từ một tập dữ liệu gồm hơn 250 giờ âm thanh từ các bài diễn thuyết, phim ảnh, chương trình truyền hình và buổi hòa nhạc. Do đó, thay vì dựa vào đầu vào hình ảnh như các công cụ AI khác, EMO có thể chuyển đổi trực tiếp dải âm thanh thành các khung hình video. Chính điều này đã giúp EMO nổi bật hơn so với các công cụ AI có tính năng tương tự như D-ID hay Heygen.

Nếu xét về độ hoàn thiện, thì D-ID sẽ phải khóc thét vì AI này. Cho những bạn nào chưa biết thì cách sử dụng D-ID như bài viết bên dưới nhé.

Tạo Video Người Nói Chuyện Bằng AI Với Chính Gương Mặt Của Bạn

Để cập nhật thêm thông tin về EMO: Emote Portrait Alive, hãy truy cập vào https://humanaigc.github.io/emote-portrait-alive/